Databricksで作成したデータをSnowflakeから読み書きする。
今日のゴール DatabricksのUnityCatalogのデータをSnowflakeから読み込む。 SnowflakeからDatabricksへTable単位で書き込む。 Databrick...
0
0
Comment0
23 search resultsShowing 1~20 results
Stocked
You need to log-in
WSL環境でdbt-mcpを動かす。
3行まとめ WSLからはデフォルトで.envを読み込んでくれないので、exportかsetしておく必要がある。 Claude Code Ubuntu 24.04.1 LTS → 動く(ただし日本...
2
0
Comment0
謎のスプレッド演算子 ** が進化していた！(その名はExpansion operators)
2025年3月に発見された、Snowflakeの演算子 ** が、いつの間にかテーブルの検索結果にも使えるようになっていたのでお知らせします。 発見当初は↓みたいな感じで使えて、カラムには対応し...
2
0
Comment0
dbt-osmosisとdbt persist_docs でメタデータ管理がらくちんになりそう。でも起点のメタデータはどうするべき？
「SnowflakeのCopilotちゃんを賢く使うには、Table/Viewのカラムにきちんとコメントを入れて、検索されやすいようにしておくことが重要」と聞きまして、 カラムのdescript...
1
0
Comment0
SnowflakeのNotebookをどこのDB.SCHEMAに作成したか忘れたときに確認する方法
このNotebook、どこのスキーマに作ったっけ？って作成した翌日以降によく起こるのでメモ。 python コード session = get_active_session() session ...
1
0
Comment0
Snowflakeでmatplotlibのグラフに日本語フォントを表示させたい
1行まとめ Snowflake Managed Stages にフォントファイルを置いて、それを呼び出す。 詳細 日本語フォントをダウンロードしてくる https://moji.or.jp/ip...
1
0
Comment0
Terraform Snowflake provider v1.0.3 環境変数設定
バージョン上がったら、また環境変数の設定方法が変わってたのでメモ。 Snowflake へ、terraform用key-pair認証ユーザで接続する時の場合です。 export SNOWFLAK...
0
0
Comment0
dbt のfor文でkey,val をぐるぐるするサンプルと、n回繰り返すサンプル
1つのテーブルにkeyとvalが複数あって、それを縦に並べたいときがあるので、組み合わせを定義しといて、あとはunionで繋げるときのサンプル。 {% set dict = {'column_...
0
0
Comment0
ECSで建てたRedashでコマンドを叩きたい
前提 AWS CLI を使う 準備 AWS Session Manager Plugin をインストールする 実行手順 AWS コンソールとかから、ECSの該当クラスターのタスクIDを取ってくる...
0
0
Comment0
Snowflake Terraformで作成したTagまわりのリソースがエラーになったときのリカバリ方法メモ
久々にSnowflake Terraform でバグを引いたので、リカバリ手順メモ。 Actual Behavior Error: sql: Scan error on column index...
0
0
Comment0
SnowflakeでManaged Account に、dbtで作成したTableをシェアする。
Managed Account とは？ プロバイダーアカウント（自分が利用しているSnowflakeアカウント）から、子分のリーダーアカウント（読み取り専用アカウント）を作成できる （読み取り専...
0
0
Comment0
Snowflake World Tour 2024 コミュニティ枠 LEGEND OF THE DATA HEROES ～データクリスタルの伝説～ リアルコンテンツ SQL輪投げの話
Snowflake World Tour、超楽しかったです。 今回は、SnowVillageのスタッフで参加させてもらったので、その話を書きます。 SQL輪投げ 写真の右上に問題文があるので、【...
3
0
Comment0
dbtでsnowflake に作成してあるUDF(ユーザ定義関数)を呼び出したい
予めsnowflake環境にfunctionが作成してあって、それをdbt cloudから呼び出したい create or replace function my_db.my_schema.fu...
0
0
Comment0
snowflake terraform provider version 0.50 -> 0.90 に上げた話
version up のきっかけ terraform-provider-snowflakeのGRANTまわりが大幅に変わった。 → 2024/06/26にこれまでのgrant関係のリソースが使え...
2
1
Comment0
Raspbian Stretchで"iface eth0 inet dhcp"って書きたい。
Raspbian StretchでNode-redとDALIを動かすときにネットワーク周りでハマったのでメモ。 /etc/network/interfacesにDHCP設定すると、起動時にdhc...
7
8
Comment0
apex:unix timeをDateTime型に変換する。
Long型で切っておいて、1000をかける。 Integer型だとうまくいきません。 Long unixTime; unixTime = 1456371643; DateTime dateIns...
1
0
Comment0
文字列をタブ区切りで分割するけど、スペース分割はしたくないとき
シェルでファイルから読み込んだ文字列をタブ区切りのみで分割したいときに、IFSの指定でハマったのでメモ。 tabSample.sh # !/bin/sh # お試し文字列 tData="tab1...
8
12
Comment0
Windows7→[VMware]→Ubuntu1204 共有フォルダが見えなくなった時の対処方法
Ubuntu側から /mnt/hgfs/ 以下に設定した共有フォルダが見えなくなったら、 vmware-tools-distribを再インストールすればいいらしいが、 うまくいかないのでアンイン...
3
3
Comment0
c#で.xlsから.xlsxへ変換する
[参考サイト] http://convertxsltoxlsx.blogspot.jp .xlsファイルを開く→.xlsx形式で保存→.xlsファイルを削除。 参照マネージャー→COM→Micr...
11
10
Comment1
GASからYouTube関係のサービスが増えたのでやってみたよ。
今日のGoogleAppsScriptのアドベントカレンダーに隙間があったので、あわてて参加します。 よろしくおねがいします。 先日、このようなうれしいお知らせが出ていたので、さっそく写経してみ...
11
9
Comment1
23 search resultsShowing 1~20 results
Qiita is a knowledge sharing service for engineers.
- You can follow users and tags
- You can stock useful information
- You can make edit suggestions for articles