そういえばBigQuery client経由だとstorage write APIが使えるんだった。書き込みなど早く出来たりしそう。airflow経由でも使えるか調べてみる
そういえばBigQuery client経由だとstorage write APIが使えるんだった。書き込みなど早く出来たりしそう。airflow経由でも使えるか調べてみる
Dataplexのデータリネージュを試してみたところ、10テーブル超のjoinしているとうまくリネージュが辿れないことがわかった。途切れちゃう。これは仕様?バグ?を問合せしてみる予定
Dataplexのデータリネージュを試してみたところ、10テーブル超のjoinしているとうまくリネージュが辿れないことがわかった。途切れちゃう。これは仕様?バグ?を問合せしてみる予定
Dataplexのカラムレベルリネージュ動いた。データの変換 と コピーだけがでていい感じ。データ変換だけに絞り込んだりもできて便利
Dataplexのカラムレベルリネージュ動いた。データの変換 と コピーだけがでていい感じ。データ変換だけに絞り込んだりもできて便利
Dataplexを試す。カラムレベルリネージュが動かないな。。。とおもったらまだ利用申請しないと動かない方のpreview版の機能だった。サポートに連絡して申請を入れた。
Dataplexを試す。カラムレベルリネージュが動かないな。。。とおもったらまだ利用申請しないと動かない方のpreview版の機能だった。サポートに連絡して申請を入れた。