お疲れ様です。コーヒーです。 今回はBigQueryの「An internal error occurred and the request could not be completed」エラーについてと、その対処法についてです。 エラーの状況について digdag+embulkでbqのクエリを実行時発生 発生タイミングは不定期 …

お疲れ様です。コーヒーです。 今回はDigdag+Embulkをで変数を使用して、分かりやすく、使いまわしやすく、修正しやすいプログラムを目指していこうと思います。 前回作成した処理を変数を使用したものに変更していこうと思いますので、よければそちらも確認…

Digdagとembulkを組み合わせた、簡単な処理について解説しています。 今回はBigQueryからs3にファイルを転送する手順となっています。