ローカル dbt で BigQuery への認証を行う

1. はじめに

dbt も BigQuery も経験それなりにあるものの dbt x BigQuery をやったことがなかったので認証方法を知ったのが今となります。

2. dbt のドキュメントを参照してみる

OAuth を使った認証方法は以下のドキュメントに記載されています。

https://docs.getdbt.com/docs/core/connect-data-platform/bigquery-setup#local-oauth-gcloud-setup

ではあるのですが、実際のログイン方法として紹介されているコマンドは少し違うようで、代表的なものは以下のような感じです。

dbt CoreでローカルからBigQueryを操作するためのセットアップ方法 | DevelopersIO

記事でよく見かけるものを実行していきます。

3. 認証手順

3.1. profiles.yml の設定

以下のような記載が含まれていれば OK

method: oauth を指定していることがポイントです。

~/.dbt/profiles.yml

my_dbt_project:
  target: dev
  outputs:
    dev:
      type: bigquery
      method: oauth
      project: my-google-cloud-project
      threads: 4
      schema: my_schema

3.2. アプリケーション向けのログイン

以下のコマンドにより dbt が Google Cloud の API を呼び出せることになります。

$ gcloud auth application-default login

4. おわりに

いま手元では1環境にしかログインしないのであまり深く理解していなくても大丈夫ですが、複数環境にログインする際にもうちょっと深く理解しておきます。