Dataform

Dataformでtype:’incremental’のとき気をつけるチェック項目

こんにちは、中村です。

今回がDataformに関して詰まったところの備忘録的な記事になります。

具体的にはテーブルタイプがincrementalのとき、実行画面の完全に実行するにチェックを入れると、増分実行ではなく、テーブルを全件再作成します。

この名称がちょっとわかりにくいですよね。?マークにカーソルを合わせると説明が表示されます。
いかにもincrementalと関係しそうな説明ですね。

どんなときにチェックを入れる?

では、どんなときにチェックを入れるのか?についてですが、おもに以下の2つの場合に有用みたいです。

  • 既存のDataformの集計やロジックを変更したときに、既存テーブルをまっさらにしてデータを追加できる。
  • incremental処理のミスや失敗で、データに重複や欠損が生じた場合に、完全リフレッシュで正しい状態に戻せる。

ちなみに、incrementalタイプでも初回は普通にテーブル作成ができるので、そういう用途では使わないようです。

AWS発のAIエージェントIDE「Kiro」を使用した仕様駆動開発を触ってみた。その➁前のページ

dbt Projects on Snowflakeで作成したプロジェクトのdocsを見る方法次のページ

ピックアップ記事

  1. 最速で理解したい人のためのIT用語集

カテゴリ
最近の記事
  1. Adobe WebSDK クロスドメイン計測【第2部】FPI…
  2. Adobe WebSDK クロスドメイン計測【第1部】ECI…
  3. Adobe Target Recommendations:g…
  4. Conversational Analytics APIでお…
  5. Looker Studioで日付フィルターの開始日・終了日の…
  1. Google Cloud Platform

    LookerStudioを知る。
  2. Amazon Web Services

    ELB (ALB・NLB・CLB) をサクッと学ぶ
  3. IT用語集

    API(Application Programming Interface)って…
  4. ブログ

    "Marketo"を使ってみて。パート2
  5. Adobe Analytics

    イベント前の時間とは-Adobe Analyticsの指標説明
PAGE TOP