Adobe Analytics

Adobe Analytics: DWHレポートの日付列をBigQueryのDate型として扱う

こんにちは、エクスチュアの権泳東(コン・ヨンドン)です。
今回はAdobeDWHレポートとBigQueryの連携でつかえる小技です。

AdobeAnalyticsのデータウェアハウスレポートをCSV配信する時に、「精度」を「日」にすると、ファイルの一列目に「日付」が入ります。

DWHレポートに日付を追加

しかし、この日付が厄介です。
BigQueryにそのままロードするとこうなります。

日付フォーマットが。。。

ExcelでCSVを開くならこれでも良いんですが、BigQueryで扱うならこの「December 17, 2018」という文字列をPARSE_DATE関数で日付型に変換すると扱いやすくなります。

SELECT PARSE_DATE('%B %e, %Y', date) AS date
FROM `mydataset.mytable`

結果はこのとおり、YYYY-MM-DD形式のDATE型になります。

PARSE_DATE関数の引数についてはこちらに詳細が記載されてます。
PARSE_DATE

おまけ

AdobeのDWHの日付カラムと違って、Adobe Datafeedならばhit_time_gmtというヒットタイムスタンプが存在します。
しかしhit_time_gmtのタイムゾーンは読んで時のごとくGMTのため、DATE関数でタイムゾーン「Asia/Tokyo」を指定するとJSTになります。

SELECT DATE(hit_time_gmt, 'Asia/Tokyo') as hit_time_jst
from `mydataset.datafeed`

今回はAdobeDWHレポートのCSVファイルの日付カラムをBigQueryで日付型として扱うための小技について紹介しました。

弊社ではAdobe認定エキスパート資格とGoogleCloud認定プロフェッショナル・データエンジニアの資格を保持したエンジニアがデータ分析基盤の構築支援業務を行っております。
お問い合わせはこちらからどうぞ

関連記事

  1. Google BigQuery

    Google Apps Scriptを使ってスプレッドシートからBigQueryのテーブルを更新する…

    こんにちは、エクスチュアの権泳東(コン・ヨンドン)です。今回はAp…

  2. Adobe Analytics

    Adobe Analytics: DWHレポートをAWSのS3バケットに配信する

    こんにちは、エクスチュアの権泳東(コン・ヨンドン)です。今回は、A…

  3. Adobe Analytics

    Adobe Analytics:セグメントの落とし穴:滞在時間がおかしくなる

    Adobe Analyticsの持つ機能の中でも特に強力で便利な機能の…

  4. GA 360 Suite

    BigQuery: Google Analytics 360のネストされたデータをフラット変換するS…

    こんにちは、エクスチュアCTOの権です。今回はGA360のBi…

  5. Cloud Dataproc

    BigQueryテーブルをAVRO形式でエクスポートしてHiveで扱う

    こんにちは、エクスチュアCTOの権です。今日も普段あまり使わな…

  6. Adobe Analytics

    AdobeAnalytics: GTMのdataLayerをAdobeAnalyticsの処理ルール…

    こんにちは、エクスチュアCTOの権です。今回はGoogle T…

最近の記事

  1. AA + GA : SafariのITP2.1に備えてphp…
  2. Tableau:分かりやすいLOD – EXCL…
  3. Tableau:スペース区切りで複数検索が出来る検索ボックス…
  4. Google Analytics 360 + BigQuer…
  5. Looker: 公開されているLookML Blockをクロ…
  1. Google BigQuery

    Tableau : BigQueryでLOD計算が使えない場合の対処法
  2. Adobe Analytics

    Adobe AnaltyicsとGoogle Analytics の「生Webビ…
  3. Tableau

    TableauでTreasure Data上のデータへ接続する方法(2019/1…
  4. Adobe Analytics

    Adobe Analytics + Google BigQueryでよく使うSQ…
  5. Google BigQuery

    Tableau×BigQueryをコスパ良く使う方法
PAGE TOP