Adobe Analytics

Adobe Analytics: DWHレポートの日付列をBigQueryのDate型として扱う

こんにちは、エクスチュアの権泳東(コン・ヨンドン)です。
今回はAdobeDWHレポートとBigQueryの連携でつかえる小技です。

AdobeAnalyticsのデータウェアハウスレポートをCSV配信する時に、「精度」を「日」にすると、ファイルの一列目に「日付」が入ります。

DWHレポートに日付を追加

しかし、この日付が厄介です。
BigQueryにそのままロードするとこうなります。

日付フォーマットが。。。

ExcelでCSVを開くならこれでも良いんですが、BigQueryで扱うならこの「December 17, 2018」という文字列をPARSE_DATE関数で日付型に変換すると扱いやすくなります。

SELECT PARSE_DATE('%B %e, %Y', date) AS date
FROM `mydataset.mytable`

結果はこのとおり、YYYY-MM-DD形式のDATE型になります。

PARSE_DATE関数の引数についてはこちらに詳細が記載されてます。
PARSE_DATE

おまけ

AdobeのDWHの日付カラムと違って、Adobe Datafeedならばhit_time_gmtというヒットタイムスタンプが存在します。
しかしhit_time_gmtのタイムゾーンは読んで時のごとくGMTのため、DATE関数でタイムゾーン「Asia/Tokyo」を指定するとJSTになります。

SELECT DATE(hit_time_gmt, 'Asia/Tokyo') as hit_time_jst
from `mydataset.datafeed`

今回はAdobeDWHレポートのCSVファイルの日付カラムをBigQueryで日付型として扱うための小技について紹介しました。

弊社ではAdobe認定エキスパート資格とGoogleCloud認定プロフェッショナル・データエンジニアの資格を保持したエンジニアがデータ分析基盤の構築支援業務を行っております。
お問い合わせはこちらからどうぞ

関連記事

  1. Adobe Analytics

    Adobe Analytics:セグメントの落とし穴:滞在時間がおかしくなる

    Adobe Analyticsの持つ機能の中でも特に強力で便利な機能の…

  2. Adobe Analytics

    Adobe Analytics: Webサイト内で発生したJavascriptエラーの内容をAdob…

    こんにちは、エクスチュアCTOの権です。今日は、Webサイト内で発…

  3. Adobe Analytics

    Adobe Analytics: BigQuery+Lookerでアトリビューション分析

    こんにちは、エクスチュアの権泳東(コン・ヨンドン)です。今回はAd…

  4. Adobe Analytics

    Adobe Analytics: データフィードをBigQueryで集計する

    こんにちは、エクスチュアCTOの権です。前回のブログで、Ado…

  5. Adobe Analytics

    Adobe Analytics: データフィードをGoogle Compute EngineのLin…

    こんにちは、エクスチュアCTOの権です。もはやWeb解析だけの時代…

  6. Adobe Analytics

    Adobe Analytics: レガシーs_code.jsのリミッターを解除してeVar76以上を…

    こんにちは、エクスチュアの権泳東(コン・ヨンドン)です。今回はいま…

最近の記事

  1. Azure DatabricksでAdobe Analyti…
  2. GoogleDataStudio:複数のデータソースにフィル…
  3. Node.js+GAE: 日本語自然文を形態素解析してネガポ…
  4. Tableauで半円型のゲージを作る方法
  5. Looker: サンバーストグラフを使って階層データを可視化…
  1. Adobe Analytics

    Adobe Analytics:Report Builderの小技:リクエストの…
  2. Adobe Analytics

    Looker: Sankey Diagramを使ってサイト内フローを可視化する
  3. Cloud Dataflow

    データアナリスト/データエンジニア向けNext19まとめ
  4. Google Cloud Platform

    Looker: LookerbotをGoogle Cloud Platformで…
  5. Adobe Analytics

    Adobe Analytics: Webサイト内で発生したJavascriptエ…
PAGE TOP