Skip to main content

Cats - クリックログ

CATS から広告のクリックデータを取得しています。

前提​

主なデータの利用用途​

  1. 広告運用 PRO レポートの統合データ
    • 広告データと統合することで、広告の運用状況や広告動画の分析が可能になります
  2. 全社向けの広告クリックデータ
    • 主に新規チームが使います

データの更新頻度と取得期間​

更新頻度

  • 毎日

取得期間

  1. クリックログ、成果ログ、中間クリックログ
    • 前日分
  2. 成果削除ログ
    • 今月と先月分

      先月分の成果削除が月初に行われるので

データ責任者​

オーナー所属責任者（現在）前任
テクニカルオーナーand roots堀 順郎-
ビジネスオーナーFooot水野 海信-

関連サービス​

項目名所有者説明
CATSCATS 株式会社広告効果測定ツール。
Cloud Functionsand rootsサーバーレス環境で関数実行している。
BigQueryand rootsデータの格納先。
TROCCOprimeNumberETL ツール。
Slackand rootsデータ連携結果の通知先。

データフロー図​

TROCCO​

パラメータ設定​

Cloud Functions​

README.mdに記述しています。

BigQuery​

命名規則​

Raw_Hide_Cats_ScrapingSystem_[Table]
  • 現在は Hide のアカウントで全社運用しています
  • ストリーム ID は、CATS のユーザーIDを採用しています
    • ユーザーIDは管理画面で編集される可能性がありますが、変更されても設計的な影響はありません

エラー対応​

エラーの場合は Slack にエラーメッセージが届きます。

主な調査ポイント​

CATS 側のカラム数が増えていないか

  • CATS 側でカラム数が増えた場合エラーになります
    • 全カラムを取得するように設計しているので
  • Raw テーブル側に新規カラムを追加して対応してください

その他調査のポイント​

  • CATS の仕様が変更されていないか。
    • スクレイピングで取得しているのでエラーになります。
  • TROCCO と Cloud Functions、 dbt のログからエラーの原因を探ってください

参考サイト​

CATS