データ分析パイプラインの構築

概要

大手EC広告媒体のデータを活用したデータ分析パイプラインの構築を支援。
GCPのマネージドサービスを活用し、自動化されたデータ連携基盤を実現しました。

課題

• 広告媒体データの収集・加工が手動で行われており、分析までのリードタイムが長い
• データサイエンティストのコードが属人化しており、開発効率に課題

ソリューション

• 大手EC広告媒体のデータを活用したデータ分析パイプラインを構築
• EventarcによるGCS-BigQuery間の自動データ連携を実現
• データサイエンティストのコードを改善し、開発効率を向上

成果

• データ連携の自動化により、分析までのリードタイムを短縮
• コード改善によるデータサイエンスチームの開発効率向上

技術スタック

• データ基盤: GCP (BigQuery, GCS, Eventarc)
• 開発: Python