WORKS

開発・運用実績

10家電デバイス再生・視聴ログ分析基盤

概要

家電デバイスから送信される再生・視聴ログを収集・分析する基盤の開発を担当しました。

ユーザーごとの視聴傾向を把握できるようにログを集計し、サービス側での活用を支援する仕組みです。

特徴

  • 再生履歴を集計し、ユーザー単位での視聴傾向を分析可能に  
  • AWSを活用した大規模ログの自動処理基盤を構築
  • ワークフローによる処理自動化で運用負荷を軽減

技術要素

  • AWS
    • EMR(on EC2 / Serverless)
    • Lambda
    • Step Functions
    • EventBridge
    • DynamoDB
    • OpenSearch
    • Managed Workflows for Apache Airflow
    • S3
    • CloudFormation
  • 分析基盤: Databricks  
  • 開発言語: Python / PySpark  

弊社の対応ポイント

  • データ収集・分析に適した構成を検討する技術検証から参画
  • AWSやデータ処理基盤を組み合わせ、設計・開発・構築を担当
  • 短期間での実装を行い、安定した基盤の立ち上げに貢献

成果

  • 家電デバイスからのログを安定的に収集・処理できる仕組みを構築
  • 視聴傾向を可視化できるデータを提供し、上位システムでの活用を可能に