「大量データ、複雑な集計、膨大な同時アクセス」に負けないデータアーキテクチャとは？ -Snowflakeを活用したシステムマイグレーションからデータ基盤構築の事例-

2023年6月21日に開催されたオンラインイベントのアーカイブ動画となります。

イベントページ：https://techplay.jp/event/905543

-------------------------

▼イベント概要

日々増加し続ける膨大なデータや複雑になっていく分析要件をクリアするためには、どのようなプロダクトを選び、どんなデータ基盤を作ればよいのか、悩みを抱えているエンジニアも増えているのではないでしょうか。

本勉強会では、データ基盤構築や運用に携わっているエンジニアを対象に、市場調査分野で国内首位のインテージグループが保有する大量データを取り扱うマーケティングシステムにフォーカスし、「大量データ、複雑な集計、膨大な同時アクセス」に負けないデータアーキテクチャを作り上げるまでの挑戦/試行錯誤から得た知見やぶつかった課題、今後の展望などをシェアしていきます。

【登壇内容(一部抜粋)】

〇クラウドデータウェアハウス「Snowflake」をなぜ採用したのか

〇既存システムからの大規模なマイグレーションでの苦労

〇これからやってくる「データコラボレーションの世界」

【インテージグループとは】

日本で唯一、消費・販売の両パネル調査網を持っており、1960年の創業以来、生活者理解の進化と深化に向け、常にデータと向き合い、最新のテクノロジーを用いたデータ活用の在り方を追求してきました。 現在では、生活者のあらゆる側面を捉え、商品購入、サービス利用、メディア接触、行動、感情など、生活者を360°理解できるデータ・リサーチ・プラットフォームを揃え、幅広く深い生活者インサイトを提供しています。

【インテージテクノスフィア社について】

インテージグループの各マーケティングシステムはインテージテクノスフィアが提供しており、「売上No.1」表記のもとになる「全国小売店パネル調査」のデータ処理～活用をはじめ、インテージのデータとお客様企業が保有するデータを掛け合わせ、データ価値を高めるための「データ基盤構築」までを一手に担っています。

＜Chapter＞

00:00:00 オープニング

00:01:35 インテージグループがSnowflakeへ至るまでの試行錯誤

00:20:00 マーケティングデータ提供・分析システムの大規模刷新の裏話

00:40:07 POSのデータ統合から考える「データ分析基盤」

00:59:28 Q&A

01:05:00 クロージング

#インテージテクノスフィア#intage-technosphere#Snowflake#アーキテクチャ#ビッグデータ#データマイニング#Hadoop#Meetup#ライトニングトーク#TECHPLAY