Data Engineering Study #6「改めて学ぶ、BigQuery徹底入門」
イベント内容
本イベントは、Infra Study Meetup を運営する Forkwell と、分析基盤向けデータ統合SaaS「trocco」の開発・運営を行う primeNumber による共催イベントです。データ分析に精通した講師をお招きし、データ分析基盤の「これまで」と「これから」を学ぶことを趣旨として開催いたします。
開催内容
概要
本イベントでは、ゆずたそ氏(@yuzutas0)にモデレーターを依頼し、複数回にわたって、各回テーマに沿った内容で各分野でご活躍されているエンジニア/研究者に講演いただきます。
また、講演後には視聴者の方も参加できる二次会会場(Zoom)を用意しています。登壇者と共にデータエンジニアリングに関する学びを深めましょう。
開催背景
Forkwell からのコメント
本イベントは、Infra Study Meetup に注目していただいた primeNumber さまからのお声がけで実現したイベントです。Infra Study Meetup とは主催する団体、扱うテーマが異なることから、別シリーズとして立ち上げました。Infra Study 参加者と共に得たイベントノウハウを継承し、データ分析領域でも学びの場を作ります。
本家 Infra Study にご参加いただいた方はもちろん、データ分析に関心のある方ならどなたでも参加可能です。エンジニアリングと密接に関わるデータ分析領域について楽しく学んでいただけましたら幸いです。
Forkwell 事業責任者 赤川
primeNumber からのコメント
弊社はデータ分析基盤向けの総合支援サービス「trocco」を運営しているのですが、その中で「どういう分析基盤を作っていけばいいのか?」というご質問をよく伺います。そのような方向けに何か有益な情報をご提供できる場はないかと考えた時に、本イベントの開催を思いつきました。
そんなタイミングで、「Infra Study Meetup」という反響が大きいイベントがあるのを見つけ、「データ分析基盤」版を作りませんかとお声がけした所から開催に至りました。
これから分析基盤を作ろうとされている方や、現在運用中の基盤の改善アイデアを探している方に、有益な場に出来ればと思っております。
primeNumber 取締役執行役員CPO 小林寛和
こんなエンジニアにおすすめ
- データ分析に関わる事例を知りたい方
- 自社内にデータ分析基盤を作ろうと検討中の方
- 自社のデータ分析基盤をより効率的にしたいと考えている方
- データ分析領域に幅を広げてみたいソフトウェアエンジニア・インフラエンジニア
プログラム第6回「改めて学ぶ、BigQuery徹底入門」
第1回勉強会ではDWHとBIツールをテーマに、DWHとしてはBigQueryとRedshiftを題材として取り上げ、比較などを行ってまいりました。また、第5回ではSnowflakeを題材に取り上げ、深堀りしていきました。
今回はData Engineering Study参加者の中でも利用者が多い「BigQuery」を題材に取り上げ、Google Cloud Platformのエンジニアの方をお呼びして深堀りをしていきます。
勉強会の前半では、主に初心者〜中級者をターゲットに、BigQueryが生まれた背景やBigQueryが何故「速い・安い・うまい」のかを概論として講演いただきます。
後半ではBigQueryの論文を引用しながら、Disk IOを最適化するための仕組みやシャッフル最適化の仕組みなどを解説頂き、中級者以上の方にもお楽しみ頂ける内容を予定しております。
基調講演「あらためて入門するBigQuery: データ分析プラットフォーム」
寳野 雄太 氏(@yutah_3)
Google Cloud Japan G.K.
Head of Specialist Customer Engineering ( Analytics & DB )
▍発表内容
BigQueryはGoogle Cloudのデータ分析プラットフォームです。提供十年を超え、従来のDWHという領域だけに止まらず、データサイエンスやBI、DWH移行もサポートするデータ分析プラットフォームに進化しています。このセッションでは、BigQueryを中心としたGoogle Cloudのデータアナリティクスソリューションの価値をユーザーの観点と機能の観点から改めて入門します。
Deep Dive講演「データの価値を引き出す BigQueryのアーキテクチャ」
西村 哲徳 氏
Google Cloud Japan G.K.
▍発表内容
昨年10歳を迎えたBigQueryですが、この10年の間にデータ分析プラットフォームとして大きく進化し分析に纏わる様々な課題の解決をお手伝いしてきました。このセッションではBigQueryの進化の過程もみながらアーキテクチャの観点でどのようにデータ分析環境に求められるニーズを実現している かをご紹介します。
パネルディスカッション「Coming Soon.」
ゆずたそ 氏(@yuzutas0)
渡部 徹太郎 氏(@fetarodc)
Mobility Technologies データエンジニア
「ビッグデータ分析のシステムと開発がこれ1冊でしっかりわかる教科書」著者
山田 雄 氏(@nii_yan)
株式会社リクルート データエンジニア
塩崎 健弘 氏(@shiozaki)
ZOZOテクノロジーズ SRE部 エンジニア
▍内容 (BigQueryのエンジニアの方と、過去のData Engineering Study登壇者で対談形式のパネルディスカッションを行う予定です。内容は後日アップデート予定です)
タイムスケジュール(目安)
時間 | 内容 |
---|---|
19:30〜 | 司会より挨拶(10分) |
19:40〜 | 概論講演(20分) 寳野 雄太氏「あらためて入門するBigQuery: データ分析プラットフォーム」 |
20:00〜 | 質疑応答(10分) |
20:10〜 | スポンサーLT1(5分) Forkwell 重本 湧気 |
20:15〜 | 休憩(5分) |
20:20〜 | Deep Dive講演(20分) 西村 哲徳氏「データの価値を引き出す BigQueryのアーキテクチャ」 |
20:40〜 | 質疑応答(10分) |
20:50〜 | スポンサーLT2(5分) primeNumber 小林 寛和 |
20:55〜 | 休憩(5分) |
21:00〜 | パネルディスカッション(30分) 寳野 雄太氏、西村 哲徳氏、ゆずたそ氏、渡部 徹太郎氏、山田 雄氏、塩崎 健弘氏 |
21:30〜 | アフタートーク(15分) |
21:45 | 完全終了 |
※ タイムスケジュールは目安です。完全解散21:45までの間で、より参加者にご満足いただける形で各コンテンツ時間が調整される場合がございます。
※ プログラムは変更となる可能性があります。随時こちらで更新いたします。
これまでの勉強会で扱うテーマとアーカイブ動画
- 7/15(水)|第1回「モダンなDWH/BIツールの選び方と、実際の運用事例」
- 8/19(水)|第2回「データ収集基盤とデータ整備のこれまでとこれから」
- 9/16(水)|第3回「分析基盤をうまく組織に浸透させる方法」
- 11/04(水)|第4回「データ分析基盤の障害対応事例LT祭り」
- 12/02(水)|第5回「噂のSnowflake Deep Dive / 国内事例・他DWHとの比較」
参加方法
今回のオンライン勉強会は YouTube Live を使用してライブ配信いたします。
また、コメントや感想は Twitter、講演内容に関する質問は Slido へお願いいたします。
下記、各種URLよりご参加くださいませ!
▍イベント視聴用 YouTube Live URL
- 後日掲載させていただきます
▍質疑応答用 Slido URL
- https://sli.do/DataEngineeringStudy
▍Tweetリンク
- https://twitter.com/intent/tweet?hashtags=DataEngineeringStudy
ライブ配信終了後、アーカイブ動画の公開を予定しております。
当日の開催時間にライブ参加できない方も、こちらのページより参加申込みの上、アーカイブ動画をご視聴いただけます。
なお、Twitterタイムラインと連動したリアルタイムなイベント参加体験を重視するため、YouTube Liveの追いかけ再生はできない設定となりますこと、ご了承くださいませ。 配信中のプログラムからの視聴、あるいはライブ配信終了数時間後から再生可能になるアーカイブ動画をご視聴ください。
留意事項
- Forkwell、primeNumber の宣伝をさせていただく時間がございます。予めご了承ください。
- IT技術者の方を対象としたイベントのため、非エンジニアの方のご参加、ならびに同業に属する方の当イベント内でのリクルーティング活動につきましてご遠慮いただいております。
- イベントの風景を、Forkwellメディア上の記事(イベントレポート)に掲載することがございます。掲載を希望されない方は、当日Zoomチャットまたはイベントページ問い合わせフォームより、掲載希望されない旨をお伝えください。
- イベント参加時にご入力いただいた情報は、次のプライバシーポリシーに基づき、primeNumber のみで適切に扱います。 https://primenumber.co.jp/privacy/
また、ご参加者の方々が最大限楽しんで頂けるよう、運営サイドで参加にふさわしくないと判断させて頂いた方については、イベント中であろうとご退席をお願いすることがございます。
- 保険、宗教、ネットワークビジネスの勧誘が目的と見られる方
- その他運営サイドで参加が不適切だと判断した方 誠に恐れ入りますが、あらかじめご了承くださいませ。
主催・協力
主催/コミュニティ支援協賛
「成長し続けるエンジニアを支援する」サービスを運営する Forkwell
分析基盤向けデータ統合SaaS「trocco」の開発・運営を行う primeNumber
後援
天神放送局様にライブ配信代行として協力いただいております。
天神放送局はライブ配信を広めることで「機会格差をなくす」ことをミッションとしたライブ配信ユニットです。
コミュニティイベントが増え続ける中、コンテンツを熱意ある人に届けるために活動しています。
注意事項
※ 掲載タイミングや更新頻度によっては、情報提供元ページの内容と差異が発生しますので予めご了承ください。
※ 最新情報の確認や参加申込手続き、イベントに関するお問い合わせ等は情報提供元ページにてお願いします。
新規会員登録
このイベントに申し込むには会員登録が必要です。
アカウント登録済みの方はログインしてください。
※ ソーシャルアカウントで登録するとログインが簡単に行えます。
※ 連携したソーシャルアカウントは、会員登録完了後にいつでも変更できます。