Data Engineering Study #29 今だから学びたいDatabricks徹底活用術
イベント内容
過去の Data Engineering Study のアーカイブはこちらからご視聴いただけます。
開催内容
概要
本イベントは、Infra Study Meetup を運営する Forkwell と、データ基盤の総合支援サービス「TROCCO®️」の開発・運営を行う primeNumber による共催イベントです。データ分析に精通した講師をお招きし、データ分析基盤の「これまで」と「これから」を学ぶことを趣旨として開催いたします。
複数回にわたって、各回テーマに沿った内容で各分野でご活躍されているエンジニア/研究者に講演いただきます。
質疑応答の時間には、ゆずたそ氏(@yuzutas0)にもご参加いただきます。
プログラム第29回「今だから学びたいDatabricks徹底活用術」
Databricks。Databricksは何が優れているのか、他のデータウェアハウスと何が違うのかを知りたい方も多いのではないでしょうか?
本イベントでは、Databricks社の桑野さんよりレイクハウスアーキテクチャやDatabricksの強みについて解説いただきます。 さらに、実際にDatabricksを活用するお二人に、それぞれの企業でのDatabricksの活用事例をお話しいただきます!
基礎から応用まで、今だからこそ知りたいDatabricksの最前線をお届けします!
講演「Databricksで完全履修!オールインワンレイクハウスは実在した!」
桑野 章弘 氏(@kuwa_tw)
データブリックス・ジャパン株式会社 ソリューションアーキテクト
事業会社のインフラエンジニア、パブリッククラウドのSAを経て2023年10月よりデータブリックスに入社、主にデジタルメディア系のお客様を担当。ドラクエ3のパーティは勇者武闘家魔物使い商人です。
▍発表内容
Databricksのことを皆様御存知でしょうか?
Databricksはレイクハウスアーキテクチャっていうけどイマイチなんだかわからない、、、みたいな人も多いのではないでしょうか?今回はDatabricksで実現できる世界と、他のサービスと違う部分についてわかりやすくお話できればと思います!アマ◯ンの奥地にはいきません!
事例講演①「人不足・時間不足を言い訳にせずDatabricks をうまく利用する」
星野 玲央奈 氏(@reonah6)
株式会社SalesNow データエンジニア
通信キャリア/リテールを経て現職。インフラ領域のことを好むデータエンジニア。2023年6月よりDatabricks ユーザ。
最近は、Databricks の Model Serving Endpoints の 負荷テストについて試行錯誤しています。
▍発表内容
エンジニア数人の組織ながら、Databricksを活用しています。
少人数が故に、いろいろなことが後回しになってしまい、多くの問題に直面していました。
どのような問題に直面し、どのように解決したか?をお話する予定です。
事例講演②「出版社こそデータドリブンに! Databricksで叶える集英社の未来を創るデータ活用術」
椋林 淳一 氏(@mukku_analyst)
株式会社集英社 IT戦略企画部データマネジメント室
合同会社DMM. com
Retty株式会社
株式会社リッチメディア ※ 現 株式会社シェアリング・ビューティー
▍発表内容
集英社は、各編集部が保持するデータをDatabricksに統合し、マンガアプリを中心にデータ分析とダッシュボード構築を進めています。今後は、集英社IDを活用してユーザを一意に識別し、横断的なデータ分析を強化する予定です。その中身の一部を紹介します。
タイムスケジュール(目安)
| 時間 | 内容 |
|---|---|
| 19:00 | オープニング(5分) |
| 19:05 | 講演①(40分) 桑野 章弘 氏「Databricksで完全履修!オールインワンレイクハウスは実在した!」 |
| 19:45 | 質疑応答(10分) |
| 19:55 | 共催LT1(5分)Forkwell |
| 20:00 | 休憩(5分) |
| 20:05 | 事例講演①(20分) 星野 玲央奈 氏「人不足・時間不足を言い訳にせずDatabricks をうまく利用する」 |
| 20:25 | 質疑応答(10分) |
| 20:35 | 共催LT2(5分)primeNumber |
| 20:40 | 休憩(5分) |
| 20:45 | ゲスト講演②(20分) 椋林 淳一 氏「出版社こそデータドリブンに! Databricksで叶える集英社の未来を創るデータ活用術」 |
| 21:05 | 質疑応答(10分) |
| 21:15 | アフタートーク&クロージング(15分) |
| 21:30 | 終了予定 |
※ タイムスケジュールは目安です。完全終了21:30までの間で、より参加者にご満足いただける形で各コンテンツ時間が調整される場合がございます。
※ プログラムは変更となる可能性があります。随時こちらで更新いたします。
開催背景
Forkwell からのコメント
本イベントは、Infra Study Meetup に注目していただいた primeNumber さまからのお声がけで実現したイベントです。Infra Study Meetup とは主催する団体、扱うテーマが異なることから、別シリーズとして立ち上げました。Infra Study 参加者と共に得たイベントノウハウを継承し、データ分析領域でも学びの場を作ります。
本家 Infra Study にご参加いただいた方はもちろん、データ分析に関心のある方ならどなたでも参加可能です。エンジニアリングと密接に関わるデータ分析領域について楽しく学んでいただけましたら幸いです。
primeNumber からのコメント
弊社はデータ基盤の総合支援サービス「TROCCO®️」を運営しているのですが、その中で「どういう分析基盤を作っていけばいいのか?」というご質問をよく伺います。そのような方向けに何か有益な情報をご提供できる場はないかと考えた時に、本イベントの開催を思いつきました。
そんなタイミングで、「Infra Study Meetup」という反響が大きいイベントがあるのを見つけ、「データ分析基盤」版を作りませんかとお声がけした所から開催に至りました。
これから分析基盤を作ろうとされている方や、現在運用中の基盤の改善アイデアを探している方に、有益な場に出来ればと思っております。
これまでの勉強会で扱ったテーマとアーカイブ動画
- 2020/07/15(水)|第1回「モダンなDWH/BIツールの選び方と、実際の運用事例」
- 2020/08/19(水)|第2回「データ収集基盤とデータ整備のこれまでとこれから」
- 2020/09/16(水)|第3回「分析基盤をうまく組織に浸透させる方法」
- 2020/11/04(水)|第4回「データ分析基盤の障害対応事例LT祭り」
- 2020/12/02(水)|第5回「噂のSnowflake Deep Dive / 国内事例・他DWHとの比較」
- 2021/02/03(水)|第6回「改めて学ぶ、BigQuery徹底入門」
- 2021/04/06(火)|第7回「Redshift最新アップデートと活用事例」
- 2021/06/02(水)|第8回「BIツール特集-OSS・商用の上手い使い分け」
- 2021/08/03(火)|第9回「企業規模別データエンジニア組織の作り方」
- 2021/10/06(水)|第10回「王道BIツール特集 Tableau / PowerBI / Googleデータポータル」
- 2021/12/13(月)|第11回「6社のデータエンジニアが振り返る2021」
- 2022/02/09(水)|第12回「エンジニアのための「データ可視化」入門」
- 2022/04/06(水)|第13回「ELT・データモデリングツール特集回」
- 2022/06/08(水)|第14回「Modern Data Stack特集」
- 2022/08/03(水)|第15回「Reverse ETL 特集回」
- 2022/10/19(水)|第16回「データカタログ入門」
- 2022/12/14(水)|第17回「6社のデータエンジニアが振り返る2022」
- 2023/02/15(水)|第18回「データ指向アプリケーションデザイン」
- 2023/04/20(木)|第19回「データエンジニアのキャリアを考える」
- 2023/06/30(金)|第20回「10年戦えるデータ分析入門」
- 2023/08/30(金)|第21回「Azureのデータ分析サービスの現在と未来」
- 2023/12/12(金)|第22回「5社のデータエンジニアが振り返る2023」
- 2024/03/05(火)|第23回「Data orchestration 特集」
- 2024/06/27(木)|第24回「データドリブン組織を支える技術」
- 2024/08/28(水)|第25回「データカタログの現在地」
- 2024/10/29(火)|第26回「データ活用における個人情報データの取り扱い」
- 2024/12/10(火)|第27回「データ基盤振り返りLT会(オフライン開催)」
- 2025/02/27(木)|第28回「データ基盤のCI/CD」
留意事項
- Data Engineering Study コミュニティガイドライン を事前にご確認ください。
- イベント参加時にご入力いただいた情報は、次のプライバシーポリシーに基づき、primeNumber のみで適切に扱います。 https://primenumber.co.jp/privacy/
主催・協力
主催/コミュニティ支援協賛
ITエンジニアのキャリアに本気で向き合う転職サイト Forkwell(フォークウェル)
データ基盤の総合支援サービス「TROCCO®️」の開発・運営を行う primeNumber
注意事項
※ 掲載タイミングや更新頻度によっては、情報提供元ページの内容と差異が発生しますので予めご了承ください。
※ 最新情報の確認や参加申込手続き、イベントに関するお問い合わせ等は情報提供元ページにてお願いします。
新規会員登録
このイベントに申し込むには会員登録が必要です。
アカウント登録済みの方はログインしてください。
※ ソーシャルアカウントで登録するとログインが簡単に行えます。
※ 連携したソーシャルアカウントは、会員登録完了後にいつでも変更できます。



