Data Engineering Study #16「データカタログ入門」

2022/10/19(水)18:00 〜 20:30 開催

ブックマーク

#SaaS, #OSS, #インフラ

イベント内容

過去の Data Engineering Study のアーカイブはこちらからご視聴いただけます。

開催内容

概要

本イベントは、Infra Study Meetup を運営する Forkwell と、分析基盤向けデータ統合SaaS「trocco」の開発・運営を行う primeNumber による共催イベントです。データ分析に精通した講師をお招きし、データ分析基盤の「これまで」と「これから」を学ぶことを趣旨として開催いたします。
ゆずたそ氏（@yuzutas0）にモデレーターを依頼し、複数回にわたって、各回テーマに沿った内容で各分野でご活躍されているエンジニア／研究者に講演いただきます。

第16回「データカタログ特集回」

第14回のModern Data Stackでは、様々な最新の技術スタックが紹介されました。今回の勉強会では、その中の1つである「データカタログ」について深掘りして学んでいきます。データカタログとは、データ分析基盤に存在する様々な実データをカタログ化し、検索・参照を可能にするものです。また、各種メタデータを紐付けることによってデータの理解を促進するための仕組みです。実際にデータカタログを運用されている企業のご担当者をお呼びし、事例をお話しいただきます。

講演「LINEのData Platformにおけるデータ利活用を促進するためのData Catalogの開発」

島村信嗣 氏（@islandshinji）
LINE株式会社 Data Platform室 IU Devチームソフトウェアエンジニア

▍発表内容

LINE社はグローバルで約2億MAUを持つコミュニケーションアプリをはじめとした多数サービスを展開しています。この多数のサービスから生成されるデータには、多様な活用ニーズが存在します。私たちは、この多様なニーズに応えるために、Data Catalogを内製しました。本発表では、Data Lienageを中心とした提供機能でどのようにユーザーのデータ理解を促進し、業務改善を実現したかご紹介します。

講演「ZOZOのデータカタログ内製事例と、データカタログを整え続けるための仕組みづくりについて」

山本健太 氏（@yamamoto7）
株式会社ZOZO ZOZOTOWN開発本部・バックエンド1ブロック

▍発表内容

ZOZOでは膨大なデータを保有しているが、データベースに関する資料があまり整っていませんでした。そこで、カタログシステムを内製しました。既存ツールを利用しなかった理由やシステムに組み込んだロジック、活用事例、データカタログを整え続けるための取り組みについて紹介させていただきます。

講演「メタデータは地味だが役に立つ」

内藤純 氏（@jonnojun）
atama plus株式会社データサイエンティスト

▍発表内容

atama plus株式会社では最近メタデータ管理基盤を正式に導入しました。データエンジニアが不在の中で、どのような課題意識から導入を意思決定し、どのように普及させたのか、また結果としてどうのような効果があったのかを、具体的な事例として紹介します。

タイムスケジュール（目安）

時間	内容	発表者
18:00〜	司会より挨拶（10分）	primeNumber 小林寛和氏
18:10〜	講演（20分）「LINEのData Platformにおけるデータ利活用を促進するためのData Catalogの開発」	LINE株式会社島村信嗣氏
18:30〜	スポンサーLT（5分）	Forkwell
18:35〜	休憩（5分）
18:40〜	講演（20分）「ZOZOのデータカタログ内製事例と、データカタログを整え続けるための仕組みづくりについて」	株式会社ZOZO 山本健太氏
19:00〜	スポンサーLT（5分）	primeNumber 小林寛和氏
19:05〜	休憩（5分）
19:10〜	講演（20分）「メタデータは地味だが役に立つ」	atama plus株式会社内藤純氏
19:30〜	質疑応答（30分）	ゆずたそ氏 / ほか登壇者
20:00〜	アフタートーク / クロージング（10分）
20:15	完全終了

※ タイムスケジュールは目安です。完全解散20:15までの間で、より参加者にご満足いただける形で各コンテンツ時間が調整される場合がございます。
※ プログラムは変更となる可能性があります。随時こちらで更新いたします。

🎁 大盤振る舞い！　参加者限定、応募者全員プレゼント企画（Forkwell）

所定の条件を満たした方にもれなくゆずたそ氏が執筆された『実践的データ基盤への処方箋』をプレゼントいたします！

【キャンペーン応募の条件】
1. Forkwellに会員登録を行う
2. 「職歴」の欄に、最新の職務内容を100文字以上記入する
3. 「やりたい・目指したいこと」の欄に【データ分析・活用の領域で挑戦したいこと】を記載する。※指定文字数なし / 冒頭に【データ分析・活用の領域で挑戦したいこと】の文言を記入
4. スカウト受け取り設定をオンにする
5. 当日、キャンペーンフォームに応募資格を満たしたアカウント（ユーザー名）やその他項目を入力し、提出

既に会員の方でスカウト受け取り設定オンの方は2.3.5番の対応のみで応募できます！
（アンケートフォームURLはYouTube概要欄に記載します）

開催背景

Forkwell からのコメント

本イベントは、Infra Study Meetup に注目していただいた primeNumber さまからのお声がけで実現したイベントです。Infra Study Meetup とは主催する団体、扱うテーマが異なることから、別シリーズとして立ち上げました。Infra Study 参加者と共に得たイベントノウハウを継承し、データ分析領域でも学びの場を作ります。
本家 Infra Study にご参加いただいた方はもちろん、データ分析に関心のある方ならどなたでも参加可能です。エンジニアリングと密接に関わるデータ分析領域について楽しく学んでいただけましたら幸いです。
Forkwell 事業責任者赤川

primeNumber からのコメント

弊社はデータ分析基盤向けの総合支援サービス「trocco」を運営しているのですが、その中で「どういう分析基盤を作っていけばいいのか？」というご質問をよく伺います。そのような方向けに何か有益な情報をご提供できる場はないかと考えた時に、本イベントの開催を思いつきました。
そんなタイミングで、「Infra Study Meetup」という反響が大きいイベントがあるのを見つけ、「データ分析基盤」版を作りませんかとお声がけした所から開催に至りました。
これから分析基盤を作ろうとされている方や、現在運用中の基盤の改善アイデアを探している方に、有益な場に出来ればと思っております。
primeNumber 取締役執行役員CPO 小林寛和