開催概要

「AIに任せた処理の品質、正直なところ、目視レビューと勘で判断している。」

LLMを組み込んだプロダクトを運用しているチームなら、多かれ少なかれ心当たりがあるはずです。生成AIの出力は毎回変わるのに、その良し悪しを判定する仕組みは、従来のテストの延長のままではうまく作れません。

いまUSでは、この問題に専任で向き合う「Evalsエンジニア」という職種が急速に確立しつつあります。CursorやHarvey、Sierra、Cognitionといった応用AIスタートアップは、最初の技術者10人のうちにEvalsエンジニアを採用しており、O'Reillyからは専門書「Evals for AI Engineers」の刊行も予定されています。AIが生成する時代、ボトルネックは「作ること」から「良し悪しを判定すること」へ移りつつある。評価を勘とレビューではなく、システムとして作り込む。それがEvalsという専門領域です。

日本ではまだ「評価は大事」という総論の段階で、職種としてのEvalsエンジニアはほとんど知られていません。本イベントでは、実際にLLMプロダクトの評価基盤づくりに取り組む各社のエンジニアをお招きし、Evalsエンジニアの仕事の実像を、ランチタイムの60分で先取りします。現場で培われたご経験や知見を、ぜひ参加者の皆さまにお届けいただけますと幸いです。

こんな方におすすめ

• LLM機能を本番運用していて、品質担保が属人的なレビューと勘に頼っている自覚があるエンジニア
• AIエージェントやLLMアプリのテスト・QA戦略を設計する立場のQAエンジニア・テックリード
• 評価（Evals）を専門性として、AI時代の次のキャリアを考えたいML・データエンジニア

---

登壇者情報

講演①「TBD」

坂本 慧 氏（LinkedIn）

freee株式会社 AIラボ AIエンジニア
2021-2023 文書画像認識・物体検出のモデル開発
2023-2025 AIチャット / AIエージェントによるカスタマーサポート自動化
2025-現在 業務エージェント / サポートエージェントの Evals

講演②「TBD」

宇野 智 氏（LinkedIn）

弁護士ドットコム株式会社　データ本部 AI 技術開発部 AI エンジニア
＜2022 - 2025＞ LINE ヤフー株式会社　検索基盤のバックエンド開発
＜2026 - 現在＞ 弁護士ドットコム株式会社　リーガル領域の特化型生成AIプロダクトの開発・評価

---

タイムスケジュール

時間	内容	登壇者
12:00	オープニング（5分）
12:05	講演①（15分） 　「TBD」	坂本 慧 氏
12:20	講演②（15分） 　「TBD」	宇野 智 氏
12:35	Forkwell LT（5分）	Forkwell 運営
12:40	Q&Aセッション（15分）	坂本 慧 氏、宇野 智 氏
12:55	クロージング（5分）
13:00	完全終了

※ プログラムは変更となる可能性があります。随時こちらで更新いたします。

---

主催・協力

主催：Forkwell（フォークウェル）

運営：株式会社フォークウェル

年収800万円以上のエンジニア転職なら Forkwell
職務経歴や経験技術などのプロフィールを登録できるポートフォリオサービス、ITエンジニアに特化した求人・転職支援サービス、技術イベントやセミナーの開催を通じて、ITエンジニアのキャリア支援を行っています。

---

注意事項

• 当イベントの内容およびスケジュールは、予告なく変更となる場合があります。予めご了承ください。
• Forkwell の宣伝をさせていただく時間がございます。予めご了承ください。
• エンジニアの方を対象としたイベントのため、非エンジニアの方のご参加、ならびに同業に属する方の当イベント内でのリクルーティング活動につきましてご遠慮いただいております。
• ブログやSNS等で当イベントに関する発信を行う際は、公序良俗に反する内容のないよう、ご協力をお願いします。
• 当イベントはオンライン開催のため、双方の通信状況により音声や映像に乱れがある場合がございます。
• 配信トラブル時のアナウンスはX(旧Twitter)よりイベントハッシュタグをつけて行います。
• また、ご参加者の方々が最大限楽しんで頂けるよう、運営サイドで参加にふさわしくないと判断させて頂いた方については、イベント中であろうとご退席をお願いすることがございます。
• 保険、宗教、ネットワークビジネスの勧誘が目的と見られる方
• その他運営サイドで参加が不適切だと判断した方

誠に恐れ入りますが、あらかじめご了承くださいませ。