深層強化学習の研究トレンド（Rainbow、Ape-X、R2D2、R2D3）の解説を行うセミナー

内容概要

Deep Q-Network以降の深層強化学習について解説できればと思い企画してみました。
Deep Q-Network[2013/2015]、Rainbow[2017]、Ape-X[2018]、R2D2[2019]、R2D3[2019]
などの論文を元に、研究トレンドの推移などについて解説します。

↓Rainbow論文
https://arxiv.org/abs/1710.02298

↓Ape-X論文
https://arxiv.org/abs/1803.00933

↓R2D2論文
https://openreview.net/pdf?id=r1lyTjAqYX

↓R2D3論文
https://arxiv.org/abs/1909.01387


※
深層強化学習の基礎知識は前提としますので、自信のない方は下記の参加もあわせてご検討
いただけたらと思います。
https://techplay.jp/event/751996

開催日程

10/30（火）
受付： 19:50〜20:00
講義： 20:00〜22:00

※ 途中5〜10分程、休憩を設ける予定です。
※ 19:40より前の入室は原則としてお断りします。

アジェンダ

1. 事前知識の整理（10分）
　　系列モデリング復習＆MDP(Markov Decision Process)
　　Deep Q-Network

2. Rainbowについて（45分）
　　Double DQN
　　Prioritised Experience Replay
　　Dueling Network Architecture
　　Multi-step Returns
　　Distributional RL
　　Noisy Nets

3. Ape-X、R2D2、R2D3（50分）

※アジェンダの詳細については変更の可能性があります。（全体の流れが変わることはないです）

会場

水道橋駅、神保町駅、九段下駅周辺
千代田区西神田2-7-14 YS西神田ビル2F

対象者

・対象レベルとしては，CNNの基礎知識（AlexNet、VGGNet、ResNetなど）について知っており、
MNISTなどの画像分類の経験がある方を想定します。
↓下記の理解は前提とします。
https://lib-arts.hatenablog.com/entry/math_nn4
https://lib-arts.hatenablog.com/entry/math_nn5
https://lib-arts.hatenablog.com/entry/math_nn6
https://lib-arts.hatenablog.com/entry/paper1_AlexNet
https://lib-arts.hatenablog.com/entry/paper2_VGGNet
https://lib-arts.hatenablog.com/entry/paper3_ResNet

・また強化学習の基本についてはわかっている方を想定します。（Deep Q-Networkがシンプルかつ
それなりに良いモデルなので、Deep Q-Networkまでなんとなくわかるを想定して話を進めていきます）
自信のない方は下記もあわせてご検討ください。
https://techplay.jp/event/751996

講師プロフィール

東大工学部卒。
データ分析/AI開発の仕事の経験は7年ほどで、理論/開発/ビジネスのどれも経験があり強い。
また、多くの業界のプロジェクトに関わったためドメイン知識も豊富。
初心者向けの指導実績も多く、1,000名近い。

当日のお持物

・筆記用具
・PC（手元にある方が進行の確認ができて便利だと思います）
※ 題材によって変更の可能性があります

当日までの準備

余裕のある方は下記を元にRainbowについて軽く掴んできていただけると、当日理解がスムーズかと
思われます。（こちらについては余裕があればなのでマストではありません）
https://lib-arts.hatenablog.com/entry/rl_trend6

費用

4,000円 (2時間)

※
・領収書発行の際は事務手数料として追加1,000円のお支払いをよろしくお願いいたします

定員

8名（人数に合わせて調整します、別媒体でも募集していますので申し込み人数は当日参加者数を反映しません）

ご参加にあたってのお願い

無断欠席や前日以降のキャンセルに関しては当日人数読めなくなり非常に迷惑なので
基本的に行わないようにお願いします。（直前参加は定員的に問題なければ歓迎です！）
体調不良、職務都合、ご家庭の事情などどうしてものケースは別途ご連絡いただくか、
イベントへのお問い合わせよりご連絡いただけますと嬉しいです。
上記がひどいアカウントに関してはブラックリスト処理を行い以後の参加をお断りさせて
いただきますので、その点だけ予めご了承ください。
（7割以上来れる前提でのお申し込みと前日以降のキャンセルはメッセージでのご連絡を
いただくということだけ気をつけていただければ大丈夫だと思います）

モチベーションの高い参加者の方を重視する運営としていきたいと考えています。
ご協力のほど、よろしくお願いいたします。