RNN camp #3(延期になりました)

2016/11/29(火)19:00 〜 22:00 開催
ブックマーク

イベント内容

大変申し訳ございませんが、講師の体調不良(インフルエンザ)により本日のイベントは延期になりました。

RNN Camp 概要

深層学習の中でもリカレントニューラルネットワークモデルについてお話しします。このモデルは言語モデル,音声認識,機械翻訳,対話,質疑応答,画像脚注付け,物語理解,物語生成,プログラミングコード自動生成,などの応用が盛んです。これらに共通する技術的基礎を解説し,加えて Python 実装をご紹介します。

3回目となる今回は,前半では次の内容を取り上げます。

  1. GRU
  2. BiRNN
  3. SGD と関連する最適化諸手法
  4. SGNS, CBOW とベクター空間モデル
  5. 第一回 RNN camp からここまでのまとめ,RNN の今日的意義

質問,コメント,要望,リクエストなどは rnncamp.jp@gmail.com へお願い致します。

対象者

プログラミングの知識のある方を前提といたします。実習では Python, C++ のコードを示しながらお話します。数学の知識は必須ではありませんが,数式は出てきます。 以下のような方にお薦めです。

  1. 時系列情報処理(ログ解析,文章理解,文章生成,リコメンド)に興味のある方
  2. 深層学習(ディープラーニング)のもう一つの潮流,リカレントニューラルネットワークを知りたい方
  3. 静止画,画像認識では物足りないエンジニアの方
  4. 定型的な bot 以上の対話システムを考えるプログラム(対話生成)に関心のある方
  5. 画像情報と言語情報の融合を機械学習したい方

タイムスケジュール

  • 19:00 - 19:10 オープニングリマーク
  • 19:00 - 19:20 前回の復習
  • 19:20 - 20:15 GRU, BiRNN,
  • 20:15 - 20:30 実習
  • 20:30 - 20:40 質疑応答
  • 20:40 - 20:45 休憩
  • 20:45 - 21:45 SGD, SGNS
  • 21:45 - 21:55 質疑応答
  • 21:55 - 22:00 クロージングリマーク

RNN camp のスケジュール

  • 第1回 SRN, BPTT
  • 第2回 LSTM, 勾配消失/爆発問題
  • 第3回 GRU, BiRNN, SGD,Vector space models
  • 第4回 注意モデル,画像脚注付け(NIC), text2image
  • 第5回 対話モデル, 物語生成モデル
  • 第6回 ニューラルチューリングマシン, ニューラルGPU, メモリーネットワーク

講師のプロフィール

浅川伸一 (博士) 東京女子大学 情報処理センター勤務。早稲田大学在学時はピアジェの発生論敵認識論に心酔する。卒業後エルマンネットの考案者ジェフ・エルマンに師事,薫陶を受ける。以来人間の高次認知機能をシミュレートすることを目指している。知的情報処理機械を作ることを通して知的情報処理とは何かを考えたいと思っている。著書に Python で実践する深層学習(2016) コロナ社. ディープラーニング,ビッグデータ,機械学習---あるいはその心理学 (2015) 新曜社。「ニューラルネットワークの数理的基礎」「脳損傷とニューラルネットワークモデル,神経心理学への適用例」いずれも守一雄他編 コネクショニストモデルと心理学 (2001) 北大路書房などがある。

主な受賞歴

人工知能学会2015年度研究会優秀賞 SIG-LSE:ことば工学研究会 第49回研究会 2015年9月25日
「ニューラルネットワーク物語生成モデル」単著

下準備

ノートPCを持参されることをお勧め致します。ですが,会場に電源供給用のアウトレットは人数分確保できないと思われますので充電した状態でお越しください。
ソースコード閲覧のために手慣れたテキストエディタ,または統合環境をご用意ください。
gcc, g++, python (今回は TensorFlow を予定) の処理系はインストールしてあった方が話が早いです。無くても構いません。

注意事項

  • 名刺を1枚ご用意ください。
     学生さんなど名刺を持っていない方は必要はありません。
  • compassのページに記載されたご本人様のみ参加することができます。代理での出席やご本人様以外の方がお越しになられた場合、ご入場することが出来ません。
  • compassのページをお忘れになられた場合、本人確認ができるものの提示を求める場合がございます。なお、本人確認ができるものをご提示いただけない場合、ご入場をお断りする場合があります。
  • 参加者のみなさまで残念ながら、イベントに参加できなくなった場合は、お手数ですが早目の「キャンセル」をお願いいたします。 *補欠者のみなさまは補欠から参加へ繰り上がるかもしれません。繰り上がりメッセージの有無や、イベントの確認をお願いします。

受付の案内

受付は、六本木ヒルズ森タワーLL階(2階、オフィスエントランスを入ってすぐ左)となります。詳しくは下記ページをご覧ください。(※ 六本木アカデミーヒルズではありませんのでご注意ください.。 http://www.mori.co.jp/company/about_us/access.html

当日、compassのページをスマホ等で提示いただくか、プリントアウトの上ご持参ください.

また、森タワーの警備の都合上、受付の設置時間は18:30〜19:30となります。 ですので、なるべく19:30までご来場頂きます様、御協力を宜しくお願いします。 19:30〜は案内もありませんのでご注意ください。 尚、19:30以降にご来場した場合はハッシュタグ#rnncampに御連絡を頂ければ、係の者が2階まで迎えに行きます。

当日の注意事項

当日のライブ配信はこちら!

https://youtu.be/FE7X7FUk4Tk

RNNcamp #1の動画アップ致しました!

RNNcamp 第1回 SRN,BPTT,確率的勾配降下法

RNNcamp #2の動画アップ致しました!

RNNcamp 第2回 LSTM,GRU,BiRNN,最適化,正規化,勾配消失

注意事項

※ こちらのイベント情報は、外部サイトから取得した情報を掲載しています。
※ 掲載タイミングや更新頻度によっては、情報提供元ページの内容と差異が発生しますので予めご了承ください。
※ 最新情報の確認や参加申込手続き、イベントに関するお問い合わせ等は情報提供元ページにてお願いします。

関連するイベント