Deep Learning for NLP サマースクール

概要

本講座は、学生を対象とした、Deep Learningを用いた自然言語処理に特化した全3回・3週間のサマースクールです。東京大学Deep Learning基礎講座・応用講座を公開してきた松尾研究室が、松尾研究室発スタートアップである ELYZA(イライザ) による全面協力のもと提供するものです。実践的な演習を通して、効率的に学習を進め,手を動かしながら技術を深く理解し,幅広いトピックを網羅します。それによって、Deep Learningを用いた自然言語処理の研究のスタートラインに立てるレベルの知識・実装力の習得を目指します。分散表現・言語モデルから始まり、RNN・CNN・Attentionに触れ、現在の概観を学ぶことができます。

 

なお、本セミナーは完全オンラインで実施いたします。

ブラウザのみ必要

必要なものはZoomのインストールとWebブラウザのみです。ブラウザを通じてGPUを利用したPythonプログラミングが可能な開発環境「Google Colab」を利用します。

出来るようになること

  1. 検索エンジンと翻訳
  2. チャットボット/対話AI開発
  3. 文章生成・レポートを書く
  4. 対話型のゲーム

 などの作成の基礎が学べます。

演習中心で効率良く短期習得

本プログラムの最大の特徴の一つは、全てのトピックについて,演習を中心に構成されている点です。実際に手を動かしながら理解を進めることで、効率よく学習することができます。

モデルの学習

Deep Learning技術では、モデルが学習する様子を観測しながらパラメータを調整することで、アプリケーションに応じたパフォーマンスの最大化を図ることが非常に重要です。この一連の流れを全ての演習で経験することで、重要な要素を身につけられます。

松尾研究室がコンテンツ作成

実践型のデータサイエンティスト育成講座およびDeep Learning講座を4年以上公開運営し、のべ千人以上の人材を育成してきた東京大学松尾研究室がコンテンツを監修・開発しました。

コンテンツ(予定)

第1回NLP概観・分散表現

NLPとは, NLPにおけるDLの役割, 分散表現, 日本語の処理, Softmaxの高速化

第2回言語モデル

言語モデル, RNN言語モデル, Seq2Seq, 可変長系列の処理, BeamSearch

第3回応用:Attention

CNN, Attention,Transformer, BERT

※ 授業コンテンツに関しては、変更する可能性がございます。ご了承下さい。

企画・運営・講師

日程

募集開始 2020/7/18(土)
募集締切 2020/7/26(日)23:59
選考結果 2020/8/1(土)までに受講が決定した方にメールで連絡します。

第1回 2020/8/26(水)13:00〜15:00
第2回 2020/9/2(水)13:00〜15:00
第3回 2020/9/9(水)13:00〜15:00
※通常の授業時間より長くなっています

募集要項

  • 本セミナーは、配信される講義映像を、各人が自宅等で視聴・演習していただく形式です。
    • 各講義日の13:00〜15:00にライブ配信します。ライブ配信では、リアルタイムに質問を受け付けます。
    • ライブ配信への参加方法など詳細については、受講が決定された方にご連絡いたします。
  • 対象:学生(大学院、大学、高専、専門学校生、高校、中学など。社会人は0名~若干名の予定です。)
    (本講座は公開講座であり、大学から単位は出ません
  • 本講座は例年と同内容を扱いますので、過去に受講頂いた方は受講できません。
  • 受講料はかかりません。

 

参加条件

  • 深層学習の基礎知識があり、基礎的な実装が自力でできること。応募フォーム内にある問題がある程度解けることを基準とする。
  • 毎回の講義を確実に視聴できること

 

よくある質問・お問い合わせはこちら

深層生成モデル サマースクールについてはこちら

深層強化学習 サマースクールについてはこちら