1.1 言語AIとは? 1.2 言語AIの近年の歴史 1.2.1 Bag-of-Wordsによる言語の表現 1.2.2 埋め込みによる言語の表現 1.2.3 埋め込みの種類 1.2.4 注意機構による文脈のエンコードとデコード 1.2.5 Attention Is All You Need 1.2.6 表現モデル:エンコーダーのみのモデル 1.2.7 生成モデル:デコーダーのみのモデル 1.2.8 生成AIの年 1.3 大規模言語モデルの定義の変遷 1.4 大規模言語モデルの学習パラダイム 1.5 大規模言語モデルの応用例 1.6 責任あるLLMの開発と使用 1.7 限られた計算資源で十分 1.8 大規模言語モデルとのインターフェイス 1.8.1 プロプライエタリなプライベートモデル 1.8.2 オープンモデル 1.8.3 オープンソースフレームワーク 1.9 はじめてのテキスト生成 1.10 まとめ