基盤モデルのための強化学習

和地瞭良

購入済み

基盤モデルのための強化学習
3,080

購入済み

アプリ 1冊無料試し読み試し読み 1冊無料読むカートへ

【推薦の言葉】基盤モデルの性能を引き上げるうえで、強化学習は中核的な役割を担っている。本書は、強化学習の基礎から、基盤モデルの事後学習を支える理論と手法、推論時スケーリング、Agentic RLまでを体系的に解説した、世界的にも類書の少ない一冊である。なぜ強化学習が必要なのか、その可能性と限界を、理論と実例の両面から明快に示す。AIの今後を見通すうえで、本書は重要な羅針盤となるだろう。――岡野原大輔（Preferred Networks代表取締役社長）【本書のポイント】◆基盤モデルを賢くする強化学習、その理論を体系的に理解する！◆いま強化学習は、基盤モデルの振る舞いを制御するための汎用的な枠組みとなっている。各手法がなぜ必要になったのか、どのような仮定のもとで何を最適化しているのか。本書では、これらを数式と直感の両方から解説する。【サポートサイト】https://akifumi-wachi-4.github.io/website/rl4fm【主な内容】第1章　はじめに第2章　強化学習の基礎第3章　基盤モデルを改良するための強化学習問題第4章　強化学習による人間の主観的な選好への適合第5章　強化学習による客観的な正解をともなうリーズニング能力の改善第6章　主観的かつ客観的に良いLLMを獲得するには第7章　言語から他のモダリティへ第8章　推論時スケーリングと強化学習の関連性第9章　Agentic RL第10章　今後の課題付録A　数学的な基礎付録B　強化学習の補足付録C　基盤モデルの基礎付録D　定理3.2の証明