自然言語処理〔三訂版〕(シゼンゲンゴショリ　サンテイバン)

日本語や英語などの自然言語は人間の知的活動の根幹をささえるメディアである。自然言語のコンピュータ処理に関する研究・技術分野を自然言語処理と呼ぶ。近年のコンピュータおよびニューラルネットワークの進展とともに自然言語処理技術は劇的に進展し、ウェブサーチ、対話システム、機械翻訳などの応用システムが我々の日常に浸透しはじめている。本書では、自然言語の性質、コンピュータで処理するアルゴリズム、難しさ等を理解する。これによって、自然言語処理の応用システムを健全に利活用する能力を身につける。
1.自然言語処理の概要と歴史 2.文字列・テキスト処理の基礎 3.言語リソースの構築 (1) 4.言語リソースの構築 (2) 5.語の意味の扱い 6.ニューラル自然言語処理の基礎 7.機械翻訳 8.Attention 機構に基づくニューラルネットワークモデル 9.系列の解析 10.構文の解析 11.文の意味の解析 12.文脈の解析 13.情報検索 14.質問応答 15.対話システム

大規模言語モデルの登場で自然言語処理 (NLP) への関心が高まるなかで、「そもそも言語をコンピュータで扱うとはどういうことか」を基礎から学び直したいという需要も増えています。本書は放送大学の教材として執筆された教科書であり、著者の黒橋禎夫氏は日本の NLP 研究を長年牽引してきた研究者です。

形態素解析・構文解析・意味解析・談話解析といった古典的なパイプラインの各段階を、言語学的な背景と計算手法の両面から解説する構成になっています。機械学習以前のルールベース手法から統計的手法、そして深層学習への流れを俯瞰できるため、 Transformer 一辺倒では見えてこない「なぜこの問題が難しいのか」の構造が掴めます。三訂版では分散表現やニューラルネット手法の記述が充実し、古典と現代を橋渡しする位置づけが明確になりました。

教科書であるため読み物としての面白さよりも正確さと網羅性を優先しており、数式も相応に登場します。 NLP を専門的に学びたい大学生・大学院生、あるいは業務で言語処理に携わるエンジニアが理論の地図を手に入れるための一冊です。