自然言語処理 (NLP)
機械がテキストまたは音声形式の人間の言語を解釈、生成、分析できるようにする手法とツール。
Definition
言語学と機械学習を組み合わせて非構造化言語データを処理する分野。タスクには、トークン化、品詞タグ付け、解析、名前付きエンティティ認識、感情分析、言語生成などがあります。ガバナンスは、堅牢で公正かつ安全な言語機能を確保するために、データの出所、言語モデルの偏り、機密テキストのプライバシー、多様な言語データセットの厳格な評価に重点を置いています。
Real-World Example
カスタマーサービスセンターは、NLPパイプラインを使用して問い合わせを自動ルーティングします。テキストはトークン化され、「請求」、「テクニカルサポート」、または「フィードバック」に分類されます。このシステムは、信頼性の低い分類にフラグを立て、人間が確認できるようにします。四半期ごとの監査では、サポートされているすべての言語でルーティングの精度が 90% を超えていることを確認し、リクエストの誤送信を防止しています。
.svg)
