自然言語処理

2024.07.18

基本知識

概要

  1. BoW
  2. TF-IDF

言語的解析

  • 言語の基本単位

形態素解析

  • 分かち書き

構文解析

  • 係り受け解析

意味分析

  • 述語項構造解析

統計的分析

  • TF-IDF
  • ジップの法則

ニューラルネット言語モデル

単語ベクトル表現

系列モデル

  • RMM
  • LSTM
  • GRU

系列変換モデル

  • BERT
  • Transformer

応用

文書分類

キーワード抽出

機械翻訳

自動要約

ホーム
データサイエンス
タイトルとURLをコピーしました