コース概要
NLP に関連する Python パッケージの概要
NLP の概要 (もちろん Python の例)
単純なテキスト操作 テキストの検索 Word 個のカウント テキストを Word 個に分割する 字句の分散
複雑な構造の処理 リスト内のテキストの表現
リストのインデックス作成コロケーションバイグラム度数分布Word を含む条件文Word の比較 (startswith、endswith、is lower、isalpha など)自然言語理解 Word 感覚の曖昧さの解消代名詞の解決
機械翻訳 (統計的、ルールベース、リテラルなど)演習Python の NLP の例
テキスト コーパスと語彙リソースへのアクセス コーパスの共通ソース 条件付き頻度分布 ジャンル別の Word のカウント 独自のコーパスの作成 辞書の発音 靴箱とツールボックス 語彙集 感覚と同義語の階層 語彙関係: メロニム、ホロニム 意味上の類似性生テキスト印刷の処理切り詰める
文字列の一部を抽出する
Access個別のキャラクター
Search作成、置換、分割、結合、インデックス作成など...正規表現の使用単語パターンの検出ステミングトークン化テキストの正規化Word セグメンテーション(特に中国語)Word のタグ付けされたコーパスの分類とタグ付けタグ付きトークン品詞タグセットPython 辞書Word からプロパティへのマッピング
自動タグ付けWord のカテゴリーの決定 (形態論的、統語論的、意味論的)テキスト分類 (Machine Learning) 教師付き分類文の分割相互検証ディシジョン ツリーテキストチャンクからの情報の抽出チンキング
タグ対ツリー文構造の分析 文脈自由文法パーサー特徴ベースの文法を構築する 文法的特徴特徴構造の処理
文の意味の分析 意味論と論理命題論理一次論理談話意味論
言語データのデータ形式の管理 (語彙集とテキスト)
Metadata