8.md

---
title: "自然语言处理"
date: 2018-12-29
lastmod: 2020-01-05
weight: 8
type: 
icon: #
description: "Python初阶路线图,自然语言处理"
# search related keywords
keywords: ["自然语言处理"]
---

- 自然语言处理概览
  - 自然语言处理的基本概念
  - 自然语言处理的面临困难
  - 自然语言处理的研究现状
- 预备知识
  - 概率论基础知识
  - 最大似然估计
  - 隐马尔可夫模型
  - 贝叶斯网络
  - 条件概率分布
  - 信息论基础知识
  - 熵
  - 困惑度
  - 互信息
  - 神经网络基础知识
  - CRF
  - BiLSTM+Attention
  - 迁移学习
  - 常用语料库和知识库
- jieba
  - jieba概述
  - jieba分词
  - jieba添加自定义词典
  - jieba词性标注
  - jieba关键词抽取
- nltk
  - nltk概述
  - nltk字符串处理
  - nltk词性标注
  - nltk词干提取
  - nltk命名实体识别
  - nltk分块处理
  - nltk文本分类
  - nltk情感分析
- Genism
  - TF-IDF
  - similarities
  - LSA
  - LDA
  - Word2vec
- 词法分析
  - 分词(英文分词/中文分词)
  - 词干提取
  - 词形还原
  - 词性标注
  - 命名实体识别
- 句法分析
  - 短语结构分析
  - 依存句法分析
- 语义分析
  - 命名实体消歧
  - 指代消解
  - 语义角色标注
  - 语义关系抽取
  - 语义依存分析
  - 抽象语义表示
- 词嵌入
  - Word2Vec
  - GloVe
  - fastText
  - ELMo
  - BERT
  - XLNet
- 文本挖掘
  - 文本相似度计算
  - 文本聚类
  - 文本分类
  - 文本摘要
- 情感分析
  - 基于情感词典的情感分析
  - 基于深度学习的情感分析
- 主题模型
  - LSA
  - LDA
- 机器翻译
  - IBM统计翻译模型
  - 短语抽取
  - 语言模型
  - GNMT
  - Seq2Seq
  - Transformer
- 语言模型
  - n-gram
  - Pitman-Yor过程模型
  - AWD-LSTM
  - Transformer-XL
  - Gated CNN
- 智能问答
  - 基于知识的问答
  - 基于检索的问答
  - 阅读理解
  - 完形填空
- 智能对话
  - 对话行为分类
  - 对话状态跟踪
  - 检索式聊天机器人
  - 生成式聊天机器人
  - 意图识别
  - 槽填充(Slot Filling)
- 语音识别
  - 傅里叶变换
  - 声学模型
  - 隐马尔可夫模型
  - CNN
  - LSTM-HMM
  - 神经网络语言模型
  - MFCC
- 知识图谱
  - 知识图谱构建
  - 知识计算
  - 知识存储
  - 知识服务与应用