📖 中文分词 · 语义理解

01 中文分词概述

• 定义、难点与挑战
• 分词在NLP中的地位

02 基于规则的分词

• 最大匹配法 (前/后/双向)
• 最少分词法

03 统计分词方法

• HMM / CRF 模型
• N-gram 语言模型

04 深度学习分词

• BiLSTM-CRF / BERT分词
• 预训练模型应用

05 分词工具实战

• jieba / HanLP / LAC / Pkuseg
• 安装与使用

06 分词评估指标

• 准确率 / 召回率 / F1
• OOV召回率 · 分词速度

07 语义理解概述

• 定义 · 层次 (词/句/篇章)
• 应用场景

08 词向量与分布式表示

• One-hot / Word2Vec (CBOW, Skip-gram)
• GloVe · FastText

09 上下文词表示

• ELMo / GPT / BERT / RoBERTa
• 原理与对比

10 词义消歧

• 基于词典 / 无监督聚类
• 基于预训练模型

11 语义角色标注

• 谓词-论元结构 · SRL标注
• 基于BiLSTM的SRL

12 语义依存分析

• 依存句法 vs 语义依存
• 语义依存图 · 中文库

13 语义相似度计算

• 余弦 / 欧氏距离 / WMD
• BERT-based 相似度

14 文本蕴含与推理

• SNLI / MNIST · ESIM
• BERT推理

15 语义解析

• 文本到逻辑形式 · AMR
• SPARQL查询生成

16 命名实体识别 NER

• 实体类型 · BiLSTM-CRF
• BERT-NER · 嵌套NER

17 关系抽取

• 管道式 / 联合抽取
• CasRel · TPLinker

18 事件抽取

• 触发词 · 论元
• 模式方法 · 深度方法

19 指代消解

• 指代类型 · Hobbs算法
• 基于BERT的消解

20 篇章分析

• 篇章结构 · RST
• 篇章关系识别

21 情感分析

• 情感极性 / 细粒度
• 方面级 · ABSA模型

22 意图识别与槽位填充

• 任务型对话 · Joint BERT
• SF-ID网络

23 知识图谱与语义理解

• 图谱构建 · 实体链接
• 关系推理 · KG-BERT

24 多模态语义理解

• 图文匹配 · VQA
• 多模态BERT

25 跨语言语义理解

• 跨语言词向量 · 机器翻译
• mBERT · XLM-R

26 少样本与零样本

• Prompt学习 · PET
• GPT-3 In-context Learning

27 伦理与偏见

• 数据偏见 · 公平性
• 可解释性 · 隐私保护

28 工业级语义系统

• 系统架构 · 模型压缩
• 推理加速 · 在线学习

29 中文分词与语义前沿

• CogView · ERNIE 3.0
• CPM · 悟道 · 中文大模型

30 课程总结与展望

• 技术路线图 · 学习资源
• 研究方向建议