知了AI学习平台Logo知了
🧠AI 冷知识

你知道吗?

这些有趣的 AI 小知识可能让你大吃一惊

📜
序列标注的黄金标准

条件随机场(CRF)由Lafferty等人在2001年提出,曾是自然语言处理中命名实体识别(NER)和词性标注的统治者。与HMM的生成式不同,CRF是判别式模型——它不关心输入数据长什么样,只关心"给定输入,输出标签应该是什么"。有趣的是,即使深度学习崛起后,CRF仍未消亡:BiLSTM-CRF和BERT-CRF至今仍是NER的强力基线,CRF作为最后一层负责约束标签转移的合法性(比如B-PER后面不能跟I-ORG)。

来源:Lafferty, McCallum & Pereira, "Conditional Random Fields", ICML 2001

一句话总结
💡

CRF 是判别式概率图模型,在给定观测序列下对标签序列建模全局依赖,常用于序列标注。

常见误区

这些坑别踩

✗

误区 1

CRF 和 HMM 一样是生成模型。

✓

正确理解

CRF 是判别式建模 P(Y|X),HMM 是生成式建模 P(X,Y),方向相反。

✗

误区 2

CRF 每个位置独立预测。

✓

正确理解

CRF 考虑标签间的转移依赖做全局归一化,这是相对逐位置分类的优势。

✗

误区 3

CRF 只能用线性链。

✓

正确理解

虽线性链 CRF 最常见,CRF 可定义在任意图结构上。