标注语料库与词典匹配相结合举例
2016-05-05 14:56:09 10 举报
登录查看完整内容
标注语料库与词典匹配相结合是一种常见的自然语言处理技术。它通过将文本中的词语与词典中的词语进行匹配，来确定文本中每个词语的词性、句法角色等信息。这种方法可以有效地提高文本分析的准确性和效率。 例如，假设我们有一个包含大量新闻报道的标注语料库，其中每个词语都被标注了词性和句法角色。我们可以将这些信息与一个大型词典进行匹配，以确定文本中每个词语的确切含义。这样，我们就可以更好地理解文本内容，并从中提取有用的信息。
作者其他创作
大纲/内容
地名词典
德斯坦/nr_U 代表/O 法国/nt_B 政府/nt_L 在/O 开幕式/O 上/O 发表/O 了/O 讲话/O 。/O......
特征融合
命名实体标注语料
生语料
[nr 德斯坦 ] 代表 [nt 法国 政府 ]在 开幕式 上 发表 了 讲话 。......
抽取全部特征：正例（nr、ns、nt）+反例（O）
特征抽取并选择正例（nr、ns、nt）
O x0=出席 ...nz_B x0=世界 ...nz_I x0=经济 ... nz_I x0=论坛 ... nz_L x0=年会 ... O x0=并 ... O x0=访问 ... ns_U x0=欧洲 ... nr_B x0=李 ... nr_L x0=岚清 .........nr_U x0=德斯坦 ...nt_B x0=法国 ...nt_L x0=政府 ... ......
出席/O 世界/nz_B 经济/nz_I 论坛/nz_I 年会/nz_L 并/O 访问/O 欧洲/ns_U 李/nr_B 岚清/nr_L 离/O 京/O 抵/O 瑞士/ns_U ......
O x0=出席 ...nz_B x0=世界 ...nz_I x0=经济 ... nz_I x0=论坛 ... nz_L x0=年会 ... O x0=并 ... O x0=访问 ... ns_U x0=欧洲 ... nr_B x0=李 ... nr_L x0=岚清 .........
基于标注语料库
标签转换
基于命名实体词典与生语料相匹配
nr_U x0=德斯坦 ...nt_B x0=法国 ...nt_L x0=政府 ... ......
德斯坦 代表 法国 政府 在 开幕式 上 发表 了 讲话 。......
出席/v [世界/n 经济/n 论坛/n 年会/n ]nz并/c 访问/v 欧洲/ns 李/nr 岚清/nr 离/v 京/j 抵/v 瑞士/ns ......
机构名词典
命名实体词典
命名实体词典与生语料匹配结果
人名词典
职业：暂无
0 条评论
回复 删除
下一页
