在自然语言中,有时候会遇到一些词语或短语需要通过上下文来确定其所指代的对象。而指代消解算法就是通过分析上下文信息,将这些不明确的指代词与其所指的具体实体进行关联,从而达到理解句子的目的。 指代消解算法在文本理解、机器翻译、问答系统等多个领域具有重要的应用价值。它可以帮助计算机在处理自然语言时更好地理解...
基于聚类的指代消解算法 指代消解 (Coreference Resolution) 任务主要是识别文本中代表同一对象的实体 (Mention)，例如 "小明告诉我他的想法" 里面的 "小明" 和 "他" 均指代小明。指代消解方法通常包括两个步骤：1. 识别 Mention；2.判断 Mention 之间是否指代相同对象。比较常见的判断方法是把两个 Mention 的特征...
本文介绍第一篇使用神经网络进行端到端指代消解的论文《End-to-end Neural Coreference Resolution》，该方法超越了之前的所有指代消解方法，后续很多技术都用到了这一论文的思想。1.前言 指代消解 (Coreference Resolution) 是 NLP 里面一种常见的任务， 主要用于识别一段文本中指示相同实体的内容，通常是名字和代词。...
又是一篇去年关于指代消解的笔记,做了一些预研还有测试,苦于没有相关业务支持,只能埋藏在笔记库中,今天把它翻出来温故知新一下。 任务了解 1 概念理解:篇章中的一个语言单位(通常是词或短语)与之前出现的语言单位存在特殊语义关联,其语义解释依赖于前者。
这里的指代消解算法是在使用启发式Max-Margin损失函数的基础上,利用增强策略梯度算法工作的。每个行为 a=(c,m) 的概率定义如公式(1)所示, 损失函数定义如公式(2)所示。 为使获得奖励值最大,采用梯度上升法进行参数更新,由于梯度值计算困难,现采用一种梯度估值,定义如公式(3)、(4),进行原文替换。
一种基于图划分的无监督汉语指代消解算法 维普资讯 http://www.cqvip.com
一种基于图划分的无监督汉语指代消解算法 指代消解是自然语言处理领域中的一个重要问题。针对当前中文指代标注训练语料非常缺乏的现状,本文提出一种无监督聚类算法实现对名词短语的指代消解。引入图对名词短语... 周俊生,黄书剑,陈家骏,... - 《中文信息学报》 被引量: 0发表: 2007年 中文跨文档指代消解的研究与实...
基于指代消解和篇章结构分析的自动摘录算法
这里的指代消解算法是在使用启发式Max-Margin损失函数的基础上,利用增强策略梯度算法工作的。每个行为 a=(c,m) 的概率定义如公式(1)所示, 损失函数定义如公式(2)所示。 为使获得奖励值最大,采用梯度上升法进行参数更新,由于梯度值计算困难,现采用一种梯度估值,定义如公式(3)、(4),进行原文替换。
没有分析文章结构与主题思想之间的关系.为此,提出一种基于指代消解和篇章结构分析的自动摘录算法.采用有限知识的思路完成指代消解,利用指代消解解决文摘语义不连贯问题,以提高句子权重计算的准确性,对文章做主题划分时进行篇章结构识别,按照段落标题信息划分段...