《地质通报》网络首发论文 题目: 结合 BERT 与 BiGRU-Attention-CRF 模型的地质命名实体识别 作者: 谢雪景,谢忠,马凯,陈建国,邱芹军,李虎,潘声勇,陶留锋 网络首发日期: 2021-09-13 引用格式: 谢雪景,谢忠,马凯,陈建国,邱芹军,李虎,潘声勇,陶留锋.结合 BERT与 BiGRU-Attention-CRF 模型的地质命名实体识别....
针对网络安全这一特殊背景[1],设计了一种BERT-BiGRU-Self-Attention-CRF模型进行命名实体识别。以预训练模型Bert作为底座,通过Bert提升模型的语义理解和句子表达能力;结合双向的门控循环单元BiGRU,通过前向和后向传播来融合句子中的上下文信息,更好地捕捉前后文之间的关联特征;将BiGRU层的输出输入注意力机制中[2],通过...