Code Paper 前言 因为自己变懒等因素,很久都没写过文章解读了,这次终于有时间写一点东西推销下自己文章。感觉2023年交通预测领域有些有趣的工作,后续有时间也写一下解读。马上也步入新的一年,提前祝大家新年快乐。2024年我感觉如何在训练时高效融合长期知识 [1,2,3] 进一步提升模型性能、如何结合 LLM [4] 增强 ...
(NAIE PDU,Huawei TechnologiesCo., Ltd.) In this paper we propose a tele-domain pre-trained language model namedTeleBERTto learn the general semantic knowledge in the telecommunication field together with its improved versionKTeleBERT, which incorporates those implicit information in machine log data ...