第二个模块是特征融合模块(Feature Fusion module, FFM),该模块分两个阶段构建,将RGB和X模态中修正后的特征合并为一个单一的特征进行语义预测。基于视觉transformer的自我注意获得的大接受域,在FFM的第一阶段设计了交叉注意机制,实现了跨模态的全局推理。在第二阶段,采用混合信道嵌入产生增强的输出特征。因此,我们引入...
【项目介绍】: 广告算法(CTR预估)相关的DNN模型 wide&deep 可以参考official/wide_deep deep&cross deepfm ESMM Deep Interest Network ResNet xDeepFM AFM(Attentional FM) Transformer FiBiNET 代码使用tf.estimator构建, 数据存储为tfrecord格式(字典,key:value), 采用tf.Dataset API, 加快IO速度,支持工业级的应用...