联合表示方法将多模态数据映射到同一个表示空间中,而协同表示方法分别处理和表示模态数据,但是对各个模态数据的表示进行约束,使相同对象的多模态数据表示服从某种相似性,如此获得的多个模态表示空间称作协同空间。 图1 联合表示与协同表示[2] 多模态转换问题指给定一个模态数据,模型需要输出一个语义一致、匹配的另一个...