期刊文献+
共找到2篇文章
< 1 >
每页显示 20 50 100
多模态信息处理前沿综述:应用、融合和预训练 被引量:26
1
作者 吴友政 李浩然 +1 位作者 姚霆 何晓冬 《中文信息学报》 CSCD 北大核心 2022年第5期1-20,共20页
随着视觉、听觉、语言等单模态人工智能技术的突破,让计算机拥有更接近人类理解多模态信息的能力受到研究者们的广泛关注。另一方面,随着图文社交、短视频、视频会议、直播和虚拟数字人等应用的涌现,对多模态信息处理技术提出了更高要求... 随着视觉、听觉、语言等单模态人工智能技术的突破,让计算机拥有更接近人类理解多模态信息的能力受到研究者们的广泛关注。另一方面,随着图文社交、短视频、视频会议、直播和虚拟数字人等应用的涌现,对多模态信息处理技术提出了更高要求,同时也给多模态研究提供了海量的数据和丰富的应用场景。该文首先介绍了近期自然语言处理领域关注度较高的多模态应用,并从单模态的特征表示、多模态的特征融合阶段、融合模型的网络结构、未对齐模态和模态缺失下的多模态融合等角度综述了主流的多模态融合方法,同时也综合分析了视觉-语言跨模态预训练模型的最新进展。 展开更多
关键词 多模态信息处理 多模态融合 多模态预训练 自然语言处理
在线阅读 下载PDF
交际意图从生成到识解的过程研究——多模态语篇信息处理视角 被引量:3
2
作者 淮艳梅 《外国语文》 北大核心 2014年第3期90-95,共6页
以多模态语篇信息处理为视角,研究交际意图从生成到识解的多模态信息处理过程,结果表明交际双方的多模态信息编码和解码过程呈镜面逆向关系,多模态交际语篇为镜面本身,交际双方逆向处理多模态信息,即交际者生成交际意图后,经过信息语篇... 以多模态语篇信息处理为视角,研究交际意图从生成到识解的多模态信息处理过程,结果表明交际双方的多模态信息编码和解码过程呈镜面逆向关系,多模态交际语篇为镜面本身,交际双方逆向处理多模态信息,即交际者生成交际意图后,经过信息语篇化、语篇信息化、信息多模态化过程,形成多模态交际语篇;而交际对象接收多模态交际语篇后,经过多模态信息化、信息语篇化、语篇信息化过程,识解交际意图。 展开更多
关键词 交际意图 多模态信息 多模态交际语篇 多模态语篇信息处理 语篇信息
在线阅读 下载PDF
上一页 1 下一页 到第
使用帮助 返回顶部