基于多模态特征融合的社交媒体虚假新闻检测

【目的/意义】社交媒体在改变新闻传播以及人类获取信息方式的同时,也成为了虚假新闻传播的主要渠 道。因此,快速识别社交媒体中的虚假新闻,扼制虚假信息的传播,对净化网络空间、维护公共安全至关重要。【方 法/过程】为了有效识别社交媒体上发布的虚假新闻,本文基于对虚假新闻内容特征的深入剖析,分别设计了文本 词向量、文本情感、图像底层、图像语义特征的表示方法,用以提取社交网络中虚假新闻的图像特征信息和文本特 征信息,构建多模态特征融合的虚假新闻检测模型,并使用MediaEval2015数据集对模型性能进行效果验证。【结果/ 结论】通过对比分析不同特征组合方式和不同分类方法的实验结果,发现融合文本特征和图像特征的多模态模型 可以有效提升虚假新闻检测效果。【创新/局限】研究从多模态的角度设计了虚假新闻检测模型,融合了文本与图像 的多种特征。然而采用向量拼接来实现特征融合,不仅无法实现各种特征的充分互补,而且容易造成维度灾难。     

我国公益广告中的多模态隐喻构建

我们生活着的社会是由各个要素共同组成的.而隐喻在人类社会的发展当中扮演着重要的角色,在意义阐释与传递上有着重要作用.人类的思维过程大部分都是隐喻性的,隐喻与社会发展联系紧密. 在传统的社会认知中,语言文字在构建意义和传递信息中占据着主要角色.自从20世纪90年代以来,多模态话语分析逐渐被人们所熟知,变得愈加重要.当今社会是一个充满多模态信息的社会,除了语言文字之外,其他不同的符号资源,如图像、姿势、声音、颜色等都可以传递信息,表达意义.多模态语篇可以使人们更加快速地获取信息,从而提高学习、工作和生活的效率.近年来,多模态话语分析快速发展,涵盖不同领域.对公益广告进行分析已经成为其中的一个方面.     

基于多模态融合的突发事件分类研究

[目的/意义]针对突发事件分类研究中模态单一或缺失、分类效果不理想等问题，本文提出结合文本和图片特征信息，以多模态融合的方式对突发事件进行分类。[方法/过程]本文提出一种基于多模态融合的突发事件分类模型(Emergency Classification Model with Hybrid Fusion, ECMHF),由BERT联动BiLSTM构成的文本特征抽取分类模型、VGG19为基础的图像特征抽取分类模型、融合文本描述特征和视觉语义特征的多模态融合层加上预测类别输出层组成的多模态分类模型3部分构成主体框架，最后将所有模型的决策层输出分配权重后再融合。[结果/结论]以收集的突发事件新闻数据为实验样本进行实证研究。结果表明，ECMHF模型在所有模型中性能最佳，F1值达到最高的99.072%,比次优模型高出0.51%。加入混合融合策略的ECMHF模型能够有效地识别出突发事件的类别。未来将在更为广泛和多元的突发事件多模态数据集中进行验证。     

河北高校英语专业多模态听力教材及教学方法探析

本文以河北高校英语专业听力教材为依据,分析当前教材的弊端,介绍多模态听力教材的形式与内容特征,倡导编写、使用多模态听力教材,并采用多模态教学方法,真正提高英语专业学生的英语交际能力。     

体育双语教学中的多模态性

本文以系统功能语言学为基础对体育双语教学中的多模态性进行分析,得出了在体育双语教学中多模态选择的程序、模态选择的因素以及模态选择的原则,有助于提高体育双语教学效率。     

体育双语教学中的多模态性

本文以系统功能语言学为基础对体育双语教学中的多模态性进行分析,得出了在体育双语教学中多模态选择的程序、模态选择的因素以及模态选择的原则,有助于提高体育双语教学效率。     

科技英语中的语法隐喻

语法隐喻在英语语篇中被大量使用,但是在不同的文体和语域中,语法隐喻出现的形式和所体现的功能各有不同。本文以Halliday的语法隐喻理论为依据,分析科技英语语篇中的语法隐喻现象及其功能,从而帮助读者更深入地了解科技英语语篇中的隐喻本质。     

论隐喻与意义构建

自亚里士多德提出隐喻这一概念起,隐喻由其修辞学范畴延伸至所有领域的词、句乃至篇章。Richards和Black的“互动理论”,Lako什和Johnson等人的“映射理论”、Fau-connier的“合成理论”以及近期兴起的由Forceville ＆ Urios-Aparisi提出的多模态臆喻理论均使得隐喻得到长足发展。隐喻渗透于生活,受制于文化,相异于意识形态。隐喻可以以词、句、篇章为平台,以语境、文化、主体自治等为着手点,结合隐喻理论,进而考察隐喻对于意义构建的作用,得到简化交流理解障碍的启示。     

多模态符号学理论下多模态意义建构中模态间的并协与互补——一个大学校徽图案的视觉语法分析

我们已进入信息化和数字化时代,多模态化已成为语篇世界的一个发展趋势。在多模态语篇中,图像、声音、视频动作等模态形式和语言符号一样都成为了意义建构的符号资源。作为大学形象建构的一种媒介,校徽以其独具的特点成为了多模态意义建构的典型载体。本文以多模态符号学和视觉语法为理论框架,对河南财经政法大学校徽进行了多模态语篇分析,此项研究还有助于提高人们对多模态语篇的识读能力,促进大众对校徽文化内涵的理解。     

基于Micro PET平台的多模态成像质控体模设计

多模态成像,以及具有分子影像功能的多模态成像系统,是医学影像发展的方向,现有的单一功能的测试体模已不能满足大型成像设备性能测试需求。随着医学成像技术的发展,多模态成像已经成为医学成像的热点问题。本文针对PET/MRI,PET/CT,MRI/CT或MRI/US等多模态成像设备,研制基于Micro PET平台的多模态成像质控体模,满足多模态复合成像系统性能测试需求。     

多模态视域下英语报刊阅读教学模式实证研究

本文回顾了多模态话语分析在国内外研究的状况,并把多模态识读能力运用到英语报刊阅读教学中,构建了多模态英语报刊阅读教学模式。本文通过英语报刊阅读能力测试和问卷调查的方式,以小样本实验研究的方法,调查了多模态英语报刊阅读教学模式对于学生英语阅读能力的影响。实验结果表明,多模态教学模式对于激发学生的学习兴趣产生了积极的影响,并有利于提高学生的英语报刊阅读能力。     

话语分析的新发展——多模态话语

多模态话语视角当中,认为话语分析不能仅仅停留在语言的阶层,还要对其他的符号资源进行考虑,进而在这个过程之中话语分析提成了新的理论以及实践的要求。本文笔者主要对多模态以及多模态话语进行分析,进而延伸到多模态话语流派与发展之中,由此分析在现代社会发展中多模态话语分析的发展前景以及面对的挑战。     

国内“多模态”符号研究文献综述

多媒体条件下,多模态符号分析应运而生。本文以中国期刊网上的相关论文为基础。梳理了国内多模态的发展过程,以及表现出的特点和趋势,指出了取得的成绩以及存在的不足,因此需要采取措施,完善多模态理论构建和实践探索,加快多模态学科建设的脚步。     

GPT-4对多模态大模型在多模态理解、生成、交互上的启发

对话式聊天机器人ChatGPT以近乎摧枯拉朽的气势席卷社会,拨开了通用人工智能的曙光。ChatGPT的升级版GPT-4是个多模态大模型,它从单调的文本交互,升级为可以接受文本与图像组合的多模态输入,相比传统的单模态大模型,多模态大模型更加符合人类的多渠道感认知方式,能够应对更加复杂丰富的环境、场景和任务。GPT-4表明在多模态大模型中引入基于人类知识的自然语言理解与生成能力能够带来模型在多模态理解、生成、交互能力上的巨大提升。本文将介绍多模态大模型的概念、关键技术、近期进展和应用场景、GPT-4的技术特性,并重点探讨以GPT-4为代表的大语言模型对构建多模态大模型的几点启发。具体而言,将讨论如何充分利用大语言模型的语言能力,在多模态大模型的构建中,借助语言的帮助更好地感知理解世界、创作生成内容、与人和环境交互。     

语气隐喻在网络英语经济新闻中的应用研究

隐喻是一种基本认知方式,人类通过隐喻来解释具有清晰结构的原始概念、分析结构比较模糊的目标概念,进而使人们更加清晰地理解抽象的现象或概念。这种手段或者说工具,在英语经济新闻中有着非常广泛的应用,其不同分型如方位隐喻、结构隐喻、语气隐喻等,在新闻中被用来描述与分析各种经济活动,使得人们可以更加清晰、直观地理解新闻中的各种专业术语与抽象概念。本文选择语气隐喻作为研究对象,试探究其在网络英语经济新闻上的具体应用。     

多模态赋能史学通识教育的思政导引模式

该文探讨了多模态在史学通识课程中的赋能原理和实施模式,分析了基于多模态信息的供给、推理、构建和合并过程。与传统依托文本的课程思政教育不同,多模态资源本身具有开放性、互动性和多样性等特点。因此,课程思政的引导重点在于利用多模态信息资源加深学生对史实价值的认识,提供深度互动和自主推理、构建和整合的学习环境,强调问题意识和实践导向。     

面向多模态医疗健康数据的知识组织模式研究

[目的/意义]随着网络化和数字化的快速发展，线上线下医疗健康活动产生了海量多模态数据，当前迫切需要一种更为完善的知识组织方法，对类型繁多、专业性强的医疗健康多模态数据进行序化和组织。[方法/过程]首先对多模态数据进行预处理以构建多模态医疗健康数据集；接着基于实体对齐和关系抽取实现医疗健康数据的知识单元抽取，并通过知识评估和融合构建多模态知识单元；然后在多模态知识单元和知识图谱基础上提出一种面向多模态医疗健康数据的知识组织模式；最后以文本和图像模态数据为例，以医疗健康问答系统为实践应用进行分析和验证。[结果/结论]针对多模态医疗健康数据的内在特性，基于多模态知识图谱和语义知识组织框架，提出一种面向多模态医疗健康数据的知识组织模式。本研究推进了多模态知识组织的理论深度，可为医疗健康领域知识序化、精准知识服务和深度知识发现提供有效支撑。     

浅谈信息化时代高职英语多模态教学模式的重要性

信息技术的高速发展和信息化手段的日益增多对传统单一语言模态和传统的外语课堂教学模式形成了巨大的冲击。而多模态话语分析理论运用于高职高专英语教学是近年来教学改革的一个重要趋势。本文将以多模态话语分析理论及高职英语教学要求为切合点,基于教学实践,进而探讨将多模态教学运用于高职英语教学中,使高职英语教学能够适应教育信息化发展需要的重要性。     

元宇宙多模态、跨模态内容时代的科技出版理论探讨与实践研究

【目的】探讨元宇宙技术背景下科技出版面临的挑战与机遇,探索以人工智能(AI)技术为核心元宇宙多模态、跨模态内容大爆发带来的科技期刊行业的范式创新和高质量发展路径。【方法】对元宇宙AI多模态、跨模态内容的相关概念、理念、特点、工具、应用场景等进行理论探讨,以《实用临床医药杂志》多模态数智内容融合出版实践范例为模板,剖析科技期刊元宇宙出版与传播的可能路径。【结果】借助多语种即时交互技术,科学共同体可实现“母语化创作,母语化阅读”,即科技期刊从以语种为焦点逐渐向以元宇宙多模态、跨模态学术内容的生产、组织、审核、评价、确权、传播、存储和应用为核心转移。AI赋能的“多模态数智内容编辑器”可解决元宇宙多模态内容的碎片化与孤岛化问题,是编辑与传播多模态内容的利器。【结论】元宇宙为科学共同体引入全新变量,多模态、跨模态传播生态让全球科技出版面临全新的发展格局,科学研究进入第五范式“元宇宙科学范式”,科技期刊发展进入元宇宙多模态、跨模态内容时期。《实用临床医药杂志》实践案例表明“多模态数智内容编辑器”可以解决元宇宙多模态、跨模态碎片化与孤岛化问题。     

社交网络舆情多模态知识图谱构建框架研究

[研究目的]信息技术的发展丰富了社交媒体用户的沟通交流方式，研究社交网络舆情多模态知识图谱的构建对网络舆情治理具有重要的现实意义。[研究方法]基于多模态数据的语义互补，讨论了实体属性关联、图像(视频)文字描述、图像(视频)属性、图像(视频)关联等多种异构数据融合方式。在此基础上，提出社交网络舆情多模态知识图谱的构建框架，并分析了在多模态语义理解、多模态实体对齐、多模态知识表示等方面存在的问题与挑战。[研究结论]提出基于多模态知识融合的社交网络舆情多模态知识图谱构建框架，为交互方式日趋丰富的社交网络舆情治理提供有益参考。