来源：期刊VIP网 时间：
作者：图奥默·哈帕拉;约翰·贝特曼;王振华;吴启竞;杨林秀;
单位：芬兰赫尔辛基大学语言系;德国不莱梅大学语言学系、英语系;上海交通大学马丁适用语言学研究中心;大连理工大学外国语学院;山西大学外国语学院;
摘要：多模态研究探索人类如何依赖各种有机结合的表达资源进行交流，已建构为一门新兴学科。本文认为，当下数字人文的研究结合多模态研究的洞察力对可视材料进行大规模分析是有益的举措。多模态研究开发的概念为大型语料库和数据集中的各种表意模态提供了合适的元数据方案。本文使用常见的表意模态和示意图来阐释文中提出的方法，并运用统计和计算的方法分析两个新建的多模态语料库。研究结果表明，由多模态驱动的元数据方案可以为大型语料库和数据集的计算分析提供坚实基础。即使是语料库或数据集的设计不支持全面分析多模态交际，多模态理论依然可以用于对各种视觉材料进行比较严格的分析。
关键词：多模态语料库;;远程视觉图表;;洞见;;符号学;;元数据方案
基金资助：上海交通大学文科创新团队培育计划项目(项目编号:WKCX007);; 教育部人文社会科学研究青年基金项目“刑事庭审中控—辩—审事实重构的话语协同研究”(批准号:22YJC740085)
