心理空间和概念整合理论在解决多模态场景中指称歧义方面的应用

发布时间：2020-08-15 21:54

【摘要】：在解决多模态场景中的指称歧义问题时,以文本为基础的传统理论难以较好地满足需要。影视节目作为图像、声音和动画效果的结合体,是多模态的典型表现形式之一。因此,本文试图以一类特殊的影视题材"戏中戏"为代表,探索如何应用属于认知范畴的心理空间和概念整合理论来解决多模态场景中指称歧义问题,这对网络信息时代大量涌现的视频语料教学有一定的指导意义。
【图文】：

空间图,空间

以同时被应用于多种层次的理论，可以将心理空间和其他领域相联系从而达到同指(co-reference)、借喻(metonymy)和隐喻(meta-phor)的目的。因此，除了单纯的文本语言，它也能够被用于解释多模态领域中的指称和推理现象(Fau-connier，1997;Fauconnieretal．，1998，2002)。Roher(2005:37)还将这一理论用于解释人们在进行艺术创作或欣赏时的大脑运行过程。他认为人们在进行艺术创作或者欣赏时，大脑内会自动出现一个所谓的“艺术-现实的整合空间”(art-lifeblendedspace)，使其在无意识的情况下就能编制并分析故事情节，见图1。图1艺术-现实整合空间(Rohrer2005:1691)TeaandLee(2004)的研究向我们展示了一种对指示词的既有力又有效的话语分析模式。他们应用概念混合理论将玩电脑游戏的人和在电脑游戏中所扮演的角色整合在一个以电脑为界面的角色扮演游戏平台上，从而巧妙地解决了“多重指代”的问题。基于他们的理论框架，本文将进一步分析概念整合理论对解决多模态中指称歧义问题的有效性。4应用分析此类电影多出现于歌舞剧中，如前面提到的《红磨坊》。本部分以电影音乐剧《如果·爱》为例，运用MSCB对这一类电影形式进行分析。《如果·爱》是一个戏外角色和戏内角色相互穿插的关于三角恋的故事。三位戏外角色:男演员林见东、女演员孙纳和电影导演聂文。十年前，出身贫苦但志存高远的孙纳遇见了不得志的导演系学生林见东并相爱。为了生存和成功，孙纳不择手段，终于成为金牌导演聂文的女友，也成为人人羡慕的大明星。她努力忘记过去，否定岁月痕迹。而林见东却依然深爱并苦苦寻找着孙纳。十年后，三人要同演一出戏，分别饰演三个戏内角色:张阳(由林见东饰演)、小雨(由孙纳饰演)、马戏团的班主，即所拍戏的导演，同时也是小雨的

空间图,空间,指称

讨论“我们的事”即孙纳与聂文关系，但句(4)中聂文坚持谈话已经结束。因为有图2“艺术－现实整合空间”的存在，我们可以断定句(1)中聂文对班主和小雨的故事描述也是他对于他和孙纳结局的表白。因此，句(1)中的指称词“她”/“小雨”同时指代了外戏的“孙纳”;句(1)中的“班主”/“自己”/“他”也同时指代了“聂文”。换句话说，在句(1)中，外戏与内戏在人物指称上分别发生整合，即通过一个指称词指代两个人物，将内戏和外戏融成一体，观众可以藉此推断出聂文与孙纳故事的结局。如图3(句(1)中“她”/“小雨”的艺术－现实整合空间)和图4(句(1)中“班主”/“自己”/“他”的艺术-现实整合空间)所示:5结语随着信息技术的发展，图文和声音共同作用的多模态交际方式和教学手段正在冲击着人们传统的教育模式、思维方式和欣赏习惯。电影作为图像、声音和动画效果的结合体，是多模态的典型表现形式之一。研究电影中的指称歧义问题无疑会对信息数字化时代大量涌现的视频教学有一定的指导意义。“戏中戏”电影形式可以说是一种被人为增加了理解难度的艺术表现形式，观看这类电影的感觉极为奇妙，甚至可以说这种感觉本身就是一次无法言喻的审美体验，这也在一定程度上说明了为什么“戏中戏”模式深受广大观众喜爱。文章着眼于此类电影的特点，尝试应用MSCB理论框架解决“戏中戏”的指称歧义问题。在MSCB过程中，认知策略、社会角色和社会关系都可以通过参与者的社会交际互动，即一种多模态的表现方式来确定。此外，本文还展示了一种不同于传统理论的对于“戏中戏”的运行机制的理解过程。这一过程既包括电影制作人的创作过程，又包括观众的欣赏过程，可以说两个过程互相满足，互为补充，缺一不可。以上分析可见MSCB作为一种话语分析工具

空间图,空间,指称,指代

奔此锬捎肽粑墓叵担嘈鄘?4)中聂文坚持谈话已经结束。因为有图2“艺术－现实整合空间”的存在，我们可以断定句(1)中聂文对班主和小雨的故事描述也是他对于他和孙纳结局的表白。因此，句(1)中的指称词“她”/“小雨”同时指代了外戏的“孙纳”;句(1)中的“班主”/“自己”/“他”也同时指代了“聂文”。换句话说，在句(1)中，外戏与内戏在人物指称上分别发生整合，即通过一个指称词指代两个人物，将内戏和外戏融成一体，观众可以藉此推断出聂文与孙纳故事的结局。如图3(句(1)中“她”/“小雨”的艺术－现实整合空间)和图4(句(1)中“班主”/“自己”/“他”的艺术-现实整合空间)所示:5结语随着信息技术的发展，图文和声音共同作用的多模态交际方式和教学手段正在冲击着人们传统的教育模式、思维方式和欣赏习惯。电影作为图像、声音和动画效果的结合体，是多模态的典型表现形式之一。研究电影中的指称歧义问题无疑会对信息数字化时代大量涌现的视频教学有一定的指导意义。“戏中戏”电影形式可以说是一种被人为增加了理解难度的艺术表现形式，观看这类电影的感觉极为奇妙，甚至可以说这种感觉本身就是一次无法言喻的审美体验，这也在一定程度上说明了为什么“戏中戏”模式深受广大观众喜爱。文章着眼于此类电影的特点，尝试应用MSCB理论框架解决“戏中戏”的指称歧义问题。在MSCB过程中，认知策略、社会角色和社会关系都可以通过参与者的社会交际互动，即一种多模态的表现方式来确定。此外，本文还展示了一种不同于传统理论的对于“戏中戏”的运行机制的理解过程。这一过程既包括电影制作人的创作过程，又包括观众的欣赏过程，可以说两个过程互相满足，互为补充，缺一不可。以上分析可见MSCB作为一种话语分析工具在解决多模态?

【参考文献】