VR阅读赋能读者理解的原理、优势与困境*
关键词:
本文引用格式
张宁, 刘浩冰.
数字阅读时代,人类栖居于虚拟与现实两大世界。[1] 2021年元宇宙(Metaverse)元年,以Meta(原Facebook)、字节跳动等为代表的中外科技巨头纷纷布局元宇宙,致力于打造让读者可以随时切换身份、穿梭于真实和虚拟世界,支持在任意虚拟空间和时间节点构成的元宇宙中工作生活[2],开拓出无穷想象空间。元宇宙以大数据、云计算、人工智能、虚拟现实、通信技术、区块链等为核心技术集群,以虚拟现实(Virtual Reality,VR)为核心显示技术,发展蔚为景观。出版业以上述技术应用为切入点,可迅速满足读者的多重感官体验需求。其中虚拟现实为读者提供了沉浸感、临场感的使用体验,以VR游戏、VR影视、VR图书为代表的虚拟出版物初具规模、前景广阔。为此,系统分析VR阅读赋能读者理解的原理、优势与困境,将为合理利用VR技术促进阅读推广和VR出版物的设计提供参考价值。
1 VR阅读的内涵及沉浸式阅读实现
1.1 VR阅读的内涵
当下以“二进制”技术为主要特征的数字媒介,显然突破了传统视觉的空间属性,并将时间属性融合为一。就此而言,以VR为代表的数字媒体新形态也开拓出更为广阔的领域,由此引发多学科来定义,其观点主要有三:技术主义者强调人机交互设备的关键性作用,认为在技术加持下VR是一种能够对读者在虚拟环境下的行为作出实时反馈的沉浸式和交互式的三维计算机仿真体验[3];传播学者侧重于媒介的传播效果,认为VR是一种沉浸式媒介体验,读者与VR世界以身临其境的方式互动[4],或者认为VR是一种由交互计算仿真组成的媒介,它能够感知读者的位置与动作、取代或增强读者单一或多重感官的感受,带来身体或心理上的沉浸感[5];教育学者侧重强调VR带来的认知效果,认同VR技术使得教育的任务变得更加直观、便捷,读者对信息认知的效率和可选择的范围得以提升[6],沉浸式VR学习环境中的要素如知识概念、技能、个人特点、互动经验都对学习的过程和结果有着积极的塑造作用。[7]
笔者认为VR阅读是在数字技术支持下赋能读者理解的优质媒介,读者能够通过沉浸式、交互式阅读体验,以身临其境的内容呈现方式增进理解,起到弱化阅读障碍、激发阅读兴趣、培养阅读习惯的作用,以助力个人全面发展目标的实现。
1.2 VR沉浸式阅读的实现
沉浸式阅读是实现具身认知的先决条件,沉浸性质量取决于VR系统屏蔽现实世界的时候,读者在虚拟环境中感受到的世界是否足够真实[8],可以是一种纯粹的心理状态、抑或是身体感知。
VR沉浸式阅读的实现离不开心理沉浸、身体沉浸、临场感、感官反馈和位置追踪的支撑,具体呈现于五个方面[5]:①心理沉浸是所有媒介和内容创作者的主要目标所在,是指读者在心理上深度参与到创作内容中,比如读者进入深阅读状态会深思、想象、推理文字描述的虚拟世界、会被带入情节而产生情绪上的喜怒哀乐;②身体沉浸是VR标志性特征,是指媒介技术通过刺激读者身体多重感官系统、令其身体进入媒介内容中(但不是指所有的感官都被媒介调动才算身体沉浸),VR的沉浸感在于读者需先行在生理上沉浸到VR虚拟世界中,这是VR应用的重要构成步骤;③临场感是VR环境下读者心理沉浸的一种表现,具体表现在读者可凭主观意愿行走、选择、干预、控制事件或对象,这种感觉是比静态2D体验更具吸引力,这种真实感的获得需要不同感官组合模式的支持,如视觉、听觉、知觉、重力感知等模块的协作;④感官反馈是生成身体沉浸的关键,高质量的VR系统需及时根据读者身体位置呈现对应的视角与内容,即系统需要追踪读者动态;⑤位置追踪是VR系统用于追踪读者头部、手部等所持物件位置,甚至身体关键节点的应用。
2 VR阅读赋能读者理解的原理
VR阅读赋能读者理解的优势主要是通过VR环境中的内容刺激读者的多重感官系统。对读者的认知理解裨益在于“心领神会”,使符号编码的技能要求大大降低。在VR虚拟世界中,读者开展多通道认知加工,[12]其赋能读者理解的基本原理如下:
当前VR出版物设计的出发点在于,基于VR技术多通道获取信息的优势,在不超越认知总负荷的前提下使读者最大限度地利用工作记忆中的认知资源,充分发挥多通道在信息获取与加工中的优势[19],这便是VR阅读赋能读者理解的基础原理。
3 VR阅读赋能读者理解的优势
3.1 辅助阅读构想,丰富内容理解
3.2 调动读者多重感官系统,获得广泛认知信息
VR阅读将人体作为认知媒介,感官通道则变成了人脑与环境交互的认知通道。传统意义上人的感官分视、听、触、嗅、味五种,而现代医学发现人体有15种感官[25],这意味着以身体为媒介的多通道认知效果远远超越传统认知方式。[26]传统多媒体教育中认为人获取知识依赖视听两大通道,而VR阅读强调以身体为第三感觉通道,将呈现多通道选择和整合机制,从而获取广泛认知信息。人的感觉记忆通道会通过注意力和选择机制对多通道信息进行筛选和编码,随后进入工作记忆加工流程,大脑自动调用长时记忆中的先验知识处理、加工、整合工作记忆中的声音、图像、触觉信息,形成语言模型、图像模型和体感模型,大脑针对整合形成的多通道信息跨通道整合,形成综合性信息,其中一部分形成人的长时记忆知识。[13]
3.3 复杂抽象内容直观化,降低阅读认知负荷
因此,VR阅读能够提升人对复杂概念的理解力[30],主要原因在于VR体验调动了人体的多感官通道,个体在虚拟世界中导航、探索、操作3D模型有助于从环境中获取实操经验,构建出有意义的知识,加强技能学习效果。
3.4 场景式阅读赋能经验性知识获取,使得读者认知更深刻
认知深刻是指对阅读内容理解的深入性和记忆的长久性。对阅读理解的深入性首先要求读者先行理解阅读内容,其直观性在降低认知负荷方面可以发挥作用;其次是扩展对阅读内容理解的丰富性。认知记忆的长久性源于读者在阅读场景中开展经验式学习的效用,在实操经验中获得的认知使得读者更容易回忆起体验过程中的情节、程序、情绪、自我决策、隐性知识(如肌肉记忆)和实用智力[36],这是“实践出真知”“百闻不如一做”对学习更有效、理解更深刻的学理基础。
VR环境营造的交互式、沉浸式阅读体验使得读者对认知内容记忆更长久在业界也是有迹可循。VR商业巨头三星内部经过研究发现,读者在VR体验环境下得到的信息留存是读者非VR环境下的2.4倍。[32]这是因为人的认知记忆受身处场景影响,例如场景中的细节关联、传感信息、情绪信息等都是记忆的重要组成要素。记忆的形成是一组连接神经网络关联分析过程,场景信息帮助人体形成记忆,也帮助人体检索记忆。正如学者Mayer认为,个体对所学内容的交互与控制可对认知过程所需的注意力、处理力起到管控作用[37],这符合多媒体教学中认可的当学习资料以动画和交互性方式呈现一定优于静态图表的学习效果。[38]这种VR场景式阅读是读者的经验式学习路径,能替代真实经验提升读者对所学内容的理解水平,深化认知效果。[39]
3.5 培养读者阅读兴趣,形成阅读爱好
VR沉浸式阅读的交互性赋予读者主角参与的身份,读者阅读的主动性大为增加[28],有利于培养读者持久的阅读习惯。从学习动机理论分析VR阅读有助于培养读者阅读爱好的逻辑在于:第一步,趣味性的VR阅读方式决定了读者阅读的内发性动力,是阅读行为发生的前提;第二步,读者喜欢上VR阅读有助于形成持久性和可延续的阅读动机,培养成阅读习惯;第三步,优质的VR内容策划引导读者体验优质阅读内容,提升阅读质量;第四步,长期以往的VR阅读习惯与高质量的内容获取提升读者知识获取、知识吸收的效果,用于指导生活行为;第五步,阅读满意度内发性驱动读者持续使用VR读物意愿,形成VR阅读爱好。这种既符合读者阅读兴趣、给其阅读带来趣味性和积极学习效果的阅读方式,更容易使得读者形成持久性阅读动机。[41]
4 认知视角下VR阅读的困境
4.1 削弱读者对内容的解读能力,导致阅读思想深度与宽度不足
VR阅读减少读者独立思考的任务,导致阅读思想深度不够。教育学认为文本阅读与理解是一个复杂的过程,应尽量弱化或减少读者阅读障碍,但畅通无阻的内容设计并非最优阅读路径,外在的认知负荷与障碍往往也是激发和倒逼读者探索文本内容、提升理解水平、加深记忆的有利因素。[29]
对阅读内容解读单一化,限制读者想象力。VR阅读所呈现的内容重度依赖设计者、创建者想象力和创造力,而非读者自我想象力[5],读者被动接受VR读物所呈现的具象化阅读内容,无须调动自我想象力处理抽象信息,弱化了读者想象力在阅读中的重要作用。莎士比亚曾言“一千个读者眼中就会有一千个哈姆雷特”,可见,不同的读者因其知识储备和经历的不同、对同一个事物的见解也不同,这便是阅读抽象文字的魅力所在。以图片理解为例,画家绘画和读者欣赏实则是对记忆的编码和解码,即画家要根据自己对情景的认知、结合自己的艺术才华与天赋、利用绘画工具对情景进行再创作、绘制输出一幅作品,这是画家绘画编码的过程。读者若要理解绘画是一个解码的过程,即大脑需要先处理图片上直白的信息(如颜色、主题),随后结合个人的知识存储、生活经历、情绪状态解读图片中深层的创作内涵,由此可见读者对所看内容的解码程度极度依赖于个人知识存储与背景经验,不同读者的解读方向、宽度、深浅也因人而异,这也是对同一事物“仁者见仁、智者见智”的原因所在。[42]
4.2 降低读者认知过程中的主观能动性,致使阅读作品难以常驻读者心灵
VR环境以既定程序调用读者多重感官系统,使其缺乏自主探索和思考知识过程,也使读者阅读缺少了知识加工和记忆的环节。弊端在于分散读者对字里行间内容的品读与欣赏,忽略读者主体构建能力和自我理性认知,导致阅读作品难以常驻读者心灵。[43]
4.3 刺激读者对阅读过程上瘾而非阅读内容,干扰认知行为
当前VR读物大多以游戏化形式供给读者,也是现实世界接入元宇宙的主要实现方式,即便是附带教育价值的严肃游戏所推崇的也是寓教于乐的教育理念。这种教育娱乐化、学习快乐化的方式是体验经济时代以用户为中心的商业行为导向,旨在刺激消费、扩大内需、推进服务的供给侧改革。
5 VR出版业务发展建议
VR阅读所扮演的角色只是丰富或增强阅读内容的供给,而非替代已有阅读方式。VR技术发展至今尚不成熟,出版机构不能盲目布局VR出版业务,但也不能抗拒VR阅读的赋能优势。
第一,树立发展元宇宙出版业务的观念,优先布局VR出版业务内容。当前元宇宙出版相关研究以理论为主,出版业尚不具备全面布局元宇宙的条件,但也不能等待,可分批次地推动基于元宇宙技术的细分项目落地,例如从较为成熟的VR出版业务入手,横向与主流机构合作,随着技术发展再逐步升级、迭代开发应用,将进军元宇宙出版的理想逐步落到实处。
第二,发掘特色资源内容,出版独家VR体验应用。VR出版内容设计、展示、传播与阅读是出版业落实文献资源活化、传承发展和创造性转化的重要途径,出版机构需发掘独家特色精品资源内容,凸显自身文化特色,出版专属VR体验应用,打造具有业内影响力的IP内容,为进入元宇宙做好资源铺垫。
第三,布局建设标准化VR出版物资源库,提高VR体验内容的供给力与可及性。制定或参与制定VR出版物资源加工、保存、检索、交换的标准,设计面向全产业的VR出版物元数据规范和交换存储标准。制定或参与制定VR出版物出版准则,涵盖版权保护、出版物流通、设计质量控制、数字资源确权规范、隐私保护等内容。建设VR出版物开发代码库和素材库,共建共享VR出版资源库或文化资源服务平台,提升VR读物资源的丰富性、系统性和多样性。
第四,推进VR出版人才培育工作,提升VR媒介叙事的表达水平。为发挥VR阅读赋能的优势,竭力弱化其当前困境,需要培育高质量的VR出版人才,以提升VR媒介叙事表达水平。培育要点涵盖:①VR出版物设计需传递积极、正确的内容价值与思想价值;②注重对非线性复杂知识元的揭示和线性叙事内容的展示,兼顾复杂内容直观化和叙事内容系统化双重设计需求;③融入多元化的设计元素,如中华美学、当代价值、游戏思维、文化元素、人机交互等要素,形成集科技、时尚、个性、文化、互动为一体的体验内容;④关注不同细分领域的用户需求,推出如童书、旅游图书、科普
参考文献
A model for understanding how virtual reality aids complex conceptual learning
[J].
How immersive is enough?a meta-analysis of the effect of immersive technology on user presence
[J].
Scene-motion-and latency-perception thresholds for head-mounted displays
[D].
Nine ways to reduce cognitive load in multimedia learning
[J].
Learning strategies for making sense out of expository text:The SOI model for guiding three cognitive processes in knowledge construction
[J].
A cognitive theory of multimedia learning:implications for design principles
[J].
The case for social agency in computer-based teaching:do students learn more deeply when they interact with animated pedagogical agents?
[J].
Learning from text,levels of comprehension,or:why anyone would read a story anyway
[J].
Dimensions of situation model construction in narrative comprehension
[J].
Word knowledge in a theory of reading comprehension
[J].
Virtual reality as a tool for promoting reading via enhanced narrative absorption and empathy
[J].
Virtually being lenin enhances presence and engagement in a scene from the russian revolution
[J].
Some neglected possibilities of communication
[J].
Virtual reality experiences as an instructional strategy for promoting comprehension
[J].
Development and use of the ARCS model of motivational design
[J].
/
| 〈 |
|
〉 |
