试论媒体融合背景下的互动数字绘本设计策略

刘迪昱

(四川开放大学 四川远程电子出版社，四川 成都 610000)

随着新媒体技术的发展，人们的阅读载体逐渐从传统纸质媒体向手机、平板电脑等移动终端转移，人们的阅读方式也从纸本阅读向数字阅读转变。目前，我国市面上的纸质绘本类型众多，大多数采用“原文+插图”“原文+拼音+插图”“导读+注释+插图”等形式进行内容呈现。除此之外，也有运用纸雕、纸张架构成型、互动机关等元素的立体绘本作品。在视觉效果上，立体绘本运用光影与透视技法表现空间感，形成具有一定深度的表现形态，让读者印象深刻。物体与接触面的位置、物体间的大小对比、物体间的疏密排列等都会产生空间的深度感。现代的立体构成形式引入新的量感、空间、时间等要素，使得绘本的创作和出版越来越复杂，成本也越来越高。新媒体成为媒体融合的先锋，并带动传统媒体走进融合、走向未来。[1]传统绘本开始以文字、图画、声音、影像等不同的媒体方式呈现，在媒体融合的大背景下形成了新的互动数字绘本。互动数字绘本携带方便、互动充分、媒介综合，表现出了很大的发展潜力。[2]更重要的是，互动数字绘本具有调动多种感官的阅读方式，其学习功效是传统的纸本书所无法比拟的。多路径故事情节发展和多媒体化呈现的特点，使得互动数字绘本的版面更活泼、内容更丰富，更能增强读者阅读的兴趣，这也是互动数字绘本吸引读者的最大优势。

一、媒体融合促进互动数字绘本的发展

数字技术的发展为绘本带来一连串的“媒体融合”反应。媒体融合可视为电视、广播、报纸、书刊、网络等产业的界限模糊，这些产业不因为界限模糊而消失，反而融合在一起形成多元平台的传播环境。绘本因媒体融合而进化。数字技术在媒体融合的过程中提高了各种媒体之间的兼容性、合作性和关联性，从而使得互动数字绘本突破了传统媒体的界限，能够与各种媒体进行互动与整合。

以上海外语教育出版社引进出版的绘本《儿童英语阅读魔盒》及其200节配套内容为例，该绘本涉及文学艺术、数学、科学和社会研究等主题。该绘本及其配套内容以文字、图像、声音、视频、动画等聚合的传播内容，以App、公众号、慕课等多模态的辐射性传播方式，在推动互动数字绘本与其他媒体融合发展方面提供了有益借鉴。媒体融合让绘本改变了原有的生产模式，破除了产业界限，而发展为多平台传播、多媒体工作。基于多平台传播、多媒体工作，媒体融合提高了绘本创作者的工作效率，简化了绘本创作者的工作流程。不光绘本的生产模式有所改变，其运营策略也整合了过去毫不相关的方法、空间、工具。

媒体融合是一种人人可以成为传播主客体的媒介形式。[3]数字技术的进步，衍生出新的绘本形式，形成了全新的互动数字绘本。可以说，媒体融合正在改变绘本乃至出版产业的面貌，促进了互动数字绘本的多元化发展，提高了互动数字绘本的互动性功能。互动性增强后，消费端有机会成为主动方，改变了生产端与消费端的关系。这也影响到身处其中的从业者，从业者不得不跳出既定思维，改变自己的工作思路、工作方法、工作流程等，为互动数字绘本赋予新的设计策略。

二、媒体融合背景下互动数字绘本的设计策略

互动数字绘本，可以根据书本的内容而延伸其功能，产生影片动画、乐曲音效、游戏互动等多媒体功能。随着数字设备的广泛普及，互动数字绘本的呈现方式也适应手机、平板电脑、穿戴设备等的功能而设计。2020年获得博洛尼亚最佳儿童数字内容奖的作品《流浪者：弗兰肯斯坦的生物》就运用了互动数字化叙事形式，结合出色的视觉效果和精妙的游戏玩法，为读者创造了一个全新的世界。在媒体融合的背景下，本文从互动提示、文字与声音、情境故事、数字视觉、移动增强现实等方面分析互动数字绘本的设计策略。

(一)互动提示设计

互动数字绘本可以实现阅读的双向交流性，读者会有很强烈的沉浸感受，并且与之进行反馈和交流。[4]与传统绘本相比，互动数字绘本最大的不同在于加入了双向的互动机制，从而让读者与绘本之间产生互动。因此，互动数字绘本中的互动提示设计非常重要，在互动提示设计上可综合考虑多种媒介，包括图像、影像、声音等。

1. 单向式互动提示

在互动设计的提示模式中，最常见的是单向式的操作，此类互动提示的设计最为普遍，在界面设计上的应用也最为广泛。单向式互动提示，即与文本内容无关的指引符号，并以箭头、折页或外加的文字作为直显式的分类。单向式的功能设计能够使读者更为直接地接触工具并操作，且得以进行互动而无须经过旁人指引。在手眼协调配合下，读者用指尖碰触屏幕上的对象或符号，进而产生有趣的人机互动。

2. 图像式互动提示

互动数字绘本经常沿用原著文本的内容，并加入多种媒体的内容使读者能够进行互动。互动数字绘本展现出纸质绘本所缺乏的丰富性与活泼性，体现了多媒体的丰富性。图像式互动提示的设计，以具有连接性、易于想象作为互动提示的基本特性。图像式互动提示的内容可分为两类：第一类是以与故事相关的直接图像形态引导读者进行互动，第二类则以人物角色的行动、背景出发，在设计上以闪烁、音效或填充颜色的方式进行提示。在以图像的方式呈现故事内容时，也可以通过故事与图像带来互动提示，使读者能够了解图像的提示并进行互动。

(二)文字和声音的设计

互动数字绘本中的内容通常包括文字及图像，而文字形式的互动提示是更常见的设计形式。在互动数字绘本的互动提示设计上，经常会以文字的形式延伸出互动提示，读者可以由故事的文本去想象互动提示的可能性，并通过故事内容达到互动的可能性。在阅读时，读者也能通过旁白的辅助了解故事内容，或者猜测互动提示，并与故事内容进行互动。没有声音的画面是单薄的,声音对画面能够起到补充和延展作用。[5]声音式互动提示可分为两类：第一类是以讲故事的方式进行故事诉说的旁白，第二类则是与互动数字绘本的图像相关的音效、背景音乐等内容。旁白的形式以听觉为基础，而所见的文字会通过旁白而组织成语音的形式。传统绘本常以口语“讲故事”的方式进行故事呈现，使读者能够了解故事的内容。互动数字绘本在呈现方式上保留了“讲故事”的特点，多以旁白的方式进行故事的述说。“讲故事”的方式亦能让读者针对文字进行思考与推理，而互动提示的设计会针对旁白所提出的文本内容进行引导，从而促使读者进行思考。在故事中加入与文本、图像相关的音效和背景音乐，通过声音的互动提示，读者在音效中进行想象，并借助与故事相关的音效设计产生互动。

(三)情境故事设计

阅读不仅仅是眼睛看，而更重要的是感受、体验。[6]绘本的数字化转换使其拥有了人机交互、绘本游戏、情景式学习等诸多特点。[7]互动数字绘本的情境故事适合应用于转换空间的设计，读者可以在不同时空中想象故事内容的发展。情境，由蕴含在情景中的那些相互交织的因素及其相互之间的关系构成，在互动数字绘本中可以激发出读者感性的一面。因此在情境故事设计时，不能只考量满足读者需求的功能，更需要充分考虑读者阅读时的心境，考虑读者回馈的情感是正面的还是负面的。根据互动数字绘本的内涵去设计情境，有利于激发读者的想象力，使其尽情陶醉在某种情境中。如在设计亲子教育情境时，互动数字绘本需规划好虚拟的游戏环境，可以是家里的游戏角落，也可以是精心设计的亲子游戏场、儿童博物馆或者学校教室，并提供具体学习目标的玩具或素材。当孩子进入游戏环境后，由他主导游戏过程，成人则通过和孩子一起玩、引导孩子思考方向或提供更多游戏素材等方式，增强孩子探索、学习的兴趣。情境故事设计的目的，除了为读者提供使用便利与舒适，还应在充分尊重读者个性的前提下，满足其情绪上、心理上的需求。例如旋律、音效的加入能让读者感受到快乐、生气、困惑等情绪，旁白、配音能以故事角色的口吻传达出读者的内心感受。

(四)数字视觉设计

数字视觉设计，是交互设计和界面设计的结合，交互设计负责对界面的视觉处理。[8]数字视觉伴随着时间要素，通过分辨影像前后差异让读者产生空间感，分辨出物体之间的距离。产生影像的空间感有很多种方式，常见的影像制作形式与3D动画相似，只是把原本的立体模型变为将设计好的图像或影像置入3D空间进行位置排放，再通过镜头焦距、灯光或滤镜设定而产生成品。作品可运用透视和光影的打光技巧，使平面对象具有立体实物的量感，再加入对象之间的位移、缩放差距，产生深度对比。3D动态效果需包含近、中、远的对象，架构出对象之间的空间，并借助数字运算制成能看出深度的影像。除了用计算机运算成数字影像的形式，也可用真实镜头拍摄精准规划的场景对象而形成立体感。

在数字视觉设计中，可通过时间、空间、量感、视角等的设计，使平面物体产生立体的效果。3D动态效果就是由非实体对象，借助时间、空间、量感与视角等元素，通过设计、安排、运算而产生所需的视觉效果。在互动数字绘本的数字视觉设计中，音乐营造氛围、对象动态表现是常见的伴随要素。为了避免过多的听觉、视觉干扰，可适当减少字幕、旁白，让读者在感官与操作上简单化，使互动数字绘本呈现出更明确的视觉效果。另外，在相关的情感型绘本中，困境与结局的安排可以有效发挥互动性，如在思索问题的段落添加互动内容，在故事高潮段落设计戏剧性的视觉呈现，都能够给读者留下深刻印象。

(五)移动增强现实设计

近年来，移动增强现实在各种媒体场景的应用日益广泛。增强现实将计算机产生的各种信息类型叠加在视觉实物之前，来提供丰富的信息，并通过数字信息强化学习环境，打造沉浸式虚拟环境。将增强现实技术与绘本创作相结合，借助更多的互动与人文交流能带领读者进入不同的阅读境界，体验增强的互动数字绘本故事世界。增强现实阅读模式以移动工具扫描绘本封面照片影像，回传绘本影像信息，增强现实数据库比对系统中相对应的增强现实对象，再回传到移动工具，呈现相对应的增强现实故事内涵于移动工具上。读者可以通过移动工具的增强现实而扩大自己的阅读视野。

以读者需求为导向，通过增强现实的阅读接口，结合互动数字绘本数据库系统设计，能打造出更丰富的阅读模式。多元的学习管道，让读者能通过更直觉式的接收模式与学习内容进行互动。随着平板阅读模式逐渐普及，增强现实故事阅读成为一种重要的亲子共读形态。阅读与知识学习场域融入增强现实的学习，能提供多样化的阅读体验。AR充分发挥技术优势，提升了互动数字绘本阅读的趣味性、知识性和游戏性。[9]这种形态的阅读体验新鲜有趣，比传统阅读更具吸引力。如在儿童学习阅读的应用上，借助增强现实技术，结合游戏的经验，能拓宽儿童的想象空间，有助于儿童的认知发展。

互动数字绘本的创作与出版，要深入把握数字化技术的特点及其规律，保持绘本创作与出版理念的先进性。[10]本文结合媒体融合的背景，对互动数字绘本的设计策略进行了探讨。值得注意的是，互动数字绘本虽可根据内容而适度增加相关功能，但太过复杂的功能反而会让读者在操作过程中产生困惑，甚至干扰绘本本身的内容。因此，创作者必须从绘本内容出发，对互动数字绘本进行科学合理的设计。