插图和旁白故事比纯文本多提供了什么

研究人员发现,仅仅图片并不能可靠地提高幼儿对故事的记忆能力。真正能起到作用的是更具体的东西——它直接指向了旁白和插图如何协同工作。

人们普遍认为,儿童读物中的图片自然能帮助孩子理解和记住故事。《心理学前沿》杂志上的一项研究使这一假设复杂化:在受控环境下,插图本身并不能可靠地提高幼儿对故事内容的记忆能力。注意力,是的——孩子们的眼睛会直奔图片——但仅仅注意力并不等于理解。

同一项研究发现的更具体:插图在互动情境中帮助了记忆——在这种情境中,读者和孩子在故事进行时,就页面上的内容进行评论和提问。两个人看着并谈论同一幅图像的共同注意力,才使图片成为理解的辅助工具,而不是图片本身。

旁白几乎正好填补了这个空白。旁白者的语调、节奏和强调,就像互动式朗读的一种形式——引导孩子关注页面上的重要内容,标记一个笑话或一个威胁,给插图一个当下被观看而不是被匆匆瞥过的理由。纯文本要求年轻读者独自从文字中构建心理图像和意义;旁白和插图共同分担了这项工作,各自弥补了对方的不足。

理论:为什么文字和图片协同工作效果更好

这个想法在认知心理学中有一个名称:双重编码理论,由研究员艾伦·帕维奥提出。它认为大脑通过两个独立但相互连接的系统处理言语信息(文字)和非言语信息(图像),当两个系统同时处理相同材料时,记忆和理解会得到改善,而不是单独处理。这就是为什么一幅匹配得当的插图可以帮助孩子记住一个场景,而不仅仅是描述它的文字——图片和句子最终作为两个连接的痕迹而不是一个痕迹存储。然而,研究人员指出一个重要的限制:这种效果取决于插图是否真正与文本内容匹配。研究发现,当图片与文字不紧密匹配时,它可能会误导年轻读者对文本内容的理解,而不是强化它。

当旁白加入图片时会发生什么

2022年发表在《教育心理学评论》上的一项对有声读物研究的大规模综述,专门研究了当旁白音频与读者正在看的相同文本配对时会发生什么,而不是单独提供任何一种。在其涵盖的研究中,这种配对比单独的印刷文本更能帮助年轻读者和阅读困难的读者,对于阅读非叙事材料的年长、更有经验的读者来说,这种差距缩小了。这种模式与插图研究一致:音频旁白,就像一幅匹配得当的图片一样,似乎在读者的解码或注意力仍在发展的地方发挥最大的作用——填补了独立阅读会要求孩子在没有支持的情况下完成的工作。


作为一个整体体验构建,而非拼凑而成

WonderBooks 在设计上将插图和旁白放在同一页面上——艺术作品和音频是为该特定页面共同制作的,而不是单独录制旁白音轨,然后叠加到不相关的图画书上。

WonderBooks故事页面,显示插图和文字
WonderBooks同一页面上的插图、文字和旁白。
蜜蜂的旋律,发条飞行 — 图书封面 — Wonder Science
蜜蜂的旋律,发条飞行 → Wonder Science上带有插图和旁白的故事之一。 浏览 Wonder Science →

常见问题

儿童读物中的图片真的能帮助他们理解故事吗?

不一定。发表在《心理学前沿》上的研究发现,在受控环境下,单独的插图并不能可靠地提高幼儿对故事的记忆能力——注意力确实集中在图片上,但这本身并不能转化为更好的理解。真正有帮助的是互动情境,即成人和孩子在故事进行时一起讨论图片,或者类似地,插图与旁白配对,使图片在当下具有目的性。

边听旁白边阅读真的能提高理解力吗?

2022年《教育心理学评论》上的一项研究综述发现,与单独阅读印刷文本相比,将音频旁白与印刷文本配对可以提高理解力,其中对年轻读者、阅读困难的读者和英语学习者来说,效果最为显著。对于阅读非虚构作品的年长、有经验的读者来说,优势较小。

什么是双重编码理论?

这是一种认知心理学模型,由研究员艾伦·帕维奥提出,描述了大脑如何通过两个相互连接的系统处理言语信息(文字)和非言语信息(图像)。当两者同时处理相同内容时——例如,一张匹配的图片和一个匹配的句子——记忆和理解往往会比单独使用任何一种渠道有所改善。

继续阅读