往期推文中,我们为大家推出了多个主题的中心研究员成果(公众号主页菜单栏“学术动态—研究员成果”中可查看)。
本期将继续为大家推出“档案知识服务理论与实践”专题,相关成果有以下5篇:
本期分享的论文来自刘力超等的《馆藏照片档案叙事可视化方法探析》。
刘力超,中国人民大学信息资源管理学院工程师。兼任中国人民大学档案事业发展研究中心研究员、中国人民大学数字人文研究中心研究员、中国人民大学电子文件研究中心研究员。主要研究方向为文档知识图谱构建、文档数据化、基于深度学习的文本信息挖掘与组织、档案开放审核。
刘力超1,2,曾静怡3
(1.中国人民大学信息资源管理学院,北京100872;2.中国人民大学数字人文研究中心,北京100872;3.南开大学商学院,天津300071)
摘要:叙事可视化应用于馆藏照片档案能够更好地传递载体背后的故事,充分发挥数据价值,参与文化记忆构建。针对馆藏照片档案叙事可视化研究存在的方法、路径不明与实现思路不具体问题,探索以故事为中心的馆藏照片档案可视化设计与表达方法,总结为总体叙事可视与双重视觉叙事两个方面,以为馆藏照片档案更好开发利用、增强文化数字传播力、支撑文化记忆构建提供一点思考。
关键词:照片档案;叙事可视化;讲故事
引文格式:刘力超,曾静怡.馆藏照片档案叙事可视化方法探析[J].档案学通讯,2023(5):36-42.
分类号:G270.7
在“问题—发展”双向形势下,笔者拟基于实践案例总结分析问题,在叙事可视化理论下探索以故事为中心的馆藏照片档案可视化设计与表达方法,从而为馆藏照片档案更好开发利用、增强文化数字传播力、支撑文化记忆构建提供一点思考
叙事可视化在数据新闻领域应用较多,学者们针对数据新闻在内容上如何实现讲故事和数据的可视化形式进行了研究。[12-15]其关键在于数据可视化对于传统新闻叙事的突破,形成了线型、组合型和交互型叙事模式,以及相关性、对比性和演变性的叙事逻辑。针对纪录片的叙事可视化学者们也开展了相关研究,如贾德·布拉德伯里(Judd D Bradbury)和罗珊娜·瓜达尼奥(Rosanna Guadagno)[16]探讨了纪录片的结构和技术,以及它们如何应用于用视频构建叙事可视化的实践。扬·乔瓦内克(Jan Chovanec)[17]基于印刷新闻纪录片,探讨了序列新闻照片如何排序与组织,从而影响话语的模式。近年来,叙事可视化在历史文化领域有一定探索,如谢玉雪[18]探讨了基于国外典型国家档案馆的线上展览数字档案资源的可视化叙事服务模式,曾静怡等[19]从时空、主题、场景维度构建了历史照片档案的叙事可视化呈现框架,潘晟[20]对近现代报刊地图的叙事性和可视化呈现进行了研究。值得指出的是,数据新闻领域与历史文化领域的叙事可视化研究存在本质区别,主要在于:数据新闻的叙事可视化本质是“生产”,是新的信息传递;而关于历史文化的叙事可视化本质上是“再现”,即故事不是新创造的,而是发现、重新讲述与传递。目前,关于叙事可视化如何用于历史文化资源的“再现”研究较少,尤其是针对具体类型资源如照片的研究仍比较欠缺。但是,实践领域已有一些工程化应用的思路。梳理已有的应用逻辑并分析其面临的问题,能够更加明确馆藏照片档案叙事可视化理论构建的方向。鉴于此,笔者将基于实践案例总结分析问题,在此基础上探讨馆藏照片档案叙事可视化方法。
国内相关实践已经有意识地从照片的主题属性和时空属性出发,对照片档案进行叙事性组织与可视化构建,线下线上都各有特色。线下以老照片档案展览为主要形式,如广州市档案馆的《光影广州兰台存迹——广州市档案馆馆藏声像档案展》、浙江省档案馆的《“档案见证全面小康”展览》等,很多高校档案馆也开展了校史老照片展览。各级各类档案部门馆藏照片档案叙事可视化理念应用的线上实践较少,主要是网站瀑布流展示为主。笔者所在研究团队一直关注照片类档案资源的挖掘、组织与呈现,积累了一些实践经验。如北京老照片档案时光机[24]针对北京老照片档案设计了4条展示主线,包括基于内容的专题主线、基于地图的位置信息主线、基于时间的时间轴主线与基于图文的瀑布流主线,在数据特性与可视化形式之间做了一个基本映射;安徽大学数字记忆网[25]对历史照片档案进行了叙事性组织与可视展示,设计了安大地图、九秩风雨、时光记忆等产品框架,实现了历史照片档案的多样化开发;吴宝康学术名人知识库[26-27]对吴宝康先生的人物照片档案进行了故事化的情节构建,通过构建档案图像流,探索人物关系知识图谱构建,最后实现基于知识图谱的档案数据故事化。
其一,很多项目都是在工程化思维下开展的,理论凝练不足,叙事可视化应用表层化。一方面,基于馆藏照片档案资源秉性特征所形成的叙事逻辑框架尚不清晰;另一方面,项目都较为关注页面呈现效果,即注重可视化呈现的网站美观与展示形式,而对于数据挖掘、故事化叙事逻辑的探讨较少,用户交互也涉及较少。
其二,叙事可视化作为一种方法,应用于馆藏照片档案能够促进其更好地开发利用,凸显照片档案价值。但是,叙事可视化同时也是一种目标,即需要考虑如何更好地实现叙事可视化。目前,这部分实践探索较少。以项目推进馆藏照片档案叙事可视化固然是一种好的载体与方式,但还未能影响从而优化馆藏照片档案开发利用模式。从照片档案开发利用工作的长远发展而言,还需要探索更具体的思路。
基于此,本文引入叙事可视化理论,尝试提出一套科学的馆藏照片档案叙事可视化方法,为馆藏照片档案叙事可视化目标实现提供参考。
时空叙事可视化路径主要基于时空表示技术,将时间和空间整合,面向时间叙事结构与空间叙事结构进行构建。有关时空表示技术的研究已有不少,如本杰明·巴赫(Benjamin Bach)与皮埃尔·德拉吉切维奇(Pierre Dragicevic)等[30]提出时空立方体表示技术可以转变成不同的时空可视化(仅包括空间或时间的角度),通过展平、切割、移动与拉伸等操作,将多维数据集的3D形状转换为可读的2D可视化。伊娃·迈尔(Eva Mayr)与弗洛里安·温德哈格(Florian Windhager)[31]进一步提出了5类时空表示技术,包括多个协调视图、动画或幻灯片放映、颜色编码的图层叠加、图层并列、时空立方体表示;进一步,从历史角度提出了4种基于时空角度的叙事可视化视角:并列(对照)、动画(幻灯片)、叠加、时间轴。基于已有研究和实践,笔者总结,时空叙事可视化产品框架主要有并列(对照)、动画(幻灯片)、叠加、时间轴、瀑布流、GIS地图、时空立方体等。
主题叙事可视化路径具有显著的“实体-关系”特征,主要基于知识图谱技术将同一主题的内容聚合,构建知识图谱的形式来进行可视化表示。主题有抽象与具象两种阐释。其中,人物、事件等都可以统称为主题,是主题在具象化层面的体现;基于内容的总结与凝练,则属于主题抽象化层面的表达。这里所指的主题是广义的主题概念。馆藏照片档案知识图谱具有维度性,根据不同的维度如人物、事件、事件呈现出不同的中心、分布与走向,由此,基于不同维度的知识图谱,能够实现不同主线的图谱应用与基于特殊类型知识图谱的故事化叙事研究。从已有研究和实践,笔者总结,主题叙事可视化产品框架主要有图文表示、故事图集、瀑布流、叙事图谱等。
已有故事的双重视觉叙事以故事为导向,强调已有故事的再组织。已有故事的再组织的关键在于馆藏照片档案的序列(增删重排)以及叙事可视化框架的组配与选择。其中,序列是视觉叙事的重要因素,既关注事件的顺序问题以及照片的前后顺序问题,其本质为一种序列艺术。这种序列艺术实际上也属于动态上下文,能够传达组织者本身的意图,引导用户理解。照片序列加上3.1.2中叙事可视化框架的组织,能够实现馆藏照片档案叙事可视化的多种可能。
未有故事的双重视觉叙事以照片为导向,强调新故事的生成。其关键在于上下文应用与叙事图谱构建,以及叙事可视化框架的组配选择。值得指出的是,“照片只是按下快门一刹那间的记录,从正面讲,它的一刹那的情况具有长久的意义,但从反面来看则既没有解释前因,也没有预示后果”[34]。因此,上下文应用对于照片叙事具有十分重要的意义。在此前的研究中,笔者分析了上下文应用于照片档案叙事3个层面能力:资源发现、内容理解与意义阐释,并提出基于上下文知识图谱的照片档案叙事实现思路受到实体与关系动态影响,其叙事模式主要体现在实体聚合与关系驱动上。[35]从而,在不同叙事模式下产生的照片档案故事同样结合3.1.2中叙事可视化框架,能够实现馆藏照片档案叙事可视化的多种可能。
静态纯展示型的可视化交互结构类似于马提尼酒杯,其茎秆代表着单一路径作者驱动的叙述,而玻璃杯的张开嘴则代表了通过读者驱动的互动性可能实现的路径。马提尼酒杯结构首先由作者驱动的叙述起作用,然后再由读者驱动的交互发挥作用。[37]在馆藏照片档案叙事可视化中,纯展示型结构主要由故事创建者进行展示规划,对照片进行整理组织,一方面,通过适配的叙事结构进行叙事性文本准备,另一方面,根据关系进行照片的叙事排列,呈现形式一般为线下展板、线上展览、专题网站、特色网站等。其中,专题网站立足于资源内容主题以及用户需求,优先组织经典、有展示价值以及时代特点的资源、具有新颖性与特定价值;特色网站针对不同载体的资源聚合,例如老照片网站,根据不同主线对照片档案进行分类组织与可视化展示。[38]纯展示型的故事呈现具有相对稳定性,故事专业性强,层次丰富,呈现度高。
动态强交互型的可视化交互结构,以向下钻取故事结构为代表。向下钻取的叙事可视化结构通常由故事创建者提供一个通用的主题,然后允许用户在该主题的特定实例中进行选择,以揭示更多的细节和背景故事。[39]故事创建者起到一个引导的作用,主动权在用户手上,由用户来决定故事怎么讲。主要形式是线上,通过构建交互白板,可以提供给用户进行故事创建的平台与工具。近年来,市面上也开发了相关故事地图工具,可供学术研究参考借鉴。如美国西北大学骑士实验室(Knight Lab)开发的StoryMapJS(https://storymap.knightlab.com/),这是一个免费工具,可帮助用户在网络上讲述突出显示一系列事件的位置的故事,通过在地图上添加内容,能够实现基于地图的故事呈现;Esri开发的ArcGISStoryMaps(https://www.esri.com/en-us/arcgis/products/arcgis-storymaps/overview),通过自定义地图讲述故事,将文本、照片和视频添加到现有的ArcGIS地图图层和Web场景中,创建易于发布和共享的交互式叙述。在馆藏照片档案叙事可视化中,这一结构实现的关键在于交互白板的构建。基于交互白板,用户可以根据推荐性主题或者是关系,进入深入挖掘与创作。具体的交互方式可以有以下两种:一是预设故事讲述模板,添加照片档案及其相应解释性文本;二是提供事件序列或叙事图谱,秉承“总览为先,缩放过滤按需查看细节”原则,由用户决定呈现哪些照片,再与之对应提供相应的事件、时间、地点、人物等实例信息,以及相关联的照片档案。此外,值得指出的是,随着媒介叙事的发展,游戏也成为强交互的一种重要方式,如寓教于乐的严肃游戏。虽然形式不同,但可以认为游戏也是一种交互式的思想,不再另述。
致谢:本研究得到中国人民大学校级计算平台支持。
作者贡献说明:刘力超:研究选题提出,论文修改,最终定稿;曾静怡:论文撰写与修改。
【参考文献】
[2]WOHLFARTM.Storytellingaspectsinmedicalapplications[EB/OL].[2022-07-07].https://old.cescg.org/CESCG-2006/papers/VRVis-Wohlfart-Michael/VRVis-Wohlfart-Michael.pdf.
[3] 朱梦泽,赵海英.叙事式可视化综述[J].计算机辅助设计与图形学学报,2019,31(10):1719-1727.
[4] [18] 谢玉雪.数字档案资源的可视化叙事服务研究[J].档案学研究,2020(3):122-128.
[5][36][37][39]SEGELE,HEERJ.Narrativevisualization:Tellingstorieswithdata[J].IEEEtransactionsonvisualizationandcomputergraphics,2010,16(6):1139-1148.
[6]HULLMANJ,DRUCKERS,RICHEN,etal.Adeeperunderstandingofsequenceinnarrativevisualization[J].IEEETransactionsonvisualizationandcomputergraphics,2013,19(12):2406-2415.
[7]BREMERM,LEEB,BACHB,etal.Timelinesrevisited:Adesignspaceandconsiderationsforexpressivestorytelling[J].IEEEtransactionsonvisualizationandcomputergraphics,2016,23(9):2151-2164.
[8] 朝乐门,张晨.数据故事化:从数据感知到数据认知[J].中国图书馆学报,2019,45(5):61-78.
[9] 张晨,朝乐门,孙智中.数据故事叙述的关键技术研究[J].情报资料工作,2021,42(2):73-80.
[10] 易旎,朝乐门,张晨.可视故事化:特征、方法与应用[J].情报资料工作,2021,42(2):63-72.
[11] 朝乐门.数据故事的自动生成与工程化研发[J].情报资料工作,2021,42(2):53-62.
[12] 刘杰.数据新闻可视化叙事初探[J].科技传播,2013,5(16):26-27.
[13] 战迪.新闻可视化生产的叙事类型考察———基于对新浪网和新华网可视化报道的分析[J].新闻大学,2018(1):9-17,147.
[14] 许向东.转向、解构与重构:数据新闻可视化叙事研究[J].国际新闻界,2019,41(11):142-155.
[15]ZHIQ,OTTLEYA,METOYERR.Linkingandlayout:Exploringtheintegrationoftextandvisualizationinstorytelling[J].InComputerGraphicsForum,2019,38(3):675-685.
[16]BRADBURYJ,GUADAGNOR.Documentarynarrativevisualization:Featuresandmodesofdocumentaryfilminnarrativevisualization[J].InformationVisualization,2020,19(4):339-352.
[17]CHOVANECJ.Multimodalstorytellinginthenews:Sequencedimagesasideologicalscriptsofothering[J].Discourse,Context&Media,2019(28):8-18.
[18] [19][25]曾静怡,顾伟,刘力超,等.照片档案创新编研思路探析[J].档案学通讯,2021(4):71-76.
[19] 潘晟.叙事、互文与可视化:文献学视角下的近现代报刊地图[J].江苏社会科学,2021(4):231-240,244.
[20]NATIONALARCHIVESOFAUSTRAILIA.Storiesfromthearchives[EB/OL].[2022-10-11].https://www.naa.gov.au/blog.
[21] CALISPHERE.About.[EB/OL].[2022-10-11].https://calisphere.org/.
[22] 艾琳·赫里茨.“记忆宫殿”:荷兰历史馆藏的利用[N].中国档案报,2016-01-21(003).
[23] [38]刘力超,陈慧迪,江健,等.北京城市记忆照片资源地理空间化组织平台构建[J].计算机系统应用,2017,26(8):1-8.
[24][28]ZENGJ,XUY,NIUL.Storifiednarrative:Awakephotoarchivesindigitalhumanities[J].DigitalScholarshipintheHumanities,2022,37(4):1394-1410.
[25] 牛力,高晨翔,张宇锋,等.发现、重构与故事化:数字人文视角下档案研究的路径与方法[J].中国图书馆学报,2021,47(1):88-107.
[26] 龙迪勇.图像叙事:空间的时间化[J].江西社会科学,2007(9):39-53.
[27]BACHB,DRAGICEVICP,ARCHAMBAULTD,etal.Adescriptiveframeworkfortemporaldatavisualizationsbasedongeneralizedspace-timecubes[J].InComputerGraphicsForum,2017,36(6):36-61.
[28] MAYRE,WINDHAGERF.Onceupona Spacetime:VisualStorytellinginCognitiveandGeotemporalInformationSpaces[J].ISPRSInternationalJournalofGeo-Information,2018,7(3):96.
[29]KRESSG,LEEUWNT.ReadingImages:TheGrammarofVisualDesign[M].London:Routledge,2006:114-153,175-214.
[30]PAINTERC,MARTINJ,UNSWORTHL.Readingvisualnarratives:Imageanalysisofchildren’spicturebooks.Sheffield:EquinoxPublishingLtd,2013:15,53,91.
[31] 李元.论美国摄影[M].北京:中国摄影出版社,2001:97.
[32] 曾静怡.上下文在照片档案叙事中的应用[J].档案学研究,2021(6):100-105.
[33] 孙信茹,杨星星.家庭照片:作为文化建构的记忆———大等喊傣族村寨的媒介人类学解读[J].新闻大学,2012(3):42-51.
原文载《档案学通讯》2023年第5期,
经杂志社授权后发布。
叶尔达纳:文章所提的双重视觉叙事概念,让我意识到在处理馆藏照片档案时,我们不仅要关注照片内容的历史和文化价值,更应利用现代可视化技术加大照片的视觉叙事力度,以此激发观众的共鸣和情感。这种方法能有效促进观众对档案内容的理解和感知,进而加深对文化遗产的认同感和归属感。特别是在方法路径不明确、实现思路不具体等问题上,文章提出的以故事为中心的可视化设计与表达方法,指引了我在未来研究中如何结合理论与实践,寻找更有效的馆藏照片档案叙事可视化路径。
刘思良:本文从馆藏照片档案叙事可视化的实践出发,总结发现了叙事可视化作为方法和作为目标,在馆藏照片档案开发利用中存在的亟待解决的问题,一是方法路径不够清晰,二是实现思路不够具体。基于此,作者对馆藏照片档案叙事可视化方法进行了设计,提出总体叙事可视和双重视觉叙事两条路径,并分别详细列举了实现的方法要点和技术工具。在信息化的时代大背景下,如何更好地挖掘、利用和展示馆藏照片档案的价值,更好发挥馆藏照片档案的社会文化记忆构建作用,成为了摆在我们面前的重要课题。本文无疑为这一课题提供了系统的实现思路。
王元新:本文创新之处在于首次提出并系统化地构建了总体叙事可视与双重视觉叙事的理论框架,明确了馆藏照片档案叙事可视化的方法和路径。此外,强调了用户的互动性和参与性,尤其是通过双重视觉叙事的讨论,体现了在现代数字化环境下对用户体验重要性的深刻理解。文章所提出的方法和框架不仅为馆藏照片档案的叙事可视化提供了理论支持和实践指南。这也启示我们应寻找并表达档案背后的故事,以增强信息传递的深度和广度。在数字化时代,应更加关注和利用用户体验,以促进跨学科融合与创新,共同构建和传承文化记忆。
毛宁:作为数字人文视域下可视化研究的重要分支,叙事可视化为馆藏照片档案等历史文化资源的数字化开发与利用提供了新的理论视野与实践路径。该研究在系统整合馆藏档案叙事可视化理论概况、实践成果、现存问题、分析框架的基础上,提出了由总体叙事可视与双重视觉叙事构成的馆藏档案叙事可视化方法,在总体叙事方面,将故事生成与可视叙事相结合,促进数据故事单元的挖掘重构与可视化呈现。在双重视觉方面,将故事粒度与可视粒度相对齐,支持数据故事的多叙事走向与多主体交互。旨在为文化数字化战略下馆藏照片档案叙事可视化范式构建提供参考,以数字人文思维与技术赋能其传播力、吸引力与感染力的增强,实现社会记忆与共同文化保存利用的数字化变革。
文案:叶尔达纳 刘思良 毛宁 王元新
校对:潘洁敏 张茜雅
排版:卿非
审核:钱毅