6月23日,故宮博物院、微軟亞洲研究院和北京大學(xué)在故宮博物院西南崇樓舉行發(fā)布儀式,宣告“走進(jìn)清明上河圖”沉浸式數(shù)字音畫(huà)展示項(xiàng)目正式完成。游客今后可以在故宮的兩個(gè)展廳中借助多媒體平臺(tái),交互式地欣賞這幅傳世名作,流暢的交互操作和逼真的音效,讓用戶(hù)有走進(jìn)800多年前北宋都成汴梁熱鬧街市的感覺(jué)。

故宮博物院、微軟亞洲研究院和北京大學(xué)領(lǐng)導(dǎo)在項(xiàng)目書(shū)上簽字
微軟亞洲研究院院長(zhǎng)洪小文表示:“我們一直致力于用創(chuàng)新科技創(chuàng)造物質(zhì)和精神財(cái)富,造福社會(huì)。這次的合作只是一個(gè)期間,我們衷心希望有更多的有識(shí)之士加入到這一事業(yè)中,利用科技的力量是文明之火得以薪火相傳?!?/p>
故宮博物院資料信息中心主任胡錘告訴搜狐IT:“世博上展示的是基于清明上河圖的情節(jié)的再次創(chuàng)造,而不是原圖。與世博會(huì)上清明上河圖的解讀方法不同,博物館要靠藏品說(shuō)話(huà)。我們是數(shù)字物證機(jī)構(gòu),希望觀(guān)眾在原作基礎(chǔ)上感受,不希望改變其表現(xiàn)形式,而是提供附加的多媒體信息,讓觀(guān)眾更容易沉浸在原始作品的意境中?!?/p>
走進(jìn)清明上河圖
北宋張擇端《清明上河圖》是中國(guó)古代風(fēng)俗畫(huà)中的鴻篇巨制。它再現(xiàn)了12世紀(jì)北宋全盛時(shí)期都城汴京的生活面貌。千百年來(lái),以其“至廣大、盡精微”的現(xiàn)實(shí)主義表現(xiàn)風(fēng)格,內(nèi)涵豐富的歷史文化信息,精湛絕倫的繪畫(huà)技藝,以及富有傳奇色彩的流傳經(jīng)歷,在中國(guó)繪畫(huà)史上奠定了卓爾不群的顯赫地位,是故宮博物院的國(guó)寶級(jí)藏品之一。

“走進(jìn)清明上河圖”沉浸式數(shù)字音畫(huà)展示
為了用通俗、新穎的形式幫助觀(guān)眾了解《清明上河圖》的豐富內(nèi)涵,故宮博物院、微軟亞洲研究院、北京大學(xué)聯(lián)合開(kāi)展了“走進(jìn)清明上河圖”沉浸式數(shù)字音畫(huà)展示項(xiàng)目。它采用高精度的電子圖像,清晰展示《清明上河圖》的精微細(xì)節(jié);基于專(zhuān)家研究成果而設(shè)計(jì)的場(chǎng)景對(duì)白和環(huán)境音效,建構(gòu)逼真的立體聲音環(huán)境,使觀(guān)眾仿佛置身畫(huà)卷,與宋人摩臂擦肩,聆聽(tīng)市井喧嘩、人物故事,領(lǐng)略風(fēng)華蓋世的古都盛景。
搜狐IT現(xiàn)場(chǎng)體驗(yàn)了“走進(jìn)清明上河圖”沉浸式數(shù)字音畫(huà)展示,它通過(guò)一塊觸摸屏和用戶(hù)交互,用戶(hù)通過(guò)多點(diǎn)觸控可以完成平滑的畫(huà)卷拖動(dòng)、放大、縮小。數(shù)字化的清明上河圖清晰度非常高,放大時(shí)可以清晰看到畫(huà)布的紋理,比在展柜中更能感受這幅名作驚人的細(xì)節(jié)。同時(shí),用戶(hù)選擇的畫(huà)面也通過(guò)一臺(tái)高清投影機(jī)顯示在大屏幕上。更為奇妙的是,現(xiàn)場(chǎng)的音效會(huì)隨著用戶(hù)的瀏覽而改變,例如大場(chǎng)景下是集市中嘈雜喧嘩的聲音,一旦放大到某個(gè)細(xì)節(jié)場(chǎng)景,就可以聆聽(tīng)畫(huà)中人物的對(duì)話(huà)細(xì)節(jié),例如賣(mài)麻繩的、算命的。因?yàn)椴捎昧?.1聲道技術(shù),各個(gè)場(chǎng)景的聲音位置會(huì)隨著用戶(hù)的拖動(dòng)而變化。由于出色的人性化設(shè)計(jì),畫(huà)面各個(gè)環(huán)節(jié)的音效在切換時(shí)非常自然,就像我們真的走在北宋汴梁的街市上。
突破技術(shù)難點(diǎn) 給博物館行業(yè)以啟示
談到“走進(jìn)清明上河圖”沉浸式數(shù)字音畫(huà)展示項(xiàng)目開(kāi)發(fā)中的難點(diǎn),微軟亞洲研究院徐迎慶研究員對(duì)搜狐IT表示,最大的技術(shù)難點(diǎn)就是讓立體的聲音非常流暢地在不同環(huán)境中切換和過(guò)渡,這需要求解出清明上河圖中每個(gè)人物和對(duì)象在畫(huà)卷中的三維位置。計(jì)算機(jī)通過(guò)數(shù)學(xué)和幾何方式進(jìn)行位置計(jì)算,但中國(guó)傳統(tǒng)繪畫(huà)的散點(diǎn)透視不符合這種三維方式,因此,微軟亞洲開(kāi)發(fā)了一套嶄新的算法,將散點(diǎn)透視的畫(huà)面映射到三維空間。其次,高分辨率的數(shù)字清明上河圖達(dá)到約150000*7000像素,文件3.15GB,加上51個(gè)場(chǎng)景的700多段對(duì)話(huà),4GB的數(shù)據(jù)要實(shí)現(xiàn)實(shí)時(shí)切換,對(duì)微軟也是一個(gè)挑戰(zhàn)。徐迎慶透露,這個(gè)項(xiàng)目中應(yīng)用了微軟的ICE和Silverlight技術(shù),實(shí)現(xiàn)了流暢的展示和切換。

清明上河圖清晰度非常高,放大時(shí)可以清晰看到畫(huà)布的紋理
胡錘則認(rèn)為這個(gè)項(xiàng)目最大的挑戰(zhàn)在于表達(dá)理念上的創(chuàng)新,“在數(shù)字時(shí)代如何用新的方法解讀文物,這是一種創(chuàng)新,其中的對(duì)話(huà)內(nèi)容都是在專(zhuān)家研究基礎(chǔ)上實(shí)現(xiàn)的。實(shí)現(xiàn)了51個(gè)情節(jié)下的700多段對(duì)話(huà),音頻總長(zhǎng)度約2小時(shí),都是經(jīng)過(guò)學(xué)術(shù)考證的結(jié)果。希望這個(gè)項(xiàng)目給博物館行業(yè)一個(gè)啟示,讓大家關(guān)注新的呈現(xiàn)方式?!蓖瑫r(shí),主辦方透露,微軟亞洲研究院在文物的呈現(xiàn)上還有更多想法,今后會(huì)陸續(xù)實(shí)現(xiàn)。
