伊利諾伊州大屠殺博物館的Take a Stand Center正在展示技術(shù)為人們提供情感和互動(dòng)體驗(yàn)的能力。大屠殺幸存者的故事在全息系統(tǒng)的幫助下得以保存和展示,該系統(tǒng)利用人工智能,定制控制系統(tǒng)和集成照明,音頻和視頻。
南加州大學(xué)施華爾基金會(huì)是史蒂文斯皮爾伯格于1994年為紀(jì)念大屠殺的幸存者而成立的,他與博物館合作,利用自然語(yǔ)言處理(通過(guò)軟件自動(dòng)操縱自然語(yǔ)言)創(chuàng)造了第一個(gè)全息影院體驗(yàn),為游客提供了一個(gè)大屠殺幸存者第二次世界大戰(zhàn)經(jīng)歷的動(dòng)態(tài)敘事。
一旦概念最終確定,互動(dòng)展覽技術(shù)專(zhuān)家Interactive Imagination及其合作伙伴Eventworks 4D(EW4D)將與基金會(huì),監(jiān)督,設(shè)計(jì)和實(shí)施劇院進(jìn)行為期三年的思想和建議交流。在全球范圍內(nèi)參與了許多大型和高調(diào)的全息項(xiàng)目,如總理Narendra Modi在印度的活動(dòng),互動(dòng)想象力非常有資格為突破性的展覽提供技術(shù)和創(chuàng)意投入。
在空間裝置中結(jié)合電影和劇院格式,舞臺(tái)的深度在沉浸式故事敘述中發(fā)揮了作用。EW4D不是使用物理布料,而是在舞臺(tái)后部加入了2.6mm的精細(xì)像素間距CreateLED Airmag II LED墻,以提供高亮度對(duì)比度。
“LED墻壁顯示了舞臺(tái)窗簾的真實(shí)視圖,但也使我們能夠創(chuàng)造更準(zhǔn)確的增強(qiáng)安裝體驗(yàn),”互動(dòng)想象力的所有者和設(shè)計(jì)顧問(wèn)Enzo Fiondella說(shuō)!拔覀兎Q(chēng)之為雙重增強(qiáng),因?yàn)橹饕蜗,大屠殺幸存者,本身就是一個(gè)增強(qiáng)的場(chǎng)景!
全息技術(shù)和智能AI
南加州大學(xué)創(chuàng)意技術(shù)研究所(ICT)處于構(gòu)建對(duì)話系統(tǒng)和開(kāi)發(fā)技術(shù)的最前沿,這些技術(shù)允許人們與計(jì)算機(jī)系統(tǒng)交談,該計(jì)算機(jī)系統(tǒng)以其交談的方式看起來(lái)和行為幾乎是人類(lèi),理解并表現(xiàn)出情感。Interactive Imagination采用了由ICT開(kāi)發(fā)的基于自然語(yǔ)言處理的應(yīng)用程序,并將其演變?yōu)?a href=http://www.jrvalve.cn/szbwg/ target=_blank>博物館裝置中的長(zhǎng)期互動(dòng)式戲劇體驗(yàn)。
自然語(yǔ)言處理允許主持人口頭詢問(wèn)系統(tǒng)相關(guān)問(wèn)題,然后通過(guò)標(biāo)記不同詞性(POS標(biāo)記),詞干的詞干和詞素化等技術(shù)來(lái)處理相關(guān)問(wèn)題,以確定最準(zhǔn)確的響應(yīng)視頻。
“隨著我們的展示控制系統(tǒng)的加入,NLP的使用成為主持人操作系統(tǒng)的常規(guī),”Fiondella說(shuō)。
結(jié)合語(yǔ)音識(shí)別技術(shù)和NLP,Pepper的Ghost全息幻覺(jué)技術(shù)成為該項(xiàng)目的支柱。每個(gè)幸存者的證詞的高清360度鏡頭是使用116個(gè)攝像頭拍攝的。錄像帶 - 總共包含2,000個(gè)問(wèn)題和答案 - 然后被EW4D用來(lái)創(chuàng)建逼真的視覺(jué)視角,創(chuàng)造了觀眾在舞臺(tái)上與真人交談的錯(cuò)覺(jué)。
Fiondella解釋說(shuō):“這種技術(shù)的美妙之處在于觀眾完全沉浸其中,并且在看起來(lái)幾乎是現(xiàn)實(shí)但不太可信的東西時(shí),不會(huì)遭受不可思議的山谷效應(yīng)! “使用舞臺(tái)上設(shè)置的視覺(jué)顯示層以及精心設(shè)計(jì)的燈光效果,實(shí)現(xiàn)了增強(qiáng)的氛圍和氛圍。安裝是如此令人信服的觀眾認(rèn)為他們正在與幸存者進(jìn)行一對(duì)一的談話。“
在開(kāi)發(fā)設(shè)計(jì)時(shí)考慮了顯示提示,以確保整個(gè)節(jié)目的流程一致且無(wú)縫。從介紹序列設(shè)置劇院氛圍到問(wèn)答環(huán)節(jié)系統(tǒng)界面的有效性,創(chuàng)建了觀眾與幸存者之間可信的雙向?qū)υ挕?/P>
最佳聲音曝光
項(xiàng)目的音頻元素是雙重的,包括播放和語(yǔ)音捕獲。由于系統(tǒng)的交互性主要依賴(lài)于自然語(yǔ)言處理,因此捕獲高質(zhì)量的音頻至關(guān)重要。
“由于預(yù)算不能用于聲學(xué)處理或復(fù)雜的麥克風(fēng)陣列,劇院空間在聲學(xué)上具有挑戰(zhàn)性。這意味著當(dāng)觀眾提出問(wèn)題時(shí),主持人會(huì)重復(fù)這個(gè)問(wèn)題,“Fiondella說(shuō)!拔覀兩a(chǎn)了一個(gè)帶有高質(zhì)量無(wú)線麥克風(fēng)的無(wú)線接口,為控制PC提供輸入!
EW4D集成了一個(gè)定制的PA系統(tǒng),可以滿足全方位的音頻視角,并確定最佳的系統(tǒng)均衡和聲壓級(jí)(SPL),能夠提供適合空間的全方位音頻體驗(yàn)。聲樂(lè)清晰度是開(kāi)場(chǎng)視頻的焦點(diǎn)和情感音軌,必須仔細(xì)測(cè)量系統(tǒng)要求,以獲得最佳的聲音曝光,而不會(huì)產(chǎn)生不舒服的音頻。
可靠的系統(tǒng)
系統(tǒng)設(shè)計(jì)需要保證長(zhǎng)期可靠性,便于管理體驗(yàn)的主持人操作,并提供輕松更新內(nèi)容和遠(yuǎn)程管理所有方面的能力。為了實(shí)現(xiàn)能夠承受365天,8小時(shí)操作周期嚴(yán)格的系統(tǒng),該團(tuán)隊(duì)必須研究系統(tǒng)集成的最佳案例場(chǎng)景。Interactive Imagination在構(gòu)建強(qiáng)大的交互式展覽系統(tǒng)和全息投影以及顯示控制的直觀方法方面的專(zhuān)業(yè)知識(shí)使他們能夠在日常的基礎(chǔ)上保持可靠的系統(tǒng)操作。
展示控制系統(tǒng)是內(nèi)部開(kāi)發(fā)的,可以提供對(duì)安裝中使用的不同組件的高級(jí)控制,因?yàn)橄到y(tǒng)必須在多個(gè)平臺(tái)上運(yùn)行。面臨的最大障礙是將不同的組件和系統(tǒng)結(jié)合在一起,同時(shí)確保它們完美地協(xié)同工作。這是通過(guò)開(kāi)發(fā)一個(gè)定制的節(jié)目控制系統(tǒng)來(lái)實(shí)現(xiàn)的,該系統(tǒng)通過(guò)一系列編程語(yǔ)言(如C ++,Python,Node.js和Applescript)集成了組件。微調(diào)場(chǎng)景照明以增強(qiáng)用戶對(duì)全息圖的體驗(yàn)也很困難,特別是因?yàn)樾掖嬲叩膬?nèi)容動(dòng)態(tài)變化。
展望未來(lái)
The Take a Stand Center是人工智能和全息創(chuàng)新歷史文獻(xiàn)的首批應(yīng)用之一,通過(guò)三維全息圖將幸存者的故事變?yōu)楝F(xiàn)實(shí),能夠使用自定義交互式語(yǔ)音與觀眾進(jìn)行對(duì)話技術(shù)。
“未來(lái)幾代人將繼續(xù)與大屠殺幸存者進(jìn)行對(duì)話,”菲奧德拉說(shuō)!拔覀儎(chuàng)造這個(gè)戲劇展覽的使命是永遠(yuǎn)不要讓這種情況再次發(fā)生,并記住那些經(jīng)歷過(guò)納粹占領(lǐng)恐怖的人。這確實(shí)是一段歷史,如果沒(méi)有這項(xiàng)技術(shù),這是不可能的!
自全息展覽啟動(dòng)以來(lái),Interactive Imagination通過(guò)進(jìn)一步開(kāi)發(fā)管理和維護(hù)應(yīng)用程序組件的自動(dòng)化流程,不斷提高系統(tǒng)的穩(wěn)定性和可靠性。該團(tuán)隊(duì)還通過(guò)為所有連接組件實(shí)施節(jié)能方法,減少了系統(tǒng)的能耗。該公司可以持續(xù)訪問(wèn)系統(tǒng),因此可以遠(yuǎn)程監(jiān)控來(lái)自英國(guó)的展覽,確保穩(wěn)定性,功能性以及獲得使用反饋。
隨著互動(dòng)想象力的創(chuàng)新被引入其他博物館項(xiàng)目,如達(dá)拉斯大屠殺博物館,觀眾將被視為與幸存者更加強(qiáng)大和獨(dú)特的體驗(yàn)!巴ㄟ^(guò)利用機(jī)器視覺(jué)(由Interactive Imagination開(kāi)發(fā)的自動(dòng)觀眾檢查系統(tǒng),通過(guò)使用視覺(jué)饋送識(shí)別觀眾的一部分)以及天花板中的一系列麥克風(fēng)和揚(yáng)聲器以及升級(jí)的演出控制系統(tǒng),訪客將能夠直接與幸存者交談,而不是通過(guò)中間人來(lái)重新提問(wèn),“Fiondella說(shuō)。“這將提高觀眾對(duì)問(wèn)題的選擇性,消除對(duì)主持人的需求!
視覺(jué)環(huán)境
EW4D還計(jì)劃在座位區(qū)域?yàn)橛^眾提供預(yù)展,其中一系列LCD監(jiān)視器將在全息幸存者故事之前創(chuàng)建不同的視覺(jué)環(huán)境和輔助教育信息。
“伊利諾伊大屠殺博物館的項(xiàng)目具有全球影響力,引起了50個(gè)美國(guó)大屠殺博物館的興趣,這些博物館在達(dá)拉斯和洛杉磯等地區(qū)熱衷于使用這項(xiàng)技術(shù),”Fiondella說(shuō)!爱(dāng)托尼和切麗布萊爾參觀博物館時(shí),托尼布萊爾說(shuō)這次經(jīng)歷與他所看到的不同,而且類(lèi)似的東西在英國(guó)也很有價(jià)值。我們還在唐寧街10號(hào)召開(kāi)了一次會(huì)議,因?yàn)樗麄兿M覀冊(cè)?021年參與倫敦大屠殺博物館。“
現(xiàn)在,該公司正在開(kāi)發(fā)其第一個(gè)產(chǎn)品,一個(gè)真人大小的彈出式交互式全息圖平臺(tái),它使用多種形式的交互性和定制內(nèi)容,非常適合在活動(dòng)中進(jìn)行宣傳。
“我們正處于令人興奮的事物的尖端,我相信AI,全息技術(shù)和NLP將成為博物館的主要傳播工具,”Fiondella說(shuō)!拔覀兿Mㄟ^(guò)將我們的技術(shù)與人類(lèi)元素相結(jié)合,繼續(xù)發(fā)揮影響力。在科學(xué),藝術(shù),醫(yī)學(xué)和政治等領(lǐng)域,博物館將更傾向于全息人工智能,那些為社會(huì)作出重大貢獻(xiàn)的人可以永遠(yuǎn)永生,并且他們的聲音將在未來(lái)幾代人中傳播!