友好連結

2018年1月21日 星期日

The Voice of Museum

一、數位語音不是新科技卻有新應用
        還是習慣地不定時去看看Google Experiments網站中有什麼新的創意與技術,順便跟上互動科技的進度。Google的開放源分享總能吸引全世界數位程式高手貢獻腦力,許多尚未正式發表之技術或服務的測試成果,也都會展示在此實驗平台中。其他大型公司也會架設網站宣傳研發新訊,像是索尼Sony的Future Lab網站中所展示的「T」(很有神秘感的代號)就是一款尚未上市的互動投影產品,這款投影機裝置不僅有手勢控制功能,也搭載3D深度感測與機器學習技術,不僅可將桌面轉換成觸控桌,任何擺在桌上的物件也都能透過投影呈現進行相當直覺的互動設計。早在2016年就曾發表過的測試影片,就將桌上的「愛麗絲夢遊仙境繪本」印刷品變成有可觸控有動畫的互動物件,而2017年5月發表的Xperia Touch Projector就是款使用「T」技術的科技新品。


特殊的實體觸控方式以及Project Mapping技術,使得繪本閱讀相當互動有趣
圖片來源:截圖自https://www.youtube.com/watch?v=k-gTqrR9rKI
源於T技術的互動投影機已商品化~Xperia Touch(台灣已上市) 圖片來源:截圖自https://www.youtube.com/watch?v=dlGYgCf5xrM

        Google Experiments平台所展示的新技術共有:AI Experiment、Android Experiments、AR Experiments、WebVR Experiments、Chrome Experiments、Arts & Culture Experiments,以及本文要分享的Voice Experiments等七大類。

很建議大家去體驗Google Experiments所展示的新數位技術 圖片來源:截圖自https://experiments.withgoogle.com/

        其分享的研發成果不論是AI(數位技術趨勢)、Android(手機應用程式)、AR(ARCore技術測試與展示)、WebVR(網路版VR技術測試與展示)、Chrome(瀏覽器技術測試與展示)、Arts & Culture(全世界博物館數位典藏資料庫數位應用測試與展示)、Voice Experiments(Google Home語音助理應用測試與展示),都是相對應於Google目前發展的數位技術與產品,也維持Google以開放源方式讓全世界的開發者提供應用創意的構想。這其中,Arts & Culture Experiments平台上所見的數位典藏資料使用的創意,是在科技應用於人文藝術方面相當受到期待的技術研發成果,相信博物館界先進們有相當的熟悉其研發應用。 



        但本文主要是要先聚焦Voice Experiments 平台上所看到的創意,以及目前許多博物館在數位互動語音服務方面的進展等方面,然後再分享一些與業界曾討論過的想法。但是在拋出議題之前,先介紹四個在互動語音應用方面的創意,以建立深入了解數位語音互動服務技術的基本共識。



·      Story SpeakerGoogle Voice Experiments

這個已發布上架的研發成果必須搭配「Google Home智慧管家」  這款智慧語音服務裝置或「Google Assistant ~Allo語音助理」 這款智慧語音服務App來使用的。
基本概念是將在Google Doc網路文件編輯器上所編寫的互動腳本(文字檔),透過Add-On加入Story Speaker應用程式,在Google Home智慧管家或Google Assistant語音助理上以語音播放,並且具有互動功能,可由閱聽者在許多段落自主選擇,而產生不同的劇情發展。

慣用的文字腳本編輯也能變成聲音朗讀並與讀者互動的作品 圖片來源:截圖自https://experiments.withgoogle.com/


而且這個互動腳本的編寫與應用,創作都不需要使用程式(Programing),即可在文件編輯上完成。
「文字朗讀功能」再加上「語音辨識功能」,就讓Google Home當個Story Speaker,而且還會在特定段落詢問閱聽者的決定,提供不同路線的故事內容,導引到不同的故事結局。

只要加載Story Speaker後Google Doc文本就能輸出成互動語音讀本
圖片來源:截圖自https://experiments.withgoogle.com/



·      Mystery Animal Google Voice Experiments

這個數位互動對話服務同樣得搭配Google Home 智慧管家來使用,在類型上應歸類Party Game。其規則與時下流行的20Q一樣,遊戲中由Google Home擔任關主,每關預設一個答案(都是動物,所以名為「Mystery Animal」),由參與者提問,由Google  Home回答,每個答案都必須在20個問題內答出。類似的Google Home應用遊戲還有「Im Feeling Lucky!
Google HomeGoogle Assistant都是在I/O 2016推出,以「OK Google」啟動功能,不僅有語意邏輯判斷機制,也有自然語言處理(Natural Language Processing),Google Assistant 允許使用者以更貼近日常的口語表達方式下達指令。

   
目前各家的語音辨識技術都很成熟並廣泛應用
圖片來源:截圖自https://experiments.withgoogle.com


·     
Amazon Echo Room Escape

在前面介紹了兩個Google Voice Experiments,接下來介紹一個更讓人期待未來語音助理功能發展的產品,也就是Amazon Echo Escape
Amazon推出自家的數位管家~ Amazon Echo已經是第二代產品了,由於售價低廉,所以當時引起市場的震撼。(2018.1.12訪價,Amazon Echo 99.9元美金、Google Home 129元美金、 Apple HomePod 349元美金,有興趣了解三款裝置功能比較者,可點選此最近的報導
最近Amazon Echo更是應用在密室脫逃活動上,推出「Echo Escape」。Amazon的智慧語音服務帶稱為Alexa,在遊戲過程中,Alexa會透過Echo給玩家許多指示並回覆問題。遊戲總共有三個不同難易的關卡:「牢房(簡易)」、「辦公室(中度)」、「車子(難)」,未來還會增加一個的車庫關卡。Alexa會以「Look, Inspect, Look at, Use」等等語音指示讓玩家去察看或尋找,玩家也可以透過「Help, Inventory, Stats」等等語音要求讓Alexa提供協助。想了解 Echo Escape產品資料可以點此,或者點選此觀看體驗分享部落格影片
有趣的是,在密室解謎過程中,只要說「Alexa」,就像呼喚密室小天使的名字一樣,無論當時Alexa是否正在進行指示或說明,玩家都可以立即跟Alexa對話。這方式就像賦予AI助理以人名與面貌般,Apple Siri, Microsoft Cortana, Samsung Bixby, IBM Watson也都是如此,倒是Google 除了Messaging Assistant App叫做Allo之外,就叫做Google Assistant, Google Now,連啟動都是說「OK Google」或「Hello! Google」。


目前各家的語音辨識技術都很成熟並廣泛應用
圖片來源:截圖自https://experiments.withgoogle.com   


在介紹完Amazon EchoGoogle Home兩款智慧管家的創新應用後,也補充一條「新訊」,也就是這兩款智慧管家都比較輕巧便宜的新品推出,分別是Amazon Echo Dot50元美金)與Google Home Mini49元美金),有興趣進一步了解者,請點閱這個產品比較影片「Google Home Mini vs Amazon Echo Dot Who gets your 50 dollors?」,Dave Lee在影片中對兩款產品的應用與優缺點都有很清楚的說明。



        無論是把 Echo, Siri, Cortana稱之為語音助理(Voice Assistant)、虛擬助理(Virtual Assistant)、人工智慧助理(AI AssistantAI-Powered Virtual Assistant),而且就像「The Surprising Repercussion of Making AI Assistants Sound Human」以及「Why Do So Many Digital Assistants Have Feminine Names」談到的議題,我們對人工智慧科技服務的具體想像,其實不是機器人助理,而是更接近「人」的虛擬助理,無論是在語音對答服務時更像真人的語調,或者是在命名與性別上。文章中提到所謂的「依存互動Contingent Interaction」,並引用研究說人類比較能夠對可以來回反應、對話與互動的人事物有所連結。報導也都提出不僅「擬人Humanlike」是具體目標,兼有個性與實用性(Personality and Utility)的虛擬助理服務也是眾所企求的。這也讓我想起在「AI上博物館」這篇分享中,提到Deeson 廣告公司的科技策略總監Ronald Ashiri在 「How Museums Are Using Chatbots」提到Giving chatbots a face(賦予聊天機器人具形貌)。就從上述所分享的實際案例來看,目前的人工智慧發展已讓「想像」逐漸成真。


        那如果博物館有虛擬助理,該是什麼樣子呢?




二、數位語音助理在博物館的應用

        這部分要舉例的是巴西奧美廣告公司與IBM公司合作,於2017年6月在巴西聖保羅州立Pinacoteca博物館(Pinacoteca do Estado de Sao Paulo) 推出數位導覽服務~「The Voice of Art / with WASTON」 。所使用的數位語音技術就是IBM研發的WATSON。

        根據報導IBM等單位開發這個數位導覽服務的用途, 是為吸引未曾造訪博物館的巴西民眾(據調查全國有七成以上)來訪,因為民眾反映沒有導覽講解服務的博物館讓他們缺乏興趣或望之卻步。IBM研發團隊為了培養WATSON的應答能力,共花了6個月時間與西聖保羅州立博物館策展人和研究員合作,以大量的書籍、報導、傳記、訪談、網路資料、影片讓WATSON透過機器學習累積對於藝術作品豐富知識與答案,並擴大可對話與提供回覆的範疇,像在宣傳影片中就有一幕寫道「The History of Brazilian Art. 6 Months of WATSON Learning.」,也有研發者在訪問中說:「用預錄的聲音介紹藝術史,並不是真正的互動。」,所以希望讓「The Voice of Art / with WASTON」與使用者有更自然的對話,像是影片中的使用者就問了「這幅畫裡面有多少棵香蕉樹?」,小孩則看著肖像畫說畫中人物說「你喜歡踢足球嗎?」。


小朋友透過導覽器問說:「你喜歡踢足球嗎?」
圖片來源:截圖自http://www.adweek.com/creativity/


使用者問導覽器:「這幅畫裡面有多少棵香蕉樹?」
圖片來源:截圖自https://www.youtube.com/watch?v=m9



        民眾要使用這套智慧語音導覽服務,是要在博物館入口索取,以獲得耳機以及搭載「The Voice of Art」應用程式的手機。在館內參觀特定展件時,使用者會接收到提醒訊息,然後就可以進行導覽互動。而這些由IBM研發的AI智慧語音服務,都是建置在IBMBluemix雲端平台上。

        雖然報導並不多,但爬梳整理這些資料,進一步了解IBM將「The Voice of Art /  with WASTON」定義為「Cognitive Chatbot」(認知對話機器人)服務。其實這也是這份分享要特別說明清楚的:Chatbot並不是AI Voice Assistant」。就像IBM將之上面舉列博物館服務視為Chatbot服務,這說明Chatbot應是為解決特定問題的單一服務功能,而語音助理提供更為廣泛多元的各項服務,像是前面提到的Apple SiriAmazon AlexaMicrosoft Cortana,以及IBM WATSON等等。所以在 AI Chatbot開發與應用上,特別是使用Facebook Messenger PlatformLine Messaging APIMicrosoft Bot FrameworkLine Messaging API開發者,不該強求ChatbotAI Voice Assistant一樣提供全能服務。


IBM網站上提供許多Watson案例
圖片來源:截圖自https://www.ibm.com/watson/


        「The Voice of Art /  with WASTON」在巴西聖保羅州立博物館共提供7件作品的對話導覽服務,根據IBM
官方說明,這個Chatbot功能也使用了Beacon以提供即時通知服務與定位服務,並在研發期間搜集整理了2 萬則問答去測試。而巴西奧美廣告的創意總監Claudio Lima也在訪談中提到已有其他6家巴西博物館聯繫希望使用此技術。不過目前尚未看到在其他博物館的應用。

        其實「The Voice of Art /  with WASTON」並非IBM第一次將AI技術應用在博物館場域,早在2015IBM的印度研究團隊就曾研發智慧語音導覽~USHERUSHER是款手機應用程式,可以透過陀螺儀、羅盤去判知使用者是行走中或靜止,也透過Wi-Fi訊號定位,以即時提供聲音導覽,像是「在你左手邊是XX畫像」。這款App當時是開發在Android平台,研究團隊也表明Wi-Fi定位並不是很準確,會考慮iBeacon技術作為解決方案。不過迄今,並未看到USHER正式發表。參考資料見「IBMs WATSON Supercomputer Powers Usher, an Intelligent Museum Tour Guide App」,研究文獻見此「USHER: An Intelligent Tour Companion」,這篇研究是在
The 20th International Conference on Intelligent User Interfaces Companion研討會中發表的。




圖片來源:截圖自https://www.digitaltrends.com/mobile/usher


        此外,IBM WATSON近來也推出「Art with Watson」專案,讓15位藝術家與WATSON共創藝術品,因為不在本文討論之列,有興趣者可以點閱網站訊息,或觀看說明影片




2018年1月11日 星期四

談博物館自拍

        撰寫這篇「博物館自拍」議題的緣起,是在查找國外互動展示設計資料時,所看到4篇報導,包括:Wired 雜誌對Made for Instagram式展覽興起的報導、觀眾在展區自拍而損毀展品與賠款的報導、引發自拍熱潮與爭議的selfie-friendly展館 、以及博物館自拍日(Museum Selfie Day)等。所以在此分享selfie-friendly展覽的概念與實例,然後再討論如何看待博物館自拍與參與策略(participatory strategy) 。

展覽介紹:倫敦科學博物館機器人特展



        從古至今,人類對於「把機器打造為人」充滿興趣,然而這種興趣是從何而生?是滿足人類的好奇心?還是便利人類的生活?亦或是為了娛樂人類?2017年暑假倫敦科學博物館策劃一檔以機器人(Robots)為主題的特展正可為大家解答。本展覽藉由展出一百多個機器人,講述近五百年來人類創造機械人類(machines human)的故事。本篇作者以自身的觀展的經驗出發,介紹該展覽的展示內容與故事敘述。

        展覽主旨是藉由五個不同的時空的設定,追溯著人類為何著迷於將機械打造為人的型態,探討機器人與其社會如何被宗教信仰、工業大革命、大眾文化以及人類對未來的夢想所形塑,在創造機器化人類的過程,揭露出人類眼中的自己以及我們認為什麼是重要的。同時,藉由追溯這些歷史,反映出我們的希望、恐懼與夢想。


設計博物館:讓年長者生活更便利的展示

        近年來,隨著人們的平均年齡不斷逐年增加,導致世界各國老年人社區趨於龐大,因應全球人口老化的現況,英國設計博物館舉辦了一場名為New Design for Old的展覽,並同時請設計師策劃了幾個計畫來思考老年人未來會面臨以及需要的議題。


        依據設計博物館的介紹,從1974年至2014年,英國的平居年齡從33.9歲上升到40歲,而這個狀況不只發生在英國,美國、日本、挪威等國也都有著相同的問題。而根據國發會的統計,臺灣在2060年邁入超高齡社會,成為全世界平均年齡最高的國家,科技結合高齡化的議題將會是從現在到未來持續需要高度關注的領域。

沙中房間

        隨著科技的發展,過去熟悉的藝術展示也開始起了變化。相信大家一定耳聞了由台灣新媒體藝術家黃心健與美國傳奇音樂家蘿瑞‧安德森(Laurie Anderson) 共同創作的VR作品《沙中房間》(La Camera Inssabiata),獲得2017年第47屆威尼斯影展虛擬實境最佳體驗大獎的消息。一個不屬於音樂會、不屬於劇場、不屬於展覽的藝術作品,從現在起到2月25日,在台北市立美術館與大家見面。讓人期待的《沙中房間》如何突破過去音樂與視覺影像彼此之間的界線,而與觀眾融為一體。

2018年1月5日 星期五

人工智慧如何改善博物館的收藏檔案

圖片來源:https://www.smithsonianmag.com/smithsonian-institution/how-artificial-intelligence-could-revolutionize-museum-research-180967065/

        生物多樣性數據雜誌(Biodiversity Data Journal)出版的一篇文章中,談到機器學習的創新案例,應用在自然史博物館(Natural History Museum)的國家植物標本館(National Herbarium)中。

        這篇文章證明了數據神經網絡能夠區分兩個類似的植物家族,而且準確率超過90%,該研究使用的演算法為深度學習,演算法已經可以使用與人類專家完全相同的方式去累積經驗,因此每次運行時都會提高其性能及準確度,而這種技術可以將來自世界各地的數百萬個數據進行比較分析,以彌補人力不可及的大數據分析。

Deep Dream人工智慧

        從AlphaGo到Tesla自動駕駛,這幾年報章雜誌、網路電視上頻繁的報導人工智慧(Artificial Intelligence),相信你我都再熟悉不過。AI發展得如火如荼,現在它能做到的不僅僅是辨識技術,更能從事藝術創作,而藝術也將因科技翻開新的一頁。



        由Google推出的Deep Dream計畫,讓藝術家利用人工智慧進行創作。原先Google所設計的AI程式是以神經網絡辨識圖像中的物件,但開發者近一步發現,只要經過訓練,在程式中加上演算法,可以將辨識的物件再進化,讓圖像變得更加寫實。工程師說:「如果圖像裡的雲有點像鳥,程式就會添加細節,讓它變得更像鳥。[1]