豆包App聯手浦東美術館,成為盧浮宮、畢加索雙展官方AI講解員

新浪科技訊 1月20日晚間消息,字節跳動旗下豆包與上海浦東美術館達成合作,成為該館兩項國際大展“圖案的奇蹟:盧浮宮印度、伊朗與奧斯曼的藝術傑作”與“非常畢加索:保羅•史密斯的新視角”的官方AI講解員。雙方通過獨家數據合作和定向搜索優化,進一步提升了豆包識別和講解的準確性。這是AI產品首次成為美術館的官方講解工具。

據悉,展覽期間,觀眾可隨時通過豆包App的“視頻通話”功能或拍照提問方式,獲取針對具體展品的專業講解,即使輕聲提問,豆包也能準確識別。同時,豆包還提供通用和親子兩種解說風格。在觀展過程中,用戶可以讓豆包從藝術風格、曆史背景、創作技法與文化意義等多個維度,對作品進行解讀。

發佈會現場,字節跳動副總裁朱駿也就豆包看展體驗和媒體人陳魯豫進行了對談。朱駿表示,AI和用戶的交互本質上是一種對話體驗。在觀展過程中,希望豆包通過共情式的提問和啟髮式的對話,把用戶已有的感受和經驗調動出來,形成更有參與感的理解過程。

此前,豆包就曾與中國國家博物館、中國錢幣博物館、河南博物院、山東博物館、安徽博物院、成都博物館以及洛陽博物館七家國家一級博物館達成合作,共同打造數字化看展體驗區。

豆包逛展項目負責人表示:“在博物館場景中運用AI講解,最大的挑戰是保證內容的準確性。模型不僅要能區分外觀高度相似的文物、理解小眾且缺乏公開資料的展品,還要能在觀眾移動觀展、從不同角度和距離觀察同一件展品時,始終保持穩定識別。”她舉例說明:“比如這次展覽中有一件伊朗15世紀的《牡丹紋盤》,其風格與明代永樂年間的青花牡丹紋盤非常接近,這就要求模型必須從細節入手進行精準區分。”