云圖智能研究院院長(zhǎng)何偉發(fā)布《多模態(tài)融合交互技術(shù)白皮書》

2022世界人工智能大會(huì)以“智聯(lián)世界 元生無(wú)界”為主題，于9月1日--9月3日在上海盛大開幕。

世界人工智能大會(huì)(WAIC)經(jīng)國(guó)務(wù)院批準(zhǔn)，由國(guó)家發(fā)展和改革委員會(huì)、工業(yè)和信息化部、科學(xué)技術(shù)部、國(guó)家互聯(lián)網(wǎng)信息辦公室、中國(guó)科學(xué)院、中國(guó)工程院、中國(guó)科學(xué)技術(shù)協(xié)會(huì)和上海市人民政府共同主辦。

本屆大會(huì)舉辦了1場(chǎng)開幕式、2場(chǎng)全體會(huì)議、1場(chǎng)閉幕式，累計(jì)舉辦121場(chǎng)活動(dòng)，構(gòu)建了“會(huì)、展、賽、用、才”五大板塊活動(dòng)矩陣，浦江兩岸多地協(xié)同，海內(nèi)海外同頻共振。這次大會(huì)論壇覆蓋了技術(shù)創(chuàng)新、產(chǎn)業(yè)應(yīng)用、法治倫理和生態(tài)建設(shè)四大領(lǐng)域，涉及30多個(gè)專業(yè)方向，包含“AI+元宇宙”、生成式AI、可信AI、腦機(jī)接口等當(dāng)前人工智能全球熱點(diǎn)議題。期間，25個(gè)人工智能產(chǎn)業(yè)項(xiàng)目簽約，總投資近150億元。大會(huì)匯聚了國(guó)內(nèi)外人工智能領(lǐng)軍學(xué)者、知名企業(yè)家、國(guó)際組織代表等重量級(jí)嘉賓500余位(其中圖靈獎(jiǎng)得主4位，諾貝爾獎(jiǎng)、菲爾茲獎(jiǎng)、馬爾獎(jiǎng)得主各1位，80余位國(guó)內(nèi)外院士、20余位國(guó)內(nèi)外頂尖高校校長(zhǎng)，以及百度、華為、高通、Meta、星漢云圖等400余位國(guó)內(nèi)外行業(yè)組織代表和企業(yè)家) 旨在充分把握人工智能與元宇宙相融互促的發(fā)展趨勢(shì)，連接匯聚世界人工智能最新觀點(diǎn)和成果，傳遞無(wú)界共生的創(chuàng)新理念。

圖：2022世界人工智能大會(huì)發(fā)布《元宇宙多模態(tài)融合交互技術(shù)白皮書》

人工智能是新一輪科技革命和產(chǎn)業(yè)變革的重要驅(qū)動(dòng)力量，要推動(dòng)我國(guó)新一代人工智能健康發(fā)展。2022年9月2日，在2022世界人工智能大會(huì)(WAIC)元宇宙科技探索峰會(huì)上，云圖智能研究院院長(zhǎng)、星漢云圖董事長(zhǎng)暨白皮書主編何偉，于上海浦東張江科學(xué)會(huì)堂重磅發(fā)布《多模態(tài)融合交互技術(shù)白皮書》(又名《2022元宇宙多模態(tài)融合交互技術(shù)白皮書》或《元宇宙多模態(tài)融合交互技術(shù)白皮書》，以下簡(jiǎn)稱白皮書)。

圖：主編何偉在2022世界人工智能大會(huì)發(fā)布《元宇宙多模態(tài)融合交互技術(shù)白皮書》

他介紹，《多模態(tài)融合交互技術(shù)白皮書》，由中國(guó)工程院院士莊松林擔(dān)任指導(dǎo)專家，中國(guó)工業(yè)經(jīng)濟(jì)聯(lián)合會(huì)黨委書記、執(zhí)行副會(huì)長(zhǎng)兼秘書長(zhǎng)、國(guó)家制造強(qiáng)國(guó)建設(shè)戰(zhàn)略咨詢委員會(huì)委員、國(guó)家新材料產(chǎn)業(yè)發(fā)展專家咨詢委員會(huì)委員熊夢(mèng)擔(dān)任專家顧問(wèn)，云圖智能研究院、北京星漢云圖文化科技有限公司作為發(fā)起單位，聯(lián)合中華國(guó)際科學(xué)交流基金會(huì)、武漢元宇宙研究院、全國(guó)科學(xué)技術(shù)名詞審定委員會(huì)元宇宙術(shù)語(yǔ)研究中心、北京工業(yè)大學(xué)、北京信息產(chǎn)業(yè)協(xié)會(huì)、上海市多媒體行業(yè)協(xié)會(huì)、中關(guān)村數(shù)智人工智能產(chǎn)業(yè)聯(lián)盟、浙江清華長(zhǎng)三角研究院(知識(shí)產(chǎn)權(quán)中心)為起草單位，在中國(guó)科技新聞學(xué)會(huì)、中關(guān)村虛擬現(xiàn)實(shí)協(xié)會(huì)、北京反侵權(quán)假冒聯(lián)盟、安達(dá)高教研究院、西藏元宇宙研究院、內(nèi)蒙古虛擬現(xiàn)實(shí)(VR)研究院支持下，組織全國(guó)六十余位來(lái)自于科研院所、高校和產(chǎn)業(yè)界的專家、學(xué)者、院士，由主編何偉，聯(lián)合主編龔才春、端木海嬰共同起草、編寫。

據(jù)悉，白皮書全篇共分為5章27節(jié)，分別從多模態(tài)融合交互技術(shù)的定義、多模態(tài)融合交互技術(shù)關(guān)鍵技術(shù)(計(jì)算機(jī)視覺(jué)技術(shù)、自然語(yǔ)言處理技術(shù)、生物識(shí)別技術(shù)、智能傳感器技術(shù)、腦機(jī)接口技術(shù)等)、多模態(tài)融合交互技術(shù)典型應(yīng)用產(chǎn)業(yè)與場(chǎng)景(安防、金融、零售、交通、教育、醫(yī)療、制造、健康等)、發(fā)展等多個(gè)維度進(jìn)行了梳理和深度分析，同時(shí)強(qiáng)調(diào)人工智能多模態(tài)融合交互技術(shù)開放平臺(tái)的重要性，以及多模態(tài)技術(shù)面臨的挑戰(zhàn)與契機(jī)。

圖：《元宇宙多模態(tài)融合交互技術(shù)白皮書》目錄

所謂“模態(tài)”(Modality)，是德國(guó)生理學(xué)家赫爾姆霍茨提出的一種生物學(xué)概念，即生物憑借感知器官與經(jīng)驗(yàn)來(lái)接收信息的通道，例如人類有視覺(jué)、聽(tīng)覺(jué)、觸覺(jué)、味覺(jué)和嗅覺(jué)模態(tài)。模態(tài)的范圍要比我們的感知能力更寬泛，除了視覺(jué)、聽(tīng)覺(jué)獲得的模態(tài)信息，我們也可通過(guò)生物的肌電信號(hào)、心率、腦電波等，或者利用傳感器獲得諸如雷達(dá)、紅外線等不同感應(yīng)數(shù)據(jù)的模態(tài)信息。多模態(tài)技術(shù)，旨在融合處理多模態(tài)信息，獲得更好的交互體驗(yàn)、更強(qiáng)的機(jī)器學(xué)習(xí)和推理能力。多模態(tài)技術(shù)將貫穿未來(lái)幾乎所有的行業(yè)和領(lǐng)域，顛覆我們的認(rèn)知，在數(shù)字經(jīng)濟(jì)時(shí)代強(qiáng)有力的推動(dòng)下，人機(jī)交互迎來(lái)了科技發(fā)展史上創(chuàng)新融合的大變革。

“鍵鼠交互”開啟了PC時(shí)代，“觸控交互”打開了移動(dòng)互聯(lián)網(wǎng)時(shí)代的大門，智能交互改變了我們與機(jī)器互動(dòng)的方式，重新定義了我們與機(jī)器的關(guān)系。白皮書主編何偉表示，創(chuàng)新融合的變革——多模態(tài)融合交互將重新定義“下一代互聯(lián)網(wǎng)”，也將帶來(lái)新一輪信息技術(shù)革命浪潮，同時(shí)他也認(rèn)為，多模態(tài)融合交互技術(shù)將有可能成為元宇宙技術(shù)領(lǐng)域可行性突破的高地堡壘爭(zhēng)奪地。

我國(guó)社會(huì)經(jīng)濟(jì)發(fā)展正在進(jìn)入了以人工智能為核心的智能數(shù)字經(jīng)濟(jì)時(shí)代，元宇宙將成為數(shù)字經(jīng)濟(jì)未來(lái)發(fā)展的重要載體和綜合場(chǎng)景。作為數(shù)字技術(shù)發(fā)展到一定程度的集成運(yùn)用，元宇宙或?qū)⑼苿?dòng)實(shí)體經(jīng)濟(jì)與數(shù)字經(jīng)濟(jì)加速深度融合，實(shí)現(xiàn)生產(chǎn)方式變革、生活模式躍遷和治理理念革新的發(fā)展形態(tài)。數(shù)字經(jīng)濟(jì)時(shí)代的經(jīng)濟(jì)基礎(chǔ)和基礎(chǔ)建設(shè)將在三個(gè)層面帶來(lái)變化，智能終端未來(lái)將呈規(guī)模性增長(zhǎng)，人和終端的多模態(tài)智能交互融合，以及數(shù)據(jù)信息和服務(wù)場(chǎng)景化。除此之外，智能經(jīng)濟(jì)還會(huì)催生許多新興行業(yè)，實(shí)現(xiàn)產(chǎn)業(yè)智能化，形成“數(shù)據(jù)驅(qū)動(dòng)、人機(jī)協(xié)同、跨界融合、共創(chuàng)分享”的智能數(shù)字經(jīng)濟(jì)形態(tài)。

圖：多模態(tài)融合交互主要研究路徑及方向

針對(duì)《多模態(tài)融合交互技術(shù)白皮書》的發(fā)布，白皮書指導(dǎo)專家，中國(guó)工程院院士莊松林提出，“白皮書對(duì)各界了解、學(xué)習(xí)、研究多模態(tài)及其融合交互技術(shù)的應(yīng)用，具有里程碑意義。”

白皮書專家顧問(wèn)，中國(guó)工業(yè)經(jīng)濟(jì)聯(lián)合會(huì)黨委書記、執(zhí)行副會(huì)長(zhǎng)兼秘書長(zhǎng)、國(guó)家制造強(qiáng)國(guó)建設(shè)戰(zhàn)略咨詢委員會(huì)委員、國(guó)家新材料產(chǎn)業(yè)發(fā)展專家咨詢委員會(huì)委員熊夢(mèng)指出，“該白皮書的發(fā)布，從技術(shù)角度對(duì)關(guān)心工業(yè)經(jīng)濟(jì)向數(shù)字經(jīng)濟(jì)升級(jí)轉(zhuǎn)型研究者予以啟示，為我國(guó)工業(yè)經(jīng)濟(jì)擁抱數(shù)字技術(shù)提供了很好的切入口。”

白皮書編委會(huì)成員將致力于構(gòu)建萬(wàn)物互聯(lián)的交互世界，通過(guò)多模態(tài)融合交互技術(shù)推動(dòng)元宇宙產(chǎn)業(yè)快速發(fā)展，同時(shí)，希望更多的專家、學(xué)者參與進(jìn)來(lái)，彎道超車，為多模態(tài)融合交互技術(shù)的發(fā)展貢獻(xiàn)力量。

多模態(tài)融合交互將開啟交互世界的新革命，讓人機(jī)交互像人與人交流一樣自然!

附

關(guān)鍵詞：