9月23日，杭州第19屆亞運(yùn)會(huì)即將隆重開幕。屆時(shí)，廣大觀眾不僅將迎來一屆“中國(guó)特色、亞洲風(fēng)采、精彩紛呈”的體育盛會(huì)，也將享受一次極具未來感的科技盛宴。“智能”是本屆杭州亞運(yùn)會(huì)的辦賽理念之一，作為杭州亞運(yùn)會(huì)官方智能視覺服務(wù)獨(dú)家供應(yīng)商，商湯科技依托“大裝置+大模型”，不僅以AI+AR黑科技打造了覆蓋多場(chǎng)景、虛實(shí)融合的實(shí)景AR觀亞運(yùn)體驗(yàn)，還依托商湯瓊宇SenseSpace領(lǐng)先的NeRF技術(shù)，構(gòu)建了可在虛擬空間中沉浸式感受亞運(yùn)氛圍的亞運(yùn)數(shù)實(shí)空間。通過“亞運(yùn)AR服務(wù)平臺(tái)”，廣大市民觀眾可盡情體驗(yàn)商湯大模型技術(shù)帶來的一系列好玩有趣、便捷實(shí)用的智能服務(wù)項(xiàng)目，在富有杭州特色且極具感官?zèng)_擊的交互體驗(yàn)中，沉浸感受“智能亞運(yùn)”的科技氛圍。

實(shí)景AR觀亞運(yùn)，多場(chǎng)景虛實(shí)融合體驗(yàn)貫穿全場(chǎng)

從大街小巷到場(chǎng)館社區(qū)，如今的杭州處處隱藏著商湯打造的驚喜“彩蛋”。觀眾在手機(jī)小程序“智能亞運(yùn)一站通”中選擇“AR服務(wù)”進(jìn)入“亞運(yùn)AR服務(wù)平臺(tái)”，即可開啟亞運(yùn)黑科技的探索之旅。例如，在西湖、拱宸橋、良渚、市民中心、青少年活動(dòng)中心廣場(chǎng)，觀眾通過手機(jī)掃描倒計(jì)時(shí)打卡裝置，亞運(yùn)吉祥物“江南憶”便會(huì)從天而降和市民互動(dòng)合影。在場(chǎng)館附近，“AR亞運(yùn)之聲”將讓觀眾如同親臨“江南憶”的演唱會(huì)現(xiàn)場(chǎng)，一同為亞運(yùn)歡呼喝彩。在場(chǎng)館入口處，“江南憶”更會(huì)帶來聲情并茂的“AR亞運(yùn)迎賓秀”，熱情歡迎來自五湖四海的新老朋友。

對(duì)于前來杭州奧體中心場(chǎng)館群和黃龍?bào)w育中心場(chǎng)館群觀看比賽的觀眾，商湯“AR場(chǎng)館導(dǎo)航”將扮演專屬“指路人”。通過這項(xiàng)服務(wù)，觀眾只需跟著地面上投射出的虛擬箭頭和文字指示，就能準(zhǔn)確辨別方向，輕松找到進(jìn)出口、座位、衛(wèi)生間等地點(diǎn)。無(wú)論是室內(nèi)外還是跨樓層，“AR場(chǎng)館導(dǎo)航”都能無(wú)縫切換，即便方位感再差，也能通行無(wú)憂。

在奧體中心場(chǎng)館群、黃龍?bào)w育中心場(chǎng)館群、中國(guó)杭州電競(jìng)中心等多處場(chǎng)館中，觀眾還可通過亞運(yùn)“AR智能屏”查詢各種賽程和場(chǎng)館信息，一站式規(guī)劃“亞運(yùn)之行”，同時(shí)還能與吉祥物“虛實(shí)合拍”，甚至來一場(chǎng)游戲PK一決高下，留下專屬的亞運(yùn)記憶。觀眾亦可戴上“AR眼鏡”，在映襯于實(shí)景之上的虛擬世界中，領(lǐng)略西湖文化、拱宸春色和良渚遺址及足球、舉重、摔跤等多種運(yùn)動(dòng)項(xiàng)目的視聽盛宴，并可與亞運(yùn)會(huì)吉祥物進(jìn)行互動(dòng)，身臨其境地感受杭州亞運(yùn)文化的魅力。

此外，商湯還將虛實(shí)融合的視覺體驗(yàn)延伸到出行場(chǎng)景，特別打造“AR智能巴士”，并在亞運(yùn)運(yùn)動(dòng)員村和媒體村提供接駁服務(wù)。和普通巴士不同，這款商湯科技基于SenseMARS火星混合現(xiàn)實(shí)平臺(tái)和自研L4級(jí)自動(dòng)駕駛解決方案打造的AR智能巴士，可以精準(zhǔn)識(shí)別車道線、交通信號(hào)燈狀態(tài)，智能預(yù)測(cè)行人、車輛的運(yùn)動(dòng)方向，并做出及時(shí)、有效的決策和路徑規(guī)劃，從而實(shí)現(xiàn)在特定站點(diǎn)自動(dòng)停留接駁乘客，并通過完全自主的導(dǎo)航和駕駛，沿固定線路將乘客點(diǎn)對(duì)點(diǎn)地安全送達(dá)至目的地。AR智能巴士車窗被一塊超大屏幕代替，將杭州的實(shí)時(shí)街景與西湖風(fēng)景、拱辰春色、良渚遺址等杭州特色美景及亞運(yùn)主題虛擬元素巧妙融合，如同打破時(shí)空界限，給乘客帶來“移步換景”的未來智能出行體驗(yàn)，感受“智能亞運(yùn)”的無(wú)窮魅力和最美杭州的人文情懷。

這些賽場(chǎng)內(nèi)外的一系列AR互動(dòng)體驗(yàn)，均需高精度的AI算法支撐。然而，亞運(yùn)場(chǎng)館空間廣、復(fù)雜度高，且存在大量相似場(chǎng)景、弱紋理、動(dòng)態(tài)場(chǎng)景，同時(shí)還要滿足夜間環(huán)境下的AR應(yīng)用需要，給實(shí)時(shí)性和準(zhǔn)確性帶來諸多挑戰(zhàn)。對(duì)此，商湯利用海量場(chǎng)景數(shù)據(jù)積累，采用自研深度特征模型，可在不同光照環(huán)境下檢測(cè)到穩(wěn)定的視覺特征，結(jié)合空間幾何和多傳感器信息，以及高效魯棒的特征匹配方案，最終在保證高并發(fā)的同時(shí)有效解決了上述挑戰(zhàn)。

亞運(yùn)數(shù)實(shí)空間，足不出戶感受亞運(yùn)現(xiàn)場(chǎng)氛圍

在提供線下實(shí)景AR觀亞運(yùn)體驗(yàn)的同時(shí)，商湯還創(chuàng)新打造了線上虛擬空間沉浸式體驗(yàn)“亞運(yùn)數(shù)實(shí)空間”，讓大家足不出戶，通過手機(jī)便可在亞運(yùn)場(chǎng)館的數(shù)字世界中感受真實(shí)亞運(yùn)的現(xiàn)場(chǎng)氛圍。在亞運(yùn)數(shù)實(shí)空間中，“江南憶”將化作金牌導(dǎo)游，帶領(lǐng)觀眾漫游杭州。觀眾不僅可以在高空視角鳥瞰宏偉壯闊的亞運(yùn)館群全貌，還可以通過自由視點(diǎn)實(shí)時(shí)漫游的方式在三維空間中穿梭“大蓮花”、“小蓮花”、游泳館等標(biāo)志性的亞運(yùn)場(chǎng)地，在欣賞藝術(shù)感、科技感和運(yùn)動(dòng)感并存的建筑設(shè)計(jì)的同時(shí)，享受“亞運(yùn)迎賓秀、亞運(yùn)之聲、亞運(yùn)知識(shí)科普”等互動(dòng)體驗(yàn)。

商湯大裝置SenseCore和“日日新”SenseNova大模型體系下的商湯瓊宇SenseSpace大規(guī)模實(shí)景3D內(nèi)容生成平臺(tái)，為亞運(yùn)數(shù)實(shí)空間提供了亞運(yùn)場(chǎng)館群場(chǎng)景NeRF模型的高質(zhì)量重建支持。憑借領(lǐng)先的隱式神經(jīng)輻射場(chǎng)（NeRF）技術(shù)，商湯瓊宇可支持平方公里級(jí)城市場(chǎng)景的三維數(shù)字化復(fù)刻生成，具有厘米級(jí)重建精度，可還原場(chǎng)景的真實(shí)細(xì)節(jié)和光照效果；同時(shí)支持對(duì)復(fù)刻生成的場(chǎng)景NeRF模型進(jìn)行再編輯和再創(chuàng)作，將數(shù)字化重建推向了全新高度。

為響應(yīng)亞運(yùn)場(chǎng)館竣工的時(shí)間要求，商湯還高效解決了場(chǎng)館數(shù)據(jù)采集和重建工作等挑戰(zhàn)。通過全新的多源數(shù)據(jù)聯(lián)合重建和NeRF模型拼接技術(shù)，商湯創(chuàng)新性地將不同時(shí)間段和不同片區(qū)的場(chǎng)館影像進(jìn)行融合重建和拼接，形成完整的亞運(yùn)場(chǎng)館NeRF實(shí)體全貌，首次做到了2平方公里場(chǎng)館群跨區(qū)域、跨時(shí)間段、跨光照變化的聯(lián)合三維復(fù)刻與融合，在為亞運(yùn)積極貢獻(xiàn)新內(nèi)容的同時(shí)也實(shí)現(xiàn)了自身技術(shù)的突破和創(chuàng)新。不僅如此，通過商湯瓊宇重建的城市實(shí)景三維模型，未來也可以作為城市數(shù)字資產(chǎn)用于更多數(shù)字孿生應(yīng)用場(chǎng)景。

打破次元局限，開啟生動(dòng)、沉浸式的互動(dòng)體驗(yàn)，商湯科技以實(shí)景AR觀亞運(yùn)和亞運(yùn)數(shù)實(shí)空間實(shí)現(xiàn)了線上線下的雙向融合，以數(shù)實(shí)融合賦能杭州亞運(yùn)。通過推動(dòng)AI技術(shù)與大眾體育的創(chuàng)新交融，商湯科技期待以創(chuàng)新技術(shù)激發(fā)大眾熱情，傳遞亞運(yùn)精神，助力杭州亞運(yùn)“精彩啟航”。