2023年，Apple Vision Pro的橫空出世讓人們領(lǐng)略到了3D交互的魅力，商湯絕影通過深厚的技術(shù)研發(fā)實(shí)力和高效的創(chuàng)新迭代效率，帶來兩大全新座艙3D交互：3D Gaze高精視線交互和3D動(dòng)態(tài)手勢交互。

作為全球首創(chuàng)的能夠通過視線定位與屏幕圖標(biāo)進(jìn)行交互的智能座艙技術(shù)，商湯絕影的3D Gaze高精視線交互將讓用戶通過眼神控制中控圖標(biāo)。3D 動(dòng)態(tài)手勢交互是行業(yè)領(lǐng)先的支持動(dòng)態(tài)手勢和手部微動(dòng)作識(shí)別的智能座艙技術(shù)，能讓用戶通過手勢“隔空”進(jìn)行各類座艙交互。

商湯絕影這兩個(gè)全新的座艙交互功能相互配合，將給智能座艙的交互帶來革命性變革。

3D Gaze高精視線交互：“目控一切，所見即所選”

實(shí)體物理按鍵交互已經(jīng)無法滿足人們對(duì)更便捷、更高效交互的需求，采用“非接觸式”交互已經(jīng)成為智能座艙交互革命的必然趨勢，而視線交互是最為直接和便捷的方案之一。

行業(yè)目前普遍能做到的是視線檢測功能。現(xiàn)在車輛普遍搭載的駕駛員監(jiān)測系統(tǒng)(DMS)就是以視線檢測技術(shù)為基礎(chǔ)。視線檢測功能作為商湯絕影領(lǐng)先行業(yè)的王牌產(chǎn)品，已成功解決了智能座艙場景下的一系列長尾問題，如遮擋、陰陽臉、墨鏡等，并量產(chǎn)落地100多個(gè)車型。

但DMS通常只能做到分心監(jiān)測等艙內(nèi)大面積區(qū)域的識(shí)別，受困于精度很難通過它進(jìn)行具體的交互動(dòng)作。商湯絕影全球首創(chuàng)3D Gaze高精視線交互，通過提升視線的精度，能精準(zhǔn)識(shí)別到駕駛員注視中控屏或者后排用戶看向后排屏幕的具體的某個(gè)圖標(biāo)并進(jìn)行交互，實(shí)現(xiàn)“所見即所選”。

(商湯絕影全球首創(chuàng)3D Gaze高精視線交互，實(shí)現(xiàn)“所見即所選”)

因?yàn)檠矍虿⒉皇菢?biāo)準(zhǔn)的幾何球體，它是一個(gè)復(fù)雜的器官，包括角膜、虹膜、瞳孔、晶狀體、玻璃體等多個(gè)結(jié)構(gòu)，不能簡單使用幾何球體的組合來描述眼球模型，而且每個(gè)人的眼球形態(tài)、大小、角膜曲率都存在生理上的差異，所以商湯絕影開發(fā)出了一套“千人千眼”的高精度三維眼球模型。

商湯絕影使用先進(jìn)的眼動(dòng)追蹤技術(shù)和高精度的眼部成像設(shè)備，收集并分析駕駛員的眼部數(shù)據(jù)，精準(zhǔn)為每個(gè)人的定制個(gè)性化的眼球模型，從而提高視線交互的精度和準(zhǔn)確性，進(jìn)一步提升駕駛的安全性和舒適性。

以“千人千眼”的高精度三維眼球模型為基礎(chǔ)，結(jié)合創(chuàng)新的亞像素級(jí)細(xì)節(jié)定位和信息融合技術(shù)，商湯絕影3D Gaze高精視線交互革命性突破了座艙場景下的視線精度難題，配合手勢、語音甚至是眨眼等方式，將給用戶帶來更智能、更個(gè)性化的艙內(nèi)視覺交互體驗(yàn)。

3D動(dòng)態(tài)手勢交互：“掌握一切，所選即所得”

3D手勢交互是以超高精的三維手部重建為基礎(chǔ)，實(shí)時(shí)捕捉、識(shí)別與分析用戶的三維手勢動(dòng)作，實(shí)現(xiàn)對(duì)車輛功能控制的技術(shù)，商湯絕影在北京車展首發(fā)座艙內(nèi)3D手勢交互，帶來高精度、高穩(wěn)定性、快速響應(yīng)的全新交互體驗(yàn)。

相對(duì)于2D手勢識(shí)別，得益于三維空間定位，商湯絕影的3D手勢交互能更加精確定位手部的移動(dòng)位置，并對(duì)手指細(xì)節(jié)進(jìn)行優(yōu)化，保證了不同手指間相互作用的準(zhǔn)確感知，進(jìn)而可以識(shí)別如捏合、拖拽等復(fù)雜動(dòng)作，實(shí)現(xiàn)鼠標(biāo)級(jí)的隔空手勢交互操作。

(商湯絕影3D手勢交互，實(shí)現(xiàn)“所選即所得”)

為了打造能夠識(shí)別動(dòng)態(tài)手勢和手部微動(dòng)作的3D手勢交互，商湯絕影構(gòu)建了超百萬級(jí)別的數(shù)據(jù)規(guī)模。

在大量采集真人真實(shí)數(shù)據(jù)的基礎(chǔ)上，借助渲染算法，對(duì)真實(shí)采集中缺少的數(shù)據(jù)維度以及各種極端場景進(jìn)行渲染補(bǔ)充，確保數(shù)據(jù)囊括車艙環(huán)境下幾乎所有場景。以海量的三維數(shù)據(jù)為基礎(chǔ)，商湯絕影實(shí)現(xiàn)了技術(shù)從2D到3D的迅速突破，為3D手勢交互打下堅(jiān)強(qiáng)基礎(chǔ)。

同時(shí)，由于手部動(dòng)作的靈活性與多樣性，3D手勢定位與識(shí)別往往存在自遮擋、遮擋、動(dòng)態(tài)模糊、運(yùn)動(dòng)過快等問題。商湯絕影引入了基于大模型的端到端識(shí)別網(wǎng)絡(luò)。相較于傳統(tǒng)的人為規(guī)則邏輯，端到端神經(jīng)網(wǎng)絡(luò)完全依靠海量數(shù)據(jù)學(xué)習(xí)到的知識(shí)對(duì)感知到的手部動(dòng)作和手指細(xì)節(jié)進(jìn)行判斷，帶來座艙3D手勢交互的全新模式。

通過3D手勢操作，用戶可以更加直接地通過隔空手勢控制導(dǎo)航、音樂、空調(diào)等功能，做到“所選即所得”，從而解放身體姿勢和雙手，享受更加舒適和智能化的駕駛體驗(yàn)。

Apple Vision Pro的操作方式就是將3D高精視線交互與3D手勢交互相結(jié)合，讓用戶體驗(yàn)到頭戴式MR設(shè)備的3D交互魅力。3D Gaze 高精視線交互與3D動(dòng)態(tài)手勢交互相結(jié)合，將進(jìn)一步變革艙內(nèi)交互模式。

商湯絕影已經(jīng)實(shí)現(xiàn)這兩大艙內(nèi)3D交互功能相互配合，如同Vision Pro“裸眼上車”，革命性改變了座艙交互的方式，讓用戶從傳統(tǒng)的物理按鍵和屏幕觸控方式中解脫出來，真正做到“所見即所選，所選即所得”，打造更符合人類直覺的自然交互體驗(yàn)。

返回第一電動(dòng)網(wǎng)首頁 >