近日，Cocos產品總監郭猛在2022年第四屆HUD高峰論壇上發表了主題為“實時3D渲染引擎助力駕駛艙智能交互升級”的演講，分享了他對AR-HUD的理解，以及Cocos引擎如何幫助主機廠為用戶帶來全新的駕駛艙HMI交互體驗。
Cocos產品總監郭猛
以下內容由演講記錄整理而成:
Cocos engine:不斷拓寬應用場景，提升數字內容產業生產效率。
大家好，我是來自Cocos的郭猛，很高興有機會與這裏的從業者交流。今天主要分享Cocos這幾年在3D渲染引擎方面的積累，以及我們在汽車行業的探索。
Cocos成立於2010。我們是數字內容的生產平臺。其核心產品名為Cocos Engine，目前服務於包括汽車、遊戲、在線教育和XR等行業的公司。Cocos在203個國家和地區擁有超過654.38+0.5萬註冊開發者。同時，Cocos也是國內完全自主知識產權的3D圖形渲染引擎。
在我們接觸的主機廠中，很多主機廠都在強調要升級駕駛艙HMI。希望駕駛艙的視覺表現更加酷炫，在PBR的基礎上實現更加亞時代的效果。
我們認為AR已經成為繼屏幕顯示、語音交互、視覺交互之後的又壹種交互方式。Cocos希望通過這種交互方式，幫助主機廠打造更多的內容生態，提升AR-HUD的使用範圍，升級駕駛艙體驗。
除了汽車，我們現在看到的ar產品幾乎都是使用很多優秀的遊戲引擎開發的，所以我認為後續的OEM廠商在做AR展示內容的時候也會基於這些優秀的遊戲引擎進行開發。
Cocos HMI智能駕駛艙解決方案
Cocos HMI智能駕駛艙解決方案已覆蓋車載人機交互界面、自動輔助駕駛可視化、車載虛擬影像、車載遊戲、音樂播放器等能力。它已經覆蓋了駕駛艙內包括HUD、儀表、IVI和娛樂輔助屏幕在內的多種顯示設備。
系統支持方面，已經適配安卓、Linux、QNX、鴻蒙系統等主流車載系統。Metal、Vulkan、WebGl 1.0、WebGl 2.0、GLES2、GLES3等常用渲染後端也已得到全面支持。
從3D Max、Maya、Blender等3D DCC工具導出的傳統3D格式文件和傳統多媒體資源，可以直接導入到Cocos開發工具中進行二次開發。再加上Cocos Creator的UI編輯器、動畫編輯器和編碼環境，可以直接使用常用的PBR材質系統、粒子系統、實時光照等效果，方便用戶在駕駛艙搭建3D場景。
此外，Cocos還支持Web系統，這意味著在開發階段只需要維護壹套代碼，就可以發布到各個平臺，大大節省了主機廠的維護成本。
更有趣的VPA
越來越多的OEM廠商開始使用VPA形象來取代老壹代的語音助手形象。基於實時渲染的3D圖像在情感交互方面將更加靈活和強大。Cocos目前可以為語音場景提供包括形象設計、形象建模、動作制作在內的壹整套框架，包括鏈接其他app的功能。
在制作新壹代VPA的過程中，主機廠希望引入遊戲化元素，使之成為壹種運營功能。比如介紹壹些節日彩蛋和生日彩蛋。國慶中秋期間，有沒有新的東西可以實時送到用戶的車上，讓用戶時刻保持3D影像的新鮮感？
Cocos engine作為壹款遊戲開發引擎，有自己的熱更新框架，可以支持從模型、代碼、場景、腳本邏輯的整個VPA形象的實時更新。
Cocos將為主機廠搭建後臺服務:資源管理平臺，可以獨立於OTA提供實時熱更新能力。有了實時熱更新，每周、每天都可以給VPA發新衣、新動作，讓主機廠可以不受OTA節奏限制的運營VPA。
比如短視頻平臺上的壹個舞蹈火了，工程師把舞蹈動作的腳本文件打包上傳到更新後臺。第二天，當用戶打開汽車時，車主的虛擬個人助理形象可以跳這種舞，這對用戶來說是壹種更有趣的體驗。
讓阿達斯不那麽？累嗎？
目前越來越多的車型提供自動輔助駕駛功能。不過之前看到壹個調查，很多車主在使用自動輔助駕駛時會更累。主要原因是有時候自動輔助駕駛的可視化不夠好，車主不知道自己的車接下來要做什麽。這個時候他會有很大的恐慌和緊張，長時間處於這樣的情緒中，他會覺得很累。
所以自動駕駛的可視化也是自動輔助駕駛功能中非常重要的壹部分。Cocos基於主機廠提供的原始地圖數據，按照相應HMI的視覺風格進行三維可視化渲染。使用符合主機廠要求的視覺方案進行3D還原，以提高車主使用ADAS功能的體驗。
多模式互動汽車遊戲
遊戲是Cocos的重要應用場景之壹。在車載遊戲領域，Cocos做的更多的是幫助OEM廠商構建駕駛艙內的多模態互動遊戲。包括壹些基於車內攝像頭的體感遊戲，結合麥克風的語音遊戲，結合方向盤的運動遊戲。以及將前後屏、主副駕屏聯動的多屏聯動遊戲。
更有氛圍的音樂播放器
音樂是駕駛艙最傳統的功能，也是使用率前三的核心功能。目前很多主機廠都有升級音樂播放器創造差異化的需求，而不是用某個音樂播放器的車載版。基於3D渲染引擎的能力，Cocos可以幫助OEM廠商重新包裝音樂播放器，通過歌詞和音樂可視化來提升駕駛艙內的音樂氛圍。
Cocos運行時間:低延遲，？就點擊使用？
Cocos Runtime是Cocos開發的壹款商業SDK，支持交互式內容無需安裝即可運行。它可以運行在多種操作系統平臺上，可以理解為壹套小程序和遊戲的底層運行框架，支持主流JavaScript遊戲引擎開發的內容，可以高效地最大化數字內容的運行效率。各種硬件設備和app與Runtime整合後，用戶能感受到數字互動內容？點擊播放？流暢的體驗，而不是通過傳統的下載模式。
在車廂內，部分HMI產品的啟動和加載時間長達數十秒，無疑會嚴重影響駕乘人員的體驗。比如AR-HUD，理想情況下要實現毫秒級的延遲控制，才能將數字虛擬世界與現實世界精準融合，這直接決定了用戶的體驗效果。通過引入Cocos運行時，可以提高啟動和加載速度，減少操作延遲。
完善Cocos生態鏈，探索更多技術邊界。
開發者生態方面，Cocos目前全球共有6.5438+0.5億註冊開發者。除了國內的壹線互聯網公司，臉書、谷歌、育碧等海外公司都在與我們進行技術合作。
Cocos最近與任天堂合作建立了壹個開發者生態系統。Cocos Creator將很快支持任天堂Switch。屆時，開發者申請成為任天堂認證開發者後，聯系Cocos獲取引擎，遊戲即可壹鍵發布至NS。
在全球最大的開源社區Github中，Cocos在遊戲引擎項目中的Pull請求也處於前列。
Cocos也在做基於開發者生態的壹系列沙龍巡演和線上直播。多了解開發者的真實訴求，從而打造更好的內容研發工具。
總的來說，Cocos將繼續提供更完整的工具鏈和解決方案，基於3D應用場景，幫助車企在新壹代智能駕駛艙的競爭中占得先機。@2019