【太平洋汽車 行業頻道】4月12日，蔚來NOMI GPT大模型正式上線，一周之內將同步推送給搭載Banyan·榕 蔚來智能系統的車型。據官方介紹，此次NOMI升級了基于全新技術架構，為NOMI量身打造NOMI GPT端云多模態大模型，包含自研多模態感知、自研認知中樞、情感引擎、多專家Agent，能夠實現蔚來產品、服務、社區的全域貫通，提供更高效、愉悅的AI服務。

　　而升級NOMI GPT功能后，用戶可以體驗到大模型百科、無限趣聊、魔法氛圍、趣玩表情、用車問答、AI場景生成在內的多項全新交互體驗，享受智能AI賦能下的全新出行。

　　其中大模型百科包含百科問答、出行攻略和學習創作三大功能；

　　無限趣聊包括情感聊天、音樂影視、語言游戲三大功能；

　　魔法氛圍包括場景氛圍、心情氛圍和世界氛圍三大功能；

　　趣玩表情包括精準表情、驚喜表情和九連拍三大功能；

　　用車問答包括車輛信息查詢、用車知識查詢和指示燈查詢三大功能；

　　AI場景城市包括行車顧問、氛圍營造、空間舒適和場景推薦四大功能。

　　而NOMI換新升級后的三大技術架構分別為是NOMI GPT認知中樞、行業獨有的情感引擎和行業領先的端側多模態感知，在配合數十億級的參數模型、毫秒級的響應速度，賦予了NOMI在感知、認知、決策等方面強大的復雜邏輯推理能力，具備了能與用戶進行開放式問答的交互能力。

　　具體來看，其中NOMI GPT認知中樞，擁有極為高效的信息認知能力，能在海量信息源中精準判斷用戶意圖與需求，無縫調度大模型架構內組件，實現“領會用戶意圖有默契，執行夠聰明，靈活不打擾”的優質用車體驗。

　　同時，蔚來自研的端云一體認知中樞，集成了行業最全知識庫，包括中控分發，多模拒識，跨域繼承&跳轉，多Agent決策幾個部分，讓NOMI有了對復雜任務的處理能力，能夠對感知到的信息進行推理分析，從容調度執行各種任務，回答各種問題。

　　通過認知中樞，NOMI會根據你所說的內容，結合對話上下文、感知以及狀態信息，智能地判斷調用任務型交互、問答閑聊、用車助手等，同時也能支持語義創建完整的快捷場景。

　　而情感引擎則是NOMI實現擬人交互的關鍵，它通過與用戶長期的溝通與陪伴、記憶、學習，實現有個性的成長。并且NOMI的記憶能力包括短期記憶和長期記憶，短期記憶可以用戶近期感興趣的話題、提到人和物，長期記憶能夠記住用戶及家人朋友，記住每一個人的喜好。

　　在情感引擎的幫助下，NOMI可以更快的學習成長，通過實時反饋、事后反思、人為訓練等方式，不斷變得更加聰明，不斷掌握新技能和新知識。并且會逐步發展成和用戶性格相契合的“人設”，包括性格、三觀、夢想等。和NOMI的每一句對話、每一個表情，更自然、更有溫度，隨著陪伴時間的增長，NOMI也會潛移默化地和用戶的性格更加契合。

　　最后是端側多模態感知能力，車機聯網不再是用戶使用NOMI的必須條件，NOMI也將具備“看得見，認得出”“聽得到，聽得懂”“知冷熱，有觸感”等能力，做到賬號隔離，敏感信息不出車，車載通信端到端加密，保障用戶隱私安全的同時也讓車載人工智能的感知能力得到了極大的擴展。

　　除了可以實現端側獨立運行之外，融合了圖像（視覺）、音頻（聽覺）、車身傳感器（觸覺）等多模感知的NOMI可以像人類一樣，獲得了更全面的感知座艙內外的人與事物的能力，并將多維度感知獲得的數十億參數，用自然語言進行描述。

　　基于多模態感知的能力，NOMI現在可以像朋友一樣，看見你的物品、著裝、狀態，甚至艙外的車輛、樓宇、動物植物，并提供更懂你的服務、更有趣的溝通。

　　另外，端側多模態感知還在內部測試中，預計今年內面向蔚來車型推送。（文：太平洋汽車 吳啟星）