博泰車聯(lián)網(wǎng)攜擎AI平臺確認申報2021年金輯獎汽車新供應鏈百強評選活動。
申請技術丨擎AI平臺
應用領域丨軟件 
創(chuàng)新點及優(yōu)勢：
技術描述：
擎AI平臺是一個全場景智能語音平臺。
平臺實現(xiàn)離在線語音融合，既能完全發(fā)揮在線語音的強大能力，又可結合離線能力實現(xiàn)不同網(wǎng)絡狀態(tài)下不間斷的語音交互；
平臺支持連續(xù)對話：一次喚醒、持續(xù)交互，結合上下文繼承策略、拒識策略、退出策略，滿足用戶持續(xù)自然的語音交互，同時確保不會干擾用戶與其他人的交流。在連續(xù)對話過程中，用戶可隨時打斷語音播報，語音識別與語義處理并行，大大提高交互效率；
平臺支持可見即可說，大部分界面（不管是系統(tǒng)界面還是app應用界面）上可以操作的地方都支持語音操作，還支持一定的泛化；
平臺支持自定義指令，用戶可以將常用的指令組合定義成一個個性化的指令，后續(xù)用戶只需要通過一個簡單的指令就能執(zhí)行相應的指令組合，大大簡化用戶與平臺的交互，可組合的指令涉及車控、系統(tǒng)控制、導航、娛樂等常用指令；
平臺支持多意圖車控理解，用戶可以一次性下達多個車控指令，車控指令的個數(shù)與組合理論上沒有限制；
平臺具有豐富的語音技能，覆蓋車控、系統(tǒng)控制、娛樂、出行、生活服務等各方面；
平臺支持多音區(qū)，車輛中不同方位的用戶可同時獨立地與平臺進行語音交互，互不干擾。
平臺接入并融合多家ASR、NLU/NLP、TTS的優(yōu)勢，在不同場景下可采用不同供應商提供的能力，為用戶提供最佳的語音交互體驗，并可根據(jù)項目靈活配置。
擎AI平臺外在表現(xiàn)是一個AI助手，每個用戶都可以定義符合自己要求的個性化AI助手。
AI助手可以設置形象（外貌、表情、動作等），選擇不同的tts發(fā)音人，甚至可以為其選擇方言；再結合個性化NLG，為每個AI助手配置一套回復話術，讓每個AI助手都有自己獨特的風格和內涵。
平臺還支持聲音復刻和形象復刻，用戶可以將AI助手的外貌和tts發(fā)音人設置成復刻出來的形象和聲音，讓其成為最獨特的AI助手。
平臺將語音與AI助手緊密地融合在一起，讓用戶感受到更情感化的語音交互，每次語義處理都會附帶上相應場景下的AI助手控制指令（動作、表情、情緒），在展示語義處理結果的同時控制AI助手表現(xiàn)指定的表情、做指定的動作，使用指定的情緒進行TTS播報。
AI助手還會主動與用戶交互。平臺基于場景來觸發(fā)主動交互，通過一個智能場景引擎，根據(jù)車輛狀態(tài)、系統(tǒng)狀態(tài)、用戶日程、用戶情緒、用戶狀態(tài)及環(huán)境信息等數(shù)據(jù)，在特定場景條件滿足時觸發(fā)，將場景配置的指令推送到車機端，主動與用戶交互。
平臺根據(jù)場景的優(yōu)先級、緊急程度、用戶是否進行語音交互、駕駛員是否集中駕駛等，制定了多種沖突處理策略，用于解決AI助手主動交互與用戶主動交互之間的沖突，避免對用戶造成干擾。
獨特優(yōu)勢：
擎AI平臺接入多家業(yè)內領先的AI基礎能力，并做到基礎能力的可替換與熱插拔，分場景使用語音識別模塊，搭建中控平臺融合多家語義;
擎AI平臺針對車載使用場景，定制開發(fā)了端到端的語音功能。包括語音產(chǎn)品定義、對話模塊設計，技能服務開發(fā)，全雙工連續(xù)對話，全場景可見即可說。平臺定制化能力豐富，滿足項目差異了的需求，并成功在多個項目中進行了交付。支持酒店、美食、景點等生態(tài)的語音多輪閉環(huán)，口語化表達，語音全流程交互；
產(chǎn)品具有情感化, 能識別用戶情緒，做出相應的回復和有情感的播報。支持多模交互，將視覺AI和語音AI在應用層做融合，有效解決誤喚醒問題。
支持熱修復能力，擎AI平臺針對識別、語義、合成分別實現(xiàn)了熱修復功能，能夠針對部分識別錯誤、合成發(fā)音不準，以及語義提取異常的情況進行在線處理；
應對不同類型用戶的個性化需求，擎AI平臺開發(fā)了個性化NLG平臺，可以針對不同用戶類型進行TTS話術配置，做到獨有的交互體驗；
針對平臺整體穩(wěn)定性，我們開發(fā)了全流程檢測平臺，實現(xiàn)主動和被動的穩(wěn)定性檢測；主動方式通過對連接、識別、語義理解、全鏈路追蹤等維度的不間斷撥測，來評估平臺可用性和穩(wěn)定性，能夠在第一時間發(fā)現(xiàn)異常并進行處理；被動方式通過分析實時日志提取各類異常信息，反饋給開發(fā)迭代完善，提升平臺魯棒性
應用場景：
（1）車輛具備精細化的感知能力，擎AI能力開始從語音發(fā)展為融合語音、手勢、圖像、聲紋等多模態(tài)感知融合語義的能力。如視線看向車窗說“透氣”，車窗開透氣模式。
（2）擎AI打通更多的服務場景和生態(tài)，結合座艙數(shù)據(jù)、用戶個性化信息，生態(tài)服務主動“流”向用戶，服務找人的方式探索增值服務變現(xiàn)。如兒童呵護場景可以按需付費，購買后提供兒童哄睡、兒童安全檢測服務。
（3）同時基于感知能力，擎AI 開始作為人機交互的核心，具備人格化的屬性，交互更擬人化。擎AI 的形象是3D卡通人或3D卡通形象，融合了口型、肢體語言、面部表達交互。
（4）擎AI更趨近人人交互，會結合當前場景、用戶情感狀態(tài)，Avatar具備自己的情感表達。例如你罵她或批評她，Avatar會表情難過，聲音低落的回復你。
未來前景：
隨著座艙的更多感知通道、更強算力、更高性能，結合語音、視覺、用戶行為、情感狀態(tài)擎AI將逐漸實現(xiàn)人與人的自然交互方式；同時車身數(shù)據(jù)、環(huán)境數(shù)據(jù)、生態(tài)數(shù)據(jù)、用戶偏好數(shù)據(jù)，實現(xiàn)個性化的智能場景找人。
基于SOA架構，座艙軟硬件一體化的升級，擎AI 將可以調用自動駕駛含輔助駕駛域、車身域、動力地盤域的能力，各個域的能力可以拆分、組合應用，使得人車交互更智能、更完整。可以設想AI識別到司機有點疲倦了，路況較好，行程輕松，可以主動詢問是否開啟自動駕駛進入小憩狀態(tài)。
“金輯獎”由蓋世汽車發(fā)起創(chuàng)立，旨在鼓勵針對中國汽車產(chǎn)業(yè)由大做強，促進中國汽車產(chǎn)業(yè)轉型升級、打造更具競爭力的整零協(xié)同創(chuàng)新關系，助力實現(xiàn)汽車強國目標并做出積極貢獻的企業(yè)和個人。歡迎點擊報名參選！