科大訊飛發(fā)布星火大模型V30:智能汽車座艙、音效、智駕全線升級
科大訊飛于10月24日發(fā)布了星火大模型V3.0,該模型在七大能力方面都得到了持續(xù)提升,超越了ChatGPT,并且在醫(yī)療領(lǐng)域也超越了GPT-4。升級版本的星火3.0還新增了啟發(fā)式對話和AI人設(shè)功能,以打造更個(gè)性化的AI助手。

與此同時(shí),科大訊飛還舉辦了以“釋放想象力·智能新出行”為主題的2023科大訊飛智能汽車新品發(fā)布會,在會上推出了基于訊飛星火V3.0的智能汽車座艙、音效和智駕三大方向的產(chǎn)品升級。
在訊飛星火+座艙方向的升級中,最新發(fā)布的訊飛星火V3.0對智能座艙進(jìn)行了全面升級。針對多樣化的汽車使用場景,科大訊飛推出了星火座艙OS、星火汽車APP和星火座艙域控等產(chǎn)品。這些產(chǎn)品支持實(shí)時(shí)檢索和插件化調(diào)度,并且集成了多模態(tài)生成的能力,為合作伙伴提供了自主可控、組件化和更開放的座艙解決方案。

星火座艙OS包括星火汽車助理和星火場景應(yīng)用兩大部分,通過深度融合語音和視覺模態(tài),實(shí)現(xiàn)了更精準(zhǔn)的識別,語音合成的MOS值超過了4.6。大模型業(yè)務(wù)貫穿整個(gè)系統(tǒng),支持十輪以上的上下文語義繼承。新增的實(shí)時(shí)檢索能力打破了大模型認(rèn)知的邊界,可以實(shí)時(shí)查詢最新信息,為用戶帶來更自由、智能和自然的人車交互體驗(yàn)。星火座艙OS還打造了多個(gè)沉浸式使用場景,并支持自定義,用戶只需一句話即可生成復(fù)雜場景,觸發(fā)200多個(gè)車控動作。星火汽車APP則針對用車場景設(shè)計(jì),包括用車顧問、兒童故事、口語陪練、心靈SPA、旅行伙伴等多樣化大模型車端應(yīng)用,將大模型能力應(yīng)用于實(shí)用小場景中,為用戶提供可感知且實(shí)用的AI超能力。

此外,星火座艙域控是一種智能化的AI新底座,具備豐富成熟的接口能力。作為面向行業(yè)的"核心板",它輸出兼容核心AI算法,并通過座艙AI算法和芯片的異構(gòu)算法實(shí)現(xiàn)了芯算融合,降低了10%的SOC算力消耗。與國內(nèi)廠商深度合作,大幅提升了國產(chǎn)平臺的渲染效果。星火座艙域控的目標(biāo)是以更少的資源和更短的開發(fā)周期實(shí)現(xiàn)差異化的產(chǎn)品創(chuàng)新。

科大訊飛發(fā)布了iFlySound Plus24ch功放硬件平臺,為汽車場景下的聽感品質(zhì)提供多維、多場景的音效體驗(yàn)。該硬件平臺具有高性能浮點(diǎn)DPS和128通道數(shù)字音頻處理能力,并且兼容未來E-E架構(gòu)。此外,科大訊飛還推出了多個(gè)全自研的高階音效算法,并提供訂閱模式。在調(diào)音層面,他們使用大模型聲學(xué)理論體系實(shí)現(xiàn)人機(jī)耦合,與車企合作打造AI之音??拼笥嶏w的車載音效產(chǎn)品已經(jīng)在國內(nèi)13家主流車企平臺化項(xiàng)目中得到應(yīng)用。
此外,科大訊飛還推出了兩款高性價(jià)比的智駕解決方案——智駕STD和智駕PRO,配備了增強(qiáng)型高速NOA、記憶行車和記憶泊車等功能,提高了輔助駕駛的安全性、智能性和樂趣性。

科大訊飛通過AI算法研發(fā)能力、數(shù)據(jù)閉環(huán)云平臺和工程技術(shù)能力,開發(fā)了智駕解決方案。他們利用大模型和海量數(shù)據(jù)生成自動駕駛場景數(shù)據(jù)和駕駛策略,并通過交互方式提高基礎(chǔ)駕駛模型的理解??拼笥嶏w還自研了全棧工具鏈用于深度學(xué)習(xí)訓(xùn)練、模型調(diào)優(yōu)和部署,并提供了智駕應(yīng)用開發(fā)框架和中間件,以支持跨平臺算法的快速移植。他們的4D重建和自動標(biāo)注系統(tǒng)有效提高了標(biāo)注效率和質(zhì)量。
科大訊飛的星火大模型為BEV+transformer智駕感知大模型提供支持,解決了智能駕駛中的感知、決策和長尾問題。通過統(tǒng)一的BEV+Transformer網(wǎng)絡(luò),實(shí)現(xiàn)了多模態(tài)、多任務(wù)和長時(shí)序4D感知。他們還應(yīng)用了基于機(jī)器學(xué)習(xí)的超聲波感知算法,提高了感知準(zhǔn)確性和泛化性。星火座艙與人車交互能力結(jié)合,深度融合了座艙信息,提升了人車交互性能和用戶體驗(yàn)。用戶可以自由發(fā)出車控和智駕指令,使行泊流程更智能、更安心。
科大訊飛在生態(tài)方面擁有巨大優(yōu)勢。除了自建的兒童教育、K12教育、音娛資源、聽見會議和訊飛翻譯等生態(tài)資源外,他們還與九家企業(yè)展開了深度合作,建立車主全旅程運(yùn)營服務(wù)鏈條,提供高效、便捷的車載場景體驗(yàn)。此外,科大訊飛還與100多家企業(yè)積極合作,致力于為智能座艙提供豐富全面的軟件生態(tài),助力中國汽車產(chǎn)業(yè)智能化發(fā)展。

科大訊飛已與幾十家車企和合作伙伴建立了強(qiáng)大的合作關(guān)系,構(gòu)建了汽車AI星火生態(tài)。未來,科大訊飛將繼續(xù)深度運(yùn)用大模型,與合作伙伴共同推動中國汽車產(chǎn)業(yè)智能化的革新。