2025人工智能產(chǎn)品智能化等級指標(biāo)要求和評估方法第3部分:車載語音助手_第1頁
2025人工智能產(chǎn)品智能化等級指標(biāo)要求和評估方法第3部分:車載語音助手_第2頁
2025人工智能產(chǎn)品智能化等級指標(biāo)要求和評估方法第3部分:車載語音助手_第3頁
2025人工智能產(chǎn)品智能化等級指標(biāo)要求和評估方法第3部分:車載語音助手_第4頁
2025人工智能產(chǎn)品智能化等級指標(biāo)要求和評估方法第3部分:車載語音助手_第5頁
已閱讀5頁,還剩22頁未讀 繼續(xù)免費(fèi)閱讀

下載本文檔

版權(quán)說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請進(jìn)行舉報(bào)或認(rèn)領(lǐng)

文檔簡介

3目范 規(guī)范性引用文 術(shù)語和定 系統(tǒng)框架及智能化等 具體指標(biāo)項(xiàng)及評估方 基本評估指 安全評估指 黃反測 用戶權(quán)益測 安全性測 測評環(huán) 智能化評估標(biāo) 語音喚醒能 語音識別能 語音理解能 數(shù)據(jù)豐富程 語音播報(bào)能 車機(jī)及車輛控制能 響應(yīng)速度與穩(wěn)定 弱網(wǎng)及離線能 全雙工交互拒識區(qū)分能 個性化服務(wù)(加分項(xiàng) 1部分:智能音箱345GB/T21023-2007GB/T21024-2007GB/T34083-2017GB/T34145-2017GB/T19363.1-20081SJ/T11380-2008自動聲紋識別(說話人識別)in-carvoiceVoiceWake-Wake-upAutomaticSpeechTextToNaturalLanguageInterferingTest1。113參評企業(yè)是否支持傳輸過程中數(shù)據(jù)傳輸加密。如支持TLS、HTTPS、IPSEC45主駕駛位(I)(A)副駕駛位(II)(A)主駕(I)(A)主駕(I)(A)主駕(I)(A)主駕(I)(A)主駕(I)(A)副駕(II)(A)副駕(II)(A)副駕(II)(A)副駕(II)(A)副駕(II)(A)注:60-6565-7070-751下執(zhí)行即可。6,車載語音助手服務(wù)能力總得分為指標(biāo)得分的加權(quán)求和。??????????=∑ωi???=??×———

??

??×———測試音頻總時長(H)喚醒詞音頻,針對各個廠家產(chǎn)品提供的喚醒詞,提前錄制N條不同人不同語調(diào)下的喚醒詞(N建20050)的錄音音頻;醒情況,得到喚醒率R,然后對9???;??????????1=100?(ω????+(1?ω)?????=1???????=1???+??+??×————N(建議N2000)??????????2=100?∑ωi?8??????????3=100?∑ωi?9??????????????????????????????????????????????????????10??????????4=100?(ω?????????????+(1?ω)?本指標(biāo)是為了評測車載語音助手進(jìn)行語音播報(bào)的綜合效果、包括音頻的合成質(zhì)量評估以及回復(fù)語100*11TTS(18)“”“”“#、“”100*主要基于人工評測的方式。采用MOS(MeanOpinionScore),平均主觀意見分,參評企業(yè)的語音合成(情緒飽滿度+流暢連貫度+擬人舒適度100分,最終統(tǒng)計(jì)平均得分?;貜?fù)語交互得分=車廠提供TTS??????????5

發(fā)音準(zhǔn)確率+發(fā)音清晰度語音自然度+1213141060708090100151060708090100100端到端任務(wù)完成率=任務(wù)完成數(shù)/總?cè)蝿?wù)數(shù)??????????8=?????????1+??????????????(??????????????)?其中,TCR為任務(wù)完成率,?????為響應(yīng)時間得分(????????建議取1000ms,??1建議取80)斷句準(zhǔn)確率(PcutFRR(拒識率)FAR(誤識率)500ms、1s、2s,對車機(jī)進(jìn)行測試,記錄其識別響應(yīng)情況,計(jì)算斷句2?(1?FRR)?(1???????????9=

(2?FRR? ?ω+Pcut?(1???為權(quán)重參數(shù),建議為0.5 16其中,????為每個子功能項(xiàng)的得分,滿分為100ω??喚醒率=車載喚醒次數(shù)/總測試次數(shù)識別率=準(zhǔn)確識別字?jǐn)?shù)/測試語音總字?jǐn)?shù)17--------1:3:1:1:2:2的比重計(jì)算。18-----1903Si。Si。Si。Si。??????????12=∑?????100?其中,????ω??附件1附件2表1表2??1=1/n?∑我要聽半月傳主題曲放一個三生三世桃花??2=1/n?∑??3=1/n?∑較為復(fù)雜的邏輯門問導(dǎo)航到天安門不走高我想聽劉德華或者陳|陳奕迅??4=1/n?∑我要聽劉德華老婆唱來一個郭德綱徒弟的??5=1/n?∑今個兒天兒怎樣?????6=1/n?∑A:已為您找到后天從成都??7=1/n?∑支持率=之和/真實(shí)任務(wù)完成所A:好的,已為您修改出發(fā)A:已為您找到從重慶到北??8=1/n?∑??9=1/n?∑A:已為您找到后天從重慶A:已為您找到劉德華的冰A:已為您找到劉德華的練A:已為您找到三生三世十??10

溫馨提示

  • 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
  • 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
  • 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會有圖紙預(yù)覽,若沒有圖紙預(yù)覽就沒有圖紙。
  • 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
  • 5. 人人文庫網(wǎng)僅提供信息存儲空間,僅對用戶上傳內(nèi)容的表現(xiàn)方式做保護(hù)處理,對用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對任何下載內(nèi)容負(fù)責(zé)。
  • 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請與我們聯(lián)系,我們立即糾正。
  • 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時也不承擔(dān)用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。

最新文檔

評論

0/150

提交評論