第1第51目范 規(guī)范性引用文 術(shù)語和定 具體指標(biāo)項(xiàng)及評(píng)估方 評(píng)估要 基本信息披 安全審查要 測評(píng)環(huán) 智能音箱智能化評(píng)估指 語音喚醒準(zhǔn)確 誤喚醒 語音識(shí)別能 智能交互能 音箱自身的智能控制能 語音播報(bào)能 智能家居支持能 音箱技能領(lǐng) 響應(yīng)速 個(gè)性化服務(wù)（加分項(xiàng) 安全防護(hù)能 GB/T21023-2007GB/T21024-2007GB/T34083-2017GB/T34145-2017GB/T19363.1-20081SJ/T11380-2008自動(dòng)聲紋識(shí)別（說話人識(shí)別）SmartVoiceWake-Wake-upAutomaticSpeechTextToNaturalLanguageInterferingTest1L0-L9101。通過對指11）表2

????—

??

×=??1?20%+R2?30%+R3?40%+R4?????

4、設(shè)置安靜環(huán)境、噪聲環(huán)境權(quán)重比為4:6，根據(jù)權(quán)重比，得出????=??140%P234工智能交互的期待。3TN(TextNormalization文本規(guī)整、文本正則化)覆蓋率TN覆蓋率=正確合成聲音的用例數(shù)/總的用例數(shù)×100%5,610101055102、本項(xiàng)指標(biāo)總分100分，無屏音箱總得分=通用領(lǐng)域總得分，有屏音箱總得分=37做出反饋并有聲音輸出時(shí)記錄時(shí)間Tb，得出語音響應(yīng)時(shí)間T1=Tb?Ta;音箱做出反饋并有視頻輸出時(shí)記錄時(shí)間Tb，視頻響應(yīng)時(shí)間T2=Tb?Ta;5、對于無屏音箱，響應(yīng)時(shí)間??=6、對于有屏音箱，響應(yīng)時(shí)間??=??140%??218參評(píng)企業(yè)是否支持傳輸過程中數(shù)據(jù)傳輸加密。如支持TLS、HTTPS、IPSEC92目范 規(guī)范性引用文 術(shù)語和定 智能教育機(jī)器人系統(tǒng)框 功能指 評(píng)估方 AI核心技術(shù)支持能 智能視 智能語 智能語 編程接口和教育能 編程接 教育能 硬件設(shè) 運(yùn)算模 功能模 電機(jī)模 傳感器模 輸入輸出模 1部分：智能音箱345GB/T21023-2007GB/T21024-2007GB/T33265-2016GB/T34083-2017GB/T34145-2017ArtificialApplicationImageD/AD/ADialogueMachineMachineNaturalLanguageSpeechTextToPythonAIAI核心技術(shù)支持能力×40%+硬件設(shè)備×20%1（1）（1）智能教育機(jī)器人成品或散件中包含火焰?zhèn)鞲衅鳎軌蛴脕硖綔y火源或其它一些波長在700納米3目范 規(guī)范性引用文 術(shù)語和定 系統(tǒng)框架及智能化等 具體指標(biāo)項(xiàng)及評(píng)估方 基本評(píng)估指 安全評(píng)估指 黃反測 用戶權(quán)益測 安全性測 測評(píng)環(huán) 智能化評(píng)估標(biāo) 語音喚醒能 語音識(shí)別能 語音理解能 數(shù)據(jù)豐富程 語音播報(bào)能 車機(jī)及車輛控制能 響應(yīng)速度與穩(wěn)定 弱網(wǎng)及離線能 全雙工交互拒識(shí)區(qū)分能 個(gè)性化服務(wù)（加分項(xiàng) 1部分：智能音箱345GB/T21023-2007GB/T21024-2007GB/T34083-2017GB/T34145-2017GB/T19363.1-20081SJ/T11380-2008自動(dòng)聲紋識(shí)別（說話人識(shí)別）in-carvoiceVoiceWake-Wake-upAutomaticSpeechTextToNaturalLanguageInterferingTest1。113參評(píng)企業(yè)是否支持傳輸過程中數(shù)據(jù)傳輸加密。如支持TLS、HTTPS、IPSEC45主駕駛位(I)(A)副駕駛位(II)(A)主駕(I)(A)主駕(I)(A)主駕(I)(A)主駕(I)(A)主駕(I)(A)副駕(II)(A)副駕(II)(A)副駕(II)(A)副駕(II)(A)副駕(II)(A)注：60-6565-7070-751下執(zhí)行即可。6，車載語音助手服務(wù)能力總得分為指標(biāo)得分的加權(quán)求和。??????????=∑ωi???=??×———

??

??×———測試音頻總時(shí)長(H)喚醒詞音頻，針對各個(gè)廠家產(chǎn)品提供的喚醒詞，提前錄制N條不同人不同語調(diào)下的喚醒詞（N建20050）的錄音音頻；醒情況，得到喚醒率R，然后對9???；??????????1=100?(ω????+(1?ω)?????=1???????=1???+??+??×————N（建議N2000）??????????2=100?∑ωi?8??????????3=100?∑ωi?9??????????????????????????????????????????????????????10??????????4=100?(ω?????????????+(1?ω)?本指標(biāo)是為了評(píng)測車載語音助手進(jìn)行語音播報(bào)的綜合效果、包括音頻的合成質(zhì)量評(píng)估以及回復(fù)語100*11TTS（18）“”“”“#、“”100*主要基于人工評(píng)測的方式。采用MOS(MeanOpinionScore),平均主觀意見分，參評(píng)企業(yè)的語音合成（情緒飽滿度+流暢連貫度+擬人舒適度100分，最終統(tǒng)計(jì)平均得分。回復(fù)語交互得分=車廠提供TTS??????????5

發(fā)音準(zhǔn)確率+發(fā)音清晰度語音自然度+1213141060708090100151060708090100100端到端任務(wù)完成率=任務(wù)完成數(shù)/總?cè)蝿?wù)數(shù)??????????8=?????????1+??????????????(??????????????)?其中，TCR為任務(wù)完成率，?????為響應(yīng)時(shí)間得分（????????建議取1000ms，??1建議取80）斷句準(zhǔn)確率(PcutFRR（拒識(shí)率）FAR（誤識(shí)率）500ms、1s、2s，對車機(jī)進(jìn)行測試，記錄其識(shí)別響應(yīng)情況，計(jì)算斷句2?(1?FRR)?(1???????????9=

(2?FRR? ?ω+Pcut?(1???為權(quán)重參數(shù)，建議為0.5 16其中，????為每個(gè)子功能項(xiàng)的得分，滿分為100ω??喚醒率=車載喚醒次數(shù)/總測試次數(shù)識(shí)別率=準(zhǔn)確識(shí)別字?jǐn)?shù)/測試語音總字?jǐn)?shù)17--------1:3:1:1:2:2的比重計(jì)算。18-----1903Si。Si。Si。Si。??????????12=∑?????100?其中，????ω??附件1附件2表1表2??1=1/n?∑我要聽半月傳主題曲放一個(gè)三生三世桃花??2=1/n?∑??3=1/n?∑較為復(fù)雜的邏輯門問導(dǎo)航到天安門不走高我想聽劉德華或者陳|陳奕迅??4=1/n?∑我要聽劉德華老婆唱來一個(gè)郭德綱徒弟的??5=1/n?∑今個(gè)兒天兒怎樣啊？??6=1/n?∑A:已為您找到后天從成都??7=1/n?∑支持率=之和/真實(shí)任務(wù)完成所A:好的，已為您修改出發(fā)A:已為您找到從重慶到北??8=1/n?∑??9=1/n?∑A:已為您找到后天從重慶A:已為您找到劉德華的冰A:已為您找到劉德華的練A:已為您找到三生三世十??10=1/n?∑A:已為您找到劉德華的冰A:已為您找到劉德華的練A:已為您查找到劉德華的??11=1/n?∑世界上最高的山峰是??12=1/n?∑??13=1/n?∑??14=1/n?∑45.3測試設(shè)備5.4測試環(huán)境因 語音測試集聲源定 語音輸入測試方 喚醒 誤喚醒 喚醒時(shí) 協(xié)同喚 遠(yuǎn)場語音識(shí) 遙控進(jìn)場語音識(shí) 語音技能測試方 語音基礎(chǔ)體驗(yàn)測試方 多設(shè)備語音協(xié) 可見可 聲音特征識(shí) 連續(xù)對 場景引導(dǎo) 1部分：智能音箱345GB/T21023-2007GB/T2423.5-2019/IEC60068-2-27:2008環(huán)境試驗(yàn)第2EaGB/T4208-2017/IEC60529:2013外殼防護(hù)等級(jí)（IP代碼喚醒率=H/N*100%N(24H，則：誤喚醒率=H/N(單位次每小時(shí))V500，U50msttt。VUIt2-GUIt3-t1計(jì)算方法如下：測試集按任務(wù)條目計(jì)算，N，Hmic圖1表1表2外噪聲外噪聲自噪聲自噪聲聲源表3（性別表4（年齡<77~1415~4445~59表5（語速表6（口音北京市、天津市、河北省表73~5表860db，開始誤喚醒測試；表9時(shí)刻為t1，剛聽到智慧交互顯示終端語音助手語音響應(yīng)時(shí)刻為t1，20GUIVUIt2-GUIt3-表11表12表13N-F)/N*100%，其中N是全集字?jǐn)?shù)，F(xiàn)錯(cuò)14語音技能測試方法音視頻搜15語音技能測試方法端到端任務(wù)完成率表16表17表18表19表20目前 范 規(guī)范性引用文 術(shù)語和定 服務(wù)機(jī)器人技術(shù)框 具體指標(biāo)項(xiàng)及評(píng)估方 移動(dòng)前 前 后 加 制 轉(zhuǎn) 爬 駐 越 業(yè)務(wù)功 清理掃 定點(diǎn)配 跟隨移 人臉跟 人員引 咨詢問 遠(yuǎn)程對話傳 保障功 遠(yuǎn)程控制與接 安全保 軟件管 降級(jí)保 緊急制 自主充 核心性 障礙物識(shí)別與避 目的地定位導(dǎo) 多任務(wù)路徑規(guī) AI性 智能視 語音交 1部分：智能音箱345GB/T38124-2019GB/T21023-2007GB/T2423.5-2019/IEC60068-2-27:2008環(huán)境試驗(yàn)第2EaGB/T4208-2017/IEC60529:2013外殼防護(hù)等級(jí)（IP代碼ISO13482-2014機(jī)器人和機(jī)器人設(shè)備.個(gè)人護(hù)理機(jī)器人的安全性要求（Robotsandroboticdevices-Safetyrequirementsforpersonalcarerobots）ISO18646-1:20161（Robotics-Performancecriteriaandrelatedtestmethodsforservicerobots-Part1:Locomotionforwheeledrobots）epidemicpreventionservicesafeguardOTAoverthedowngrade定位electromagneticcompatibility,impactdesignverificationplanand1AIOTA圖1障礙物識(shí)別與避讓測試場景（室內(nèi)室障礙物室障礙物機(jī)器人最大寬度單車道寬度總長度不少于150m障礙物室機(jī)器人最大寬度室機(jī)器人最大寬度點(diǎn)目的地目的地圖3（室內(nèi)圖4目的地定位導(dǎo)航測試場景（室內(nèi)表2室