應(yīng)用

技術(shù)

物聯(lián)網(wǎng)世界 >> 物聯(lián)網(wǎng)新聞 >> 物聯(lián)網(wǎng)熱點(diǎn)新聞
企業(yè)注冊(cè)個(gè)人注冊(cè)登錄

要跟機(jī)器說(shuō)上話,總共分幾步?

2020-07-06 09:25 中興文檔

導(dǎo)讀:智能語(yǔ)音交互是基于語(yǔ)音輸入的新一代交互模式,通過(guò)說(shuō)話就可以得到反饋結(jié)果??梢岳斫鉃槿祟?lèi)與機(jī)器間通過(guò)自然語(yǔ)言完成信息傳遞的技術(shù)。


智能語(yǔ)音交互是基于語(yǔ)音輸入的新一代交互模式,通過(guò)說(shuō)話就可以得到反饋結(jié)果??梢岳斫鉃槿祟?lèi)與機(jī)器間通過(guò)自然語(yǔ)言完成信息傳遞的技術(shù)。

語(yǔ)音交互的完整流程,如下圖所示。

通常,根據(jù)距離遠(yuǎn)近語(yǔ)音交互場(chǎng)景可分為兩種:

近場(chǎng)語(yǔ)音場(chǎng)景:通常通過(guò)按鍵激活,例如智能手機(jī)等便攜設(shè)備。

遠(yuǎn)場(chǎng)語(yǔ)音場(chǎng)景:通常通過(guò)喚醒詞激活,例如智能音箱等固定設(shè)備。

遠(yuǎn)場(chǎng)語(yǔ)音場(chǎng)景下,在產(chǎn)品策略上通常會(huì)采取兩種方案,以提高喚醒的準(zhǔn)確率:

將喚醒詞的音節(jié)長(zhǎng)度增加到4音節(jié)。這是因?yàn)橐艄?jié)越長(zhǎng),喚醒的準(zhǔn)確率就會(huì)越高。比如:“小興小興”的喚醒準(zhǔn)確率遠(yuǎn)高于“小興”。

白天只對(duì)喚醒詞做本地校驗(yàn),夜間則再增加云端二次校驗(yàn)。這是喚醒速度和準(zhǔn)確率間的平衡策略。

白天用戶更看重響應(yīng)速度,發(fā)生偶爾的誤喚醒用戶能理解或接受,這時(shí)候僅由本地的喚醒檢測(cè)模塊進(jìn)行快速檢測(cè),保證 700 ms 內(nèi)快速響應(yīng)用戶。

晚上睡覺(jué)時(shí)用戶對(duì)誤喚醒是零容忍的,這時(shí)候就要偏重喚醒的準(zhǔn)確度,將本地檢測(cè)過(guò)的語(yǔ)音上傳到云端進(jìn)行二次確認(rèn),再?zèng)Q定本地是否響應(yīng)。

語(yǔ)音識(shí)別階段的主要作用是采集用于語(yǔ)音,并將語(yǔ)音轉(zhuǎn)換為文字,該階段主要做兩件事情:

1. 尋向降噪。

尋向的作用就是判斷用戶方向,由用戶方向的麥克風(fēng)采集語(yǔ)音數(shù)據(jù),保證語(yǔ)音的數(shù)據(jù)是最清晰的。降噪是對(duì)環(huán)境音進(jìn)行消除,提高識(shí)別準(zhǔn)確率。

2. 識(shí)別語(yǔ)音并轉(zhuǎn)換成文字。

為提高特定內(nèi)容的識(shí)別率,一般都會(huì)提供熱詞服務(wù),配置的熱詞內(nèi)容實(shí)時(shí)生效,并且會(huì)提升 ASR 結(jié)果的識(shí)別權(quán)重,在一定程度上提高 ASR 識(shí)別的準(zhǔn)確率。

語(yǔ)義理解就是嘗試?yán)斫馊祟?lèi)的語(yǔ)言,即把語(yǔ)音識(shí)別的結(jié)果轉(zhuǎn)成結(jié)構(gòu)化的、機(jī)器能夠理解的語(yǔ)言。

NLU 的工作邏輯是將用戶的指令進(jìn)行 Domain(領(lǐng)域)→Intent(意圖)→Slot(詞槽)三級(jí)拆分。

例如:“設(shè)置一個(gè)明早 8 點(diǎn)的鬧鐘”這樣一條指令,經(jīng)過(guò) NLU 處理,用戶的指令則被拆分為如下三級(jí):

領(lǐng)域:“鬧鐘”

意圖:“設(shè)置鬧鐘”

詞槽:“明早8點(diǎn)”

先決策。機(jī)器在對(duì)話過(guò)程中不斷根據(jù)當(dāng)前的狀態(tài)決策下一步應(yīng)該采取的最優(yōu)動(dòng)作。

再執(zhí)行。如提供結(jié)果,詢問(wèn)特定限制條件,澄清或確認(rèn)需求,調(diào)用各種 Skill 技能(AI 時(shí)代的 APP),從而最有效的輔助用戶完成信息或服務(wù)的獲取。

NLG 的主要目的是降低人類(lèi)和機(jī)器之間的溝通鴻溝,將非語(yǔ)言格式的數(shù)據(jù)轉(zhuǎn)換成人類(lèi)可以理解的語(yǔ)言格式。簡(jiǎn)單的 NLG 可以將數(shù)據(jù)進(jìn)行合并處理,而高級(jí)的 NLG 則可以理解數(shù)據(jù)想要表達(dá)的意圖,并考慮上下文,呈現(xiàn)出可以輕松閱讀的內(nèi)容。

目前在一些有比較明顯規(guī)則的領(lǐng)域中,比如體育新聞,已經(jīng)可以借助 NLG 進(jìn)行新聞的自動(dòng)發(fā)布了。也許你現(xiàn)在正在看的一篇文章就是由機(jī)器生成的~

將文字內(nèi)容轉(zhuǎn)換成語(yǔ)音輸出,讓機(jī)器跟我們對(duì)話。這涉及到兩個(gè)過(guò)程:

將從文字內(nèi)容轉(zhuǎn)換成語(yǔ)音輸出,讓機(jī)器說(shuō)話。

合成語(yǔ)音:狹義上專(zhuān)指根據(jù)音素序列(以及標(biāo)注好的起止時(shí)間、頻率變化等信息)生成語(yǔ)音,廣義上它也可以包括文本處理的步驟。

家庭中語(yǔ)音交互的主要應(yīng)用場(chǎng)景包括:

Internet,語(yǔ)音查詢資訊▲

IPTV/OTT,語(yǔ)音播控影視▲

IMS固話,語(yǔ)音免提撥號(hào)▲

IOT智家,語(yǔ)音控制家電▲

可能,你覺(jué)得上面的小盒子只是個(gè)智能音箱?

其實(shí),它開(kāi)屏是盒子,息屏是音箱~

目前,它已經(jīng)在各電信營(yíng)業(yè)廳上架的路上了...

現(xiàn)在,你是不是已經(jīng)迫不及待地想盤(pán)它了呢?

我們先通過(guò)下面的短視頻了解一下吧!

縮略語(yǔ):

ASR:Automatic Speech Recognition,自動(dòng)語(yǔ)音識(shí)別技術(shù)

NLU:Natural Language Understanding,自然語(yǔ)言理解

DM:Dialog Management,對(duì)話管理

NLG:Natural Language Generation,自然語(yǔ)言生成

TTS:Text To Speech,從文本到語(yǔ)音

NLP:Natural Language Processing,自然語(yǔ)言處理

IPTV:Internet Protocol Television,網(wǎng)際協(xié)議電視

OTT:Over The Top,通過(guò)互聯(lián)網(wǎng)向用戶提供各種應(yīng)用服務(wù)

IMS:Interactive Multimedia Service,交互式多媒體服務(wù)

IOT:Internet of Things,物聯(lián)網(wǎng)