訂閱
糾錯(cuò)
加入自媒體

實(shí)時(shí)翻譯是如何實(shí)現(xiàn)的?

2020-04-26 08:54
來源: 電腦之家

科技讓我們能夠隨時(shí)通過手機(jī)聯(lián)系到身處世界各地的人。它打破了距離與時(shí)間的限制,無論是朋友、家人,還是商務(wù)伙伴,我們都能輕松自如地和他們建立聯(lián)系。然而,直到現(xiàn)在,語言仍是我們面對(duì)面溝通的一個(gè)障礙。

盡管我們能夠向全球各地發(fā)送消息、撥打電話或是視頻聊天,但仍不能進(jìn)行跨語言的流暢交談。現(xiàn)在,國內(nèi)領(lǐng)先的智能學(xué)習(xí)公司——有道,正利用AI來解決這一問題。過去一年半的時(shí)間,Qualcomm持續(xù)與有道開展合作,通過終端側(cè)的實(shí)時(shí)翻譯來幫助人們打破語言的限制、輕松自如地進(jìn)行溝通。

想象一下:你與海外客戶進(jìn)行電話會(huì)議。雖然你說的是普通話,但海外客戶能夠?qū)崟r(shí)地聽到標(biāo)準(zhǔn)的英文翻譯,這種無縫、流暢的實(shí)時(shí)翻譯十分令人驚嘆。但是,這樣的實(shí)時(shí)翻譯對(duì)技術(shù)要求頗高,是此前技術(shù)無法實(shí)現(xiàn)的。Qualcomm驍龍865 5G移動(dòng)平臺(tái)和其集成的第五代Qualcomm人工智能引擎AI Engine,其AI性能是前代平臺(tái)的2倍,能夠支持實(shí)時(shí)離線翻譯的實(shí)現(xiàn)。事實(shí)上,在2019年12月舉行的驍龍技術(shù)峰會(huì)期間,我們已經(jīng)在現(xiàn)場展示過部分用例。

實(shí)時(shí)翻譯是如何實(shí)現(xiàn)的

翻譯功能通常由CPU執(zhí)行,但對(duì)于特定應(yīng)用而言,CPU作為一個(gè)通用的性能模塊,不能提供足夠強(qiáng)大或?qū)嵱玫男阅苤С。Qualcomm驍龍與有道合作,把翻譯移植到更合適的處理模塊——Qualcomm Hexagon DSP上,以實(shí)現(xiàn)端到端的時(shí)延和性能優(yōu)化。這樣做的優(yōu)勢(shì)在于,能夠有效降低功耗并加大算力,以提高翻譯準(zhǔn)確性,為實(shí)時(shí)翻譯帶來更好的體驗(yàn)。

無論用戶正在進(jìn)行傳統(tǒng)的語音通話還是網(wǎng)絡(luò)通話,當(dāng)用戶的語音進(jìn)入驍龍865終端的麥克風(fēng)并傳入驍龍865集成的第五代Qualcomm AI Engine時(shí),有道實(shí)時(shí)翻譯就會(huì)馬上開始運(yùn)行。在翻譯的過程中,驍龍865會(huì)喚醒Qualcomm傳感器中樞(Sensing Hub)來消除噪聲和回聲,然后啟動(dòng)Hexagon處理器進(jìn)行神經(jīng)網(wǎng)絡(luò)處理,這主要包括以下三個(gè)階段:

1、 自動(dòng)語音識(shí)別(ASR)——以英文來舉例,通過在Hexagon處理器上運(yùn)行卷積神經(jīng)網(wǎng)絡(luò)(CNN),用戶的英文語音可以被轉(zhuǎn)錄為英文文字。

2、 神經(jīng)網(wǎng)絡(luò)機(jī)器翻譯(NMT)——接下來,英文文字能夠通過神經(jīng)網(wǎng)絡(luò)機(jī)器翻譯轉(zhuǎn)換成中文文字。這不僅僅是逐字翻譯,而是結(jié)合語句結(jié)構(gòu)的翻譯。Hexagon處理器能夠助力有道算法更好的理解兩種語言之間語句結(jié)構(gòu)的區(qū)別,以及詞語在不同語境中可能具有的不同含義。

3、 文字轉(zhuǎn)語音——最后,神經(jīng)網(wǎng)絡(luò)機(jī)器翻譯出的中文文字會(huì)轉(zhuǎn)化為普通話語音。

值得關(guān)注的是,上述處理過程全部都能夠在終端側(cè)實(shí)時(shí)地進(jìn)行,這讓跨語言交談?wù)嬲兊幂p松自如。

實(shí)時(shí)翻譯的未來

目前,有道實(shí)時(shí)翻譯技術(shù)支持包括普通話、英文在內(nèi)的多種語言。未來,該技術(shù)甚至可以扮演口譯員的角色,在人們面對(duì)面交談時(shí)進(jìn)行翻譯。

在5G技術(shù)的支持下,實(shí)時(shí)翻譯將會(huì)以更具沉浸感的方式呈現(xiàn)在人們的生活中。例如,由新一代無線通信和驍龍5G終端賦能的超低時(shí)延技術(shù)能夠在視頻電話中支持面部識(shí)別,這帶來的不僅僅只是聲音同步,而是逼真的口型同步,對(duì)方就連看起來也像是正在使用與用戶相同的語言進(jìn)行對(duì)話。

Qualcomm Technologies希望幫助全世界進(jìn)行連接、計(jì)算和溝通。這也是為什么我們很高興能夠與有道合作,并打造能夠幫助人們克服語言障礙的技術(shù)。我們很榮幸可以與合作伙伴一起豐富用戶體驗(yàn),共同架起全世界溝通的橋梁。

Qualcomm驍龍、Qualcomm人工智能引擎AI Engine、Qualcomm Hexagon和Qualcomm傳感器中樞是Qualcomm Technologies, Inc.和/或其子公司的產(chǎn)品。

聲明: 本文系OFweek根據(jù)授權(quán)轉(zhuǎn)載自其它媒體或授權(quán)刊載,目的在于信息傳遞,并不代表本站贊同其觀點(diǎn)和對(duì)其真實(shí)性負(fù)責(zé),如有新聞稿件和圖片作品的內(nèi)容、版權(quán)以及其它問題的,請(qǐng)聯(lián)系我們。

發(fā)表評(píng)論

0條評(píng)論,0人參與

請(qǐng)輸入評(píng)論內(nèi)容...

請(qǐng)輸入評(píng)論/評(píng)論長度6~500個(gè)字

您提交的評(píng)論過于頻繁,請(qǐng)輸入驗(yàn)證碼繼續(xù)

  • 看不清,點(diǎn)擊換一張  刷新

暫無評(píng)論

暫無評(píng)論

人工智能 獵頭職位 更多
掃碼關(guān)注公眾號(hào)
OFweek人工智能網(wǎng)
獲取更多精彩內(nèi)容
文章糾錯(cuò)
x
*文字標(biāo)題:
*糾錯(cuò)內(nèi)容:
聯(lián)系郵箱:
*驗(yàn) 證 碼:

粵公網(wǎng)安備 44030502002758號(hào)