英研究團(tuán)隊(duì)研發(fā)非神經(jīng)網(wǎng)絡(luò)硬件降低人工智能功耗
日前,英國(guó)紐卡斯?fàn)柎髮W(xué)的研究人員研發(fā)出一種非神經(jīng)網(wǎng)絡(luò)硬件,可以顯著降低人工智能的功率消耗。
研發(fā)團(tuán)隊(duì)訓(xùn)練了一個(gè)神經(jīng)網(wǎng)絡(luò),讓它和另一項(xiàng)Tsetlin機(jī)器技術(shù),分別從標(biāo)準(zhǔn)MNIST數(shù)據(jù)集識(shí)別手寫數(shù)字。
紐卡斯?fàn)柎髮W(xué)高級(jí)講師Rishad Shafik表示:“即開(kāi)即用的神經(jīng)網(wǎng)絡(luò)讓我們每焦耳可以進(jìn)行不到10萬(wàn)億次操作。而使用我們?cè)O(shè)計(jì)的第一臺(tái)Tsetlin機(jī)器,這個(gè)數(shù)值能達(dá)到65萬(wàn)億次。這種改進(jìn)主要來(lái)自于簡(jiǎn)化過(guò)的邏輯設(shè)計(jì)!
他補(bǔ)充說(shuō),在上述數(shù)字識(shí)別實(shí)驗(yàn)中時(shí),一臺(tái)Tsetlin機(jī)器“可以識(shí)別15個(gè)單詞,與神經(jīng)網(wǎng)絡(luò)識(shí)別一個(gè)單詞所需的能量消耗相同”。
Tsetlin機(jī)器是一種“學(xué)習(xí)自動(dòng)機(jī)”(learning automata),它最早是由俄羅斯科學(xué)家Mikhail Tsetlin在20世紀(jì)60年代發(fā)明的一種機(jī)器學(xué)習(xí)算法。Shafik解釋說(shuō),這種算法的問(wèn)題在于,在其基本形式中,“學(xué)習(xí)自動(dòng)機(jī)幾乎不可能在硬件上實(shí)現(xiàn),因?yàn)橛写罅康臓顟B(tài)需要去適應(yīng)”。
挪威阿格德大學(xué)的AI教授Ole-Christoffer Granmo說(shuō),在過(guò)去的幾年里,他通過(guò)將學(xué)習(xí)自動(dòng)機(jī)與經(jīng)典的博弈論和布爾代數(shù)相結(jié)合,找到了一種降低學(xué)習(xí)自動(dòng)機(jī)復(fù)雜性的方法。他將簡(jiǎn)化版的學(xué)習(xí)自動(dòng)機(jī)應(yīng)用到軟件中,并以該學(xué)科創(chuàng)始人的名字將其命名為“Tsetlin機(jī)器”(Tsetlin machine)。
在Granmo的研究基礎(chǔ)以及他本人的協(xié)助下,紐卡斯?fàn)枅F(tuán)隊(duì)找到了一種能夠有效地將Tsetlin機(jī)器的數(shù)據(jù)類型和基礎(chǔ)算法映射到邏輯門上的方法,并在FPGA和定制ASIC上成功實(shí)現(xiàn),他們采用的的形式不僅適用于訓(xùn)練/學(xué)習(xí)AI階段,同時(shí)也適用于訓(xùn)練之后,也就是所謂的AI推理階段。
Shafik將Tsetlin機(jī)器和神經(jīng)網(wǎng)絡(luò)之間的功耗差別歸結(jié)于它們映射到硬件上的方式:神經(jīng)網(wǎng)絡(luò),包括二值神經(jīng)網(wǎng)絡(luò)在內(nèi),都是算術(shù),它們包含了許多乘法和加法操作,而Tsetlin機(jī)器硬件不使用算術(shù)。他表示:“這純粹是邏輯上的平行操作!
紐卡斯?fàn)栁⑾到y(tǒng)研究小組組長(zhǎng)Alex Yakovlev,同時(shí)也和Shafik一樣是AI團(tuán)隊(duì)的領(lǐng)導(dǎo)者,他表示:“能量效率是人工智能最重要的賦能因素,同樣重要的是能夠解釋AI決策的能力。對(duì)于這兩方面,我們需要擺脫算術(shù),而我們的Tsetlin機(jī)器硬件設(shè)計(jì)正好幫我們解決了這一問(wèn)題!
這樣的機(jī)器能做什么?“任何類型的機(jī)器學(xué)習(xí)都需要訓(xùn)練!盨hafik說(shuō)道,“本質(zhì)上,它能夠做神經(jīng)網(wǎng)絡(luò)可以做的任何事情!
發(fā)表評(píng)論
請(qǐng)輸入評(píng)論內(nèi)容...
請(qǐng)輸入評(píng)論/評(píng)論長(zhǎng)度6~500個(gè)字
最新活動(dòng)更多
-
即日-11.13立即報(bào)名>>> 【在線會(huì)議】多物理場(chǎng)仿真助跑新能源汽車
-
11月28日立即報(bào)名>>> 2024工程師系列—工業(yè)電子技術(shù)在線會(huì)議
-
12月19日立即報(bào)名>> 【線下會(huì)議】OFweek 2024(第九屆)物聯(lián)網(wǎng)產(chǎn)業(yè)大會(huì)
-
即日-12.26火熱報(bào)名中>> OFweek2024中國(guó)智造CIO在線峰會(huì)
-
即日-2025.8.1立即下載>> 《2024智能制造產(chǎn)業(yè)高端化、智能化、綠色化發(fā)展藍(lán)皮書》
-
精彩回顧立即查看>> 【限時(shí)免費(fèi)下載】TE暖通空調(diào)系統(tǒng)高效可靠的組件解決方案
推薦專題
- 1 【一周車話】沒(méi)有方向盤和踏板的車,你敢坐嗎?
- 2 特斯拉發(fā)布無(wú)人駕駛車,還未迎來(lái)“Chatgpt時(shí)刻”
- 3 特斯拉股價(jià)大跌15%:Robotaxi離落地還差一個(gè)蘿卜快跑
- 4 馬斯克給的“驚喜”夠嗎?
- 5 打完“價(jià)格戰(zhàn)”,大模型還要比什么?
- 6 馬斯克致敬“國(guó)產(chǎn)蘿卜”?
- 7 神經(jīng)網(wǎng)絡(luò),誰(shuí)是盈利最強(qiáng)企業(yè)?
- 8 比蘋果偉大100倍!真正改寫人類歷史的智能產(chǎn)品降臨
- 9 諾獎(jiǎng)進(jìn)入“AI時(shí)代”,人類何去何從?
- 10 Open AI融資后成萬(wàn)億獨(dú)角獸,AI人才之爭(zhēng)開(kāi)啟
- 高級(jí)軟件工程師 廣東省/深圳市
- 自動(dòng)化高級(jí)工程師 廣東省/深圳市
- 光器件研發(fā)工程師 福建省/福州市
- 銷售總監(jiān)(光器件) 北京市/海淀區(qū)
- 激光器高級(jí)銷售經(jīng)理 上海市/虹口區(qū)
- 光器件物理工程師 北京市/海淀區(qū)
- 激光研發(fā)工程師 北京市/昌平區(qū)
- 技術(shù)專家 廣東省/江門市
- 封裝工程師 北京市/海淀區(qū)
- 結(jié)構(gòu)工程師 廣東省/深圳市