在人工智能資源需求快速增長(zhǎng)的情況下 AI2會(huì)讓綠色變得更容易

開發(fā)更強(qiáng)大的人工智能模型正在徹底改變世界，但它并不便宜。在一份新發(fā)布的立場(chǎng)文件中，西雅圖艾倫人工智能研究所的研究人員認(rèn)為，在評(píng)估研究時(shí)，應(yīng)該更加重視能效。

AI2研究人員呼吁他們的同事報(bào)告與開發(fā)，訓(xùn)練和運(yùn)行模型相關(guān)的“價(jià)格標(biāo)簽”，以及速度和準(zhǔn)確性等其他指標(biāo)。包括AI2在內(nèi)的研究排行榜會(huì)定期評(píng)估AI軟件的準(zhǔn)確性，但它們并未解決獲得這些結(jié)果所需的內(nèi)容。

當(dāng)然，尖端研究在各種領(lǐng)域都是昂貴的，從數(shù)十億美元碰撞器的粒子物理到需要數(shù)百個(gè)DNA測(cè)序儀的遺傳分析。在最終的研究中通常沒有提到財(cái)務(wù)成本或能源使用。但AI2的首席執(zhí)行官Oren Etzioni表示，時(shí)代正在發(fā)生變化 - 特別是隨著能源吞噬科學(xué)實(shí)驗(yàn)的碳足跡變得更加令人擔(dān)憂。

“對(duì)于許多科學(xué)界來說，這是一個(gè)持續(xù)的話題，報(bào)告成本的問題，”該職位論文的作者之一Etzioni告訴GeekWire。“我認(rèn)為這里有所不同的是我們?cè)谟糜贏I模型開發(fā)的資源中看到的驚人升級(jí)”。

OpenAI的一項(xiàng)研究估計(jì)，由于越來越復(fù)雜的模型的快速發(fā)展，2012至2018年間深度學(xué)習(xí)頂層研究所需的計(jì)算資源增加了30萬倍。“這比摩爾定律快得多，每三到四個(gè)月翻一番，”Etzioni說。

在能源需求方面，Etzioni不希望人工智能研究成為比特幣采礦的方式，這已經(jīng)給電力公司帶來了壓力。但這不僅僅是他擔(dān)心的環(huán)境。運(yùn)行Google DeepMind AlphaGo游戲?qū)W習(xí)計(jì)劃等項(xiàng)目的財(cái)務(wù)成本每小時(shí)可超過1,000美元。

“有一個(gè)重要的包容性問題，不僅來自新興經(jīng)濟(jì)體的人們，甚至學(xué)生，學(xué)者和創(chuàng)業(yè)公司，如果你需要，比如10億美元......就可以越來越多地被排除在最前沿之外。”做尖端的人工智能研究，“他說。

AI2的研究人員強(qiáng)調(diào)，他們不是要求結(jié)束高資源，高成本的方法，他們稱之為“紅色人工智能”。相反，他們希望將“綠色人工智能”變得更加明亮 - 這是一種旨在實(shí)現(xiàn)目標(biāo)的方法。以更高的效率進(jìn)行尖端AI。

“如果你讓人工智能更環(huán)保，它不僅會(huì)更便宜，而且會(huì)為更有效的技術(shù)開辟道路，進(jìn)一步推動(dòng)最先進(jìn)的技術(shù)，”Etzioni說。

這些技術(shù)可以更接近于匹配人類大腦的工作方式，這在一般性能和效率方面遠(yuǎn)遠(yuǎn)超過任何AI模型。

“我們思考的碳足跡是沙拉，也許是偶爾的炸玉米餅，”Etzioni開玩笑說。

他和他的同事建議將達(dá)到特定結(jié)果所需的浮點(diǎn)運(yùn)算總數(shù)作為研究論文的常規(guī)部分。他們認(rèn)為，浮點(diǎn)運(yùn)算或FPO可以作為計(jì)算能力的原始計(jì)數(shù)，并且比碳排放，電力使用或?qū)崟r(shí)流逝更合理。

研究人員還可以跟蹤準(zhǔn)確度隨預(yù)算的變化而增加的程度。他們寫道：“報(bào)告這條曲線將使用戶能夠?qū)λ麄冞x擇的模型做出更明智的決定，并強(qiáng)調(diào)不同方法的穩(wěn)定性。”

他們還贊揚(yáng)公眾發(fā)布預(yù)先培訓(xùn)的模型(如Google的BERT和XLNet模型)作為“綠色成功”的趨勢(shì)。

研究人員寫道：“我們希望鼓勵(lì)組織繼續(xù)發(fā)布模型，以便為其他人節(jié)省再培訓(xùn)費(fèi)用。”

Etzioni說，自本周發(fā)布立場(chǎng)文件以來，他得到了積極的反饋，并希望更高效的研究模型能夠帶來更便宜，更高效的AI應(yīng)用程序。AI2的衍生產(chǎn)品之一XNOR.ai 已經(jīng)將能效作為其產(chǎn)品的優(yōu)先考慮事項(xiàng)。

“部署非常重要，”Etzioni說。“我覺得那里有一個(gè)健康的經(jīng)濟(jì)激勵(lì)。”