Runway ML將AI工具放在各地創(chuàng)作者的手中

機器學(xué)習(xí)對于創(chuàng)作者來說可能是一個很棒的工具，但是將AI集成到您的工作流程中對于那些無法編碼的人來說是一項挑戰(zhàn)。一個名為Runway ML的新計劃旨在通過為藝術(shù)家，設(shè)計師，電影制作人和其他人提供機器學(xué)習(xí)應(yīng)用程序的“應(yīng)用程序商店”，只需點擊幾下即可激活這一過程。

假設(shè)您是預(yù)算的動畫師，想要將人類演員的視頻轉(zhuǎn)換為3D模型。您可以使用Runway將一個名為“PosetNet”的神經(jīng)網(wǎng)絡(luò)應(yīng)用于您的鏡頭，而不是雇用昂貴的動作捕捉設(shè)備，創(chuàng)建演員的線框模型，然后可以將其導(dǎo)出為動畫。

一種簡單的實驗機器學(xué)習(xí)方法

或者說你需要在高預(yù)算的幻想電視劇中刪除一個意外留下的咖啡杯。你可以用傳統(tǒng)方式編輯它，手工繪制杯子，或者你可以通過機器學(xué)習(xí)分割模型運行你的鏡頭，它會自動突出顯示每個框架中的不同對象，使你的工作更輕松。

像這樣的例子只是Runway的冰山一角，聯(lián)合創(chuàng)始人CristóbalValenzuela將其描述為極端平等主義的工具。“機器學(xué)習(xí)是一種非常獨特的技術(shù)，”Valenzuela告訴The Verge。“但我想讓事情更具包容性;讓不同背景的人圍坐在桌子旁并使用這些模型。“

Runway開始作為巴倫蘇埃拉在紐約大學(xué)Tisch藝術(shù)學(xué)院的論文項目。在獲得AI藝術(shù)界的熱烈反饋后，他決定將該計劃納入主流，要求兩位學(xué)校的朋友作為聯(lián)合創(chuàng)始人加入，并從紐約和硅谷支持者那里收集種子資金。該公司于去年12月成立，并在今年1月之后推出測試版。

巴倫蘇埃拉橫跨藝術(shù)和代碼領(lǐng)域，并表示他希望將這兩個世界聯(lián)系起來，使非編碼人員能夠使用機器學(xué)習(xí)模型，從而將研究人員與直接受益于他們工作的人聯(lián)系起來。

在Valenzuela去年五月寫的博客文章中，他將當(dāng)前的人工智能藝術(shù)場景與16和17世紀(jì)的繪畫進(jìn)行了比較。當(dāng)時，簡單地存儲和使用油漆的行為是一種手工藝秘密，畫家依賴于涉及豬的膀胱和繩子的深奧技術(shù)??。但隨著1841年漆管的發(fā)明，該工藝變得更加容易。在戶外進(jìn)行也更容易，從而產(chǎn)生新的風(fēng)格和動作。

為AI做什么油漆管做肖像畫

19世紀(jì)的畫家皮埃爾 - 奧古斯特·雷諾阿告訴他的兒子：“沒有顏色的管子，就沒有塞尚，沒有莫奈，沒有希思黎或畢沙羅，沒有什么記者被稱為印象派。”換句話說：無障礙創(chuàng)造力。

但現(xiàn)代藝術(shù)家的“油漆管”是什么?Valenzuela提出了一個令人信服的論據(jù)，它可能是Runway - 或者至少是一個看起來很像它的程序。

在這種情況下，豬的膀胱阻礙了進(jìn)步，這是目前使用機器學(xué)習(xí)模型所需的技能。這意味著學(xué)習(xí)使用像TensorFlow或PyTorch這樣的軟件;這可能意味著購買一些昂貴的GPU(因為您當(dāng)前的計算機不會運行這些系統(tǒng))，或者改為連接到AWS實例。這些任務(wù)都不是非編碼人員所能達(dá)到的，但他們肯定需要時間并為用戶制造瓶頸。相比之下，Runway的模型是完美的油漆管：只需點擊即可。

該公司當(dāng)然不是第一個讓AI模型更易于使用的公司。但早期的例子 - 比如Lobe，它允許用戶在被微軟收購之前使用可視化界面訓(xùn)練AI系統(tǒng) - 專注于商業(yè)用例，而不是創(chuàng)造性用例。

當(dāng)您加載其商店前端時，Runway的目標(biāo)市場是顯而易見的，這使您可以瀏覽從文本生成到運動跟蹤的各種模型。

單擊以查看每個模型的詳細(xì)信息，單擊以將其添加到工作區(qū)，設(shè)置輸入和輸出，然后啟動系統(tǒng)運行。有一些鉤子可以將這些輸出連接到其他應(yīng)用程序(例如，您可以將ML處理的圖像發(fā)送到Photoshop)，用戶只需幾行代碼就可以直接從GitHub導(dǎo)入新模型。

后一點是Runway最重要的一點。很難低估當(dāng)前人工智能藝術(shù)場景的快節(jié)奏和協(xié)作能力，以及有多少人從彼此的工作和專業(yè)研究中獲益。新型號一經(jīng)發(fā)布，就會被各種意想不到的群眾大肆宣傳。

采用名為GPT-2的AI文本生成系統(tǒng)，由研究實驗室OpenAI于2月份推出。自推出以來的幾個月里，GPT-2已經(jīng)變成了可訪問的網(wǎng)絡(luò)應(yīng)用程序，它被用來幫助寫一本小說，有人甚至創(chuàng)建了一個完全由聊天機器人填充的subreddit，模仿使用它的其他subreddits。

簡而言之：這是一個充滿活力和充滿活力的場景，而Runway希望盡可能地與它保持聯(lián)系。Valenzuela表示，他的團隊不斷響應(yīng)用戶的反饋，為該計劃添加新模型，并每月更新軟件界面。

正是這種與社區(qū)的聯(lián)系和更新的速度，他說這也將阻止跑道被行業(yè)的老牌玩家所侵占。“我們團隊中只有四個人，”他說。“我們喜歡快速發(fā)貨，讓人們興奮并讓他們使用東西。”雖然像Adobe這樣的企業(yè)巨頭肯定對類似的AI應(yīng)用程序很感興趣，但將它們集成到產(chǎn)品中的速度必然會慢一些。

該@runwayml測試是最神奇的工具，我在一個while--能夠旋轉(zhuǎn)起來，并與模特一起玩打了一個無需編寫一行代碼將改變這么多pic.twitter.com/IGAoIPbDRL

- Manidis(@WillManidis)將于2019年6月5日

到目前為止，接待跑道已經(jīng)接受了巴倫蘇埃拉的評論。

“我個人認(rèn)為快速嘗試一些模型很有用，”最近在蘇富比拍賣他的作品的人工智能藝術(shù)家Mario Klingemann說。他說，該計劃對研討會和課程特別有用，因為它允許教師在幾分鐘內(nèi)啟動并運行新的機器學(xué)習(xí)模型。

Klingemann也有保留。他告訴The Verge，該軟件對于制作自己的藝術(shù)“太有限”，因為它只提供預(yù)訓(xùn)練模型。這意味著如果有人想要定制生成器系統(tǒng)的輸出，比如生成對抗網(wǎng)絡(luò)(GAN)，他們就無法在自己的數(shù)據(jù)上訓(xùn)練它。Valenzuela表示，該功能將很快添加到程序中，同時能夠?qū)⒁粋€模型的輸出用作另一個模型的輸入。

羅比·巴拉特，另一個AI的藝術(shù)家是誰見著他與甘斯的工作，也稱贊該方案，挑出其潛在的民主化AI藝術(shù)場景特別積極。

“如果跑道可以降低進(jìn)入的障礙......我全力以赴。”

“現(xiàn)在，對于在谷歌工作的富有科技兄弟來說，這是最容易的，去了一個花哨的計算機科學(xué)學(xué)校，并且可以在工作中使用巨大的GPU集群來制作帶有神經(jīng)網(wǎng)絡(luò)的藝術(shù)品，”Barrat告訴The Verge。“如果Runway可以降低進(jìn)入的門檻，讓更多樣化的人群輕松地用人工智能創(chuàng)造藝術(shù)，我就是全力以赴。”

但巴拉特同意該計劃的簡單性是一個限制因素。他說，想要使用人工智能做的不僅僅是簡化他們流程中現(xiàn)有步驟的人需要比跑道更強大的程序。“無論它作為一種工具有多好，代碼的人仍然能夠制作更大范圍的東西，并最終能夠更好地控制他們的產(chǎn)品。”

Barrat和Klingemann還表示，在跑道上訓(xùn)練ML模型時，價格是一個潛在的問題。該軟件可免費下載，并附帶10美元的云信用額，這足以讓人了解其潛力。但在那之后，每分鐘計算費用為5美分。對于像Klingemann和Barrat這樣需要培訓(xùn)他們自己的模型的藝術(shù)家來說，購買他們自己的GPU或連接到云服務(wù)可能更便宜。“我不確定它在經(jīng)濟上對我有意義，”克林格曼說。

但是說Runway并不適合所有用戶，這幾乎不是一個巨大的批評。當(dāng)他們的瑞士軍刀不能用來挖溝時，沒有人會感到驚訝。對于Valenzuela來說，主要任務(wù)不是迎合專業(yè)人士;它正在擴大人工智能世界的邊界。

“這些技術(shù)將徹底改變我們創(chuàng)建內(nèi)容的方式，因為算法以與我們相同的方式理解文本，視頻和聲音，”他說。“如果我們把這些工具交給那些以前從未訪問過這些工具的人，他們就會開始考慮使用它們的新方法。”