導(dǎo)讀 布蘭迪斯大學(xué)和加州大學(xué)洛杉磯分校的校友Adam Cheyer擁有計算機科學(xué)和人工智能學(xué)位,對數(shù)字助理知之甚少。他曾在SRI International的人
布蘭迪斯大學(xué)和加州大學(xué)洛杉磯分校的校友Adam Cheyer擁有計算機科學(xué)和人工智能學(xué)位,對數(shù)字助理知之甚少。他曾在SRI International的人工智能中心領(lǐng)導(dǎo)了Learns and Organizations(CALO)項目的認(rèn)知助理項目,該項目旨在將尖端的機器學(xué)習(xí)技術(shù)整合到一個與平臺無關(guān)的認(rèn)知助手中。Cheyer是Siri的創(chuàng)始團隊,Siri是蘋果公司在2010年以2億美元收購的同名AI助手技術(shù)背后的創(chuàng)業(yè)公司。他共同創(chuàng)辦了Viv Labs,該公司在花了四年時間開發(fā)了一個旨在處理復(fù)雜的輔助平臺后于2016年隱身起步查詢。

三星以大約2.15億美元的價格于2016年10月收購了 Viv,并且不久之后,Cheyer及其同事要求將其創(chuàng)業(yè)公司的技術(shù)應(yīng)用于公司的Bixby助手,該助手于2017年3月與三星Galaxy S8和S8 +一起推出。-他們的勞動果實比克斯比2.0 -在2017年10月在三星的比克斯比開發(fā)者大會上首次亮相,并正式啟動對銀河注9在2018年八月。
如今,Bixby已在200多個和超過5億臺設(shè)備上銷售,其中包括三星的Family Hub 2.0冰箱,最新一代的智能電視產(chǎn)品系列,以及包括Galaxy S,Galaxy Note和中端Galaxy C在內(nèi)的智能手機和平板電腦系列。 ,J和A.(今年的某個時候,第一個內(nèi)置Bixby的智能揚聲器--Galaxy Home - 將加入俱樂部。)在功能方面,Bixby已經(jīng)學(xué)會識別成千上萬的命令并講德語,法語,語,英國英語和西班牙語。感謝最新發(fā)布的開發(fā)人員工具包--Bixby Developer Studio--它支持比以往更多的第三方應(yīng)用和服務(wù)。
但是Bixby團隊面臨著艱巨的挑戰(zhàn),也許是他們中的主要挑戰(zhàn)。市場研究公司Ovum估計,截至2018年11月,6%的人使用Bixby,而分別使用Alexa和Google智能助理的人數(shù)分別為24%和20%。為了深入了解Bixby的發(fā)展以及對未來可能發(fā)生的一瞥,VentureBeat 今天在布魯克林舉行的Bixby開發(fā)者會議之前與Cheyer進(jìn)行了交談。
這是我們討論的輕微編輯的成績單。
VentureBeat:我想更多地了解Bixby市場,Bixby即將推出的應(yīng)用程序商店。客戶可以期待什么?他們是否必須搜索Bixby應(yīng)用程序并手動添加它們,或者他們是否能夠啟動帶有觸發(fā)詞和短語的應(yīng)用程序?
Adam Cheyer: Bixby Marketplace最終將作為Galaxy Store,應(yīng)用程序商店[Galaxy手機,Samsung Gear可穿戴設(shè)備和功能手機]的一部分提供。三星致力于擁有一個可以購買應(yīng)用,觀看面孔和其他物品的地方。此外,您還可以在那里找到膠囊,而開發(fā)商在三星的高級開發(fā)計劃中提供的膠囊將有關(guān)鍵位置。但我認(rèn)為與市場互動的最酷方式將是通過Bixby本身。
您可以采取多種方法。一個是Bixby Home,這是Galaxy手機主屏幕上最左邊的儀表板。在[智能手機]上,您只需點擊Bixby按鈕并滑動即可查看各種類別的精選膠囊和其他膠囊。
您還可以通過自然語言自動發(fā)現(xiàn)Capsules。例如,如果你說“讓我乘車前往舊金山”,Bixby會回答“嗯,你現(xiàn)在沒有啟用任何rideshare供應(yīng)商,但是這里有幾個供應(yīng)商。”你會被提示嘗試[不同的選項],并決定你是喜歡一個品牌,另一個品牌,或兩者兼而有之。如果啟用多個,Bixby將默認(rèn)詢問您要使用哪個。
此外,如您所建議,您可以使用名稱或短語調(diào)用Capsules。例如,你可以說“優(yōu)步,讓我去舊金山。”
VentureBeat:對。因此,最終,開發(fā)人員能否為語音體驗收費 - 無論是膠囊本身還是膠囊功能?我想象的東西類似于亞馬遜的技能內(nèi)購買,它支持一次性購買和訂閱。
謝爾:當(dāng)然。Bixby Marketplace的第一個版本將不會出現(xiàn)我稱之為“高級膠囊”的內(nèi)容,這意味著付費應(yīng)用或訂閱應(yīng)用。但我們正在努力做到這一點,我們很快就會發(fā)布一些聲明。我們知道世界的內(nèi)容提供商需要謀生,我們絕對會支持這一點。
Transactional Capsules可以收取費用 - 我們有像Ticketmaster和1-800-Flowers這樣的供應(yīng)商,他們今天接受購買,我們努力降低商業(yè)合作伙伴的購買摩擦。如果你已經(jīng)在三星生態(tài)系統(tǒng)的任何地方保存了你的卡片,Bixby就會知道它 - 你只是說“送一些鮮花給我的媽媽”,而1-800-Flowers Capsule會說“很棒 - 你想要嗎?用普通卡付款?“
此外,我們還為Uber等合作伙伴提供OAuth支持,這些合作伙伴的用戶帳戶中存有卡片。您可以附加Bixby并為其授予帳戶訪問權(quán)限,以便您可以在這些合作伙伴的付款流程中進(jìn)行購買。
VentureBeat:您最近向Bixby添加了新語言 - 他們加入了英語,韓語和普通話。在將Bixby帶到新的領(lǐng)域時,團隊面臨的一些本地化障礙是什么?
Cheyer:我們正在努力每年推出至少五種新語言,我們可能會在未來推出這種語言。
我們相信,提供合適的工具并構(gòu)建可擴展的生態(tài)系統(tǒng)將使全世界的開發(fā)人員能夠為最終用戶創(chuàng)建出色的內(nèi)容。在全球化方面,這一點尤為重要,因為這意味著我們無需對每項服務(wù)進(jìn)行本地化。相反,我們提供了一種在每種語言中具有相同功能的平臺。
VentureBeat:關(guān)于開發(fā)者工具的問題,Bixby團隊是否研究過亞馬遜和谷歌采用的神經(jīng)聲音?我指的是深度神經(jīng)網(wǎng)絡(luò)產(chǎn)生的聲音,聽起來比上一代合成聲音更像人類。
Cheyer:我不會宣布任何尚未投入生產(chǎn)的內(nèi)容,但我會說三星不僅在文本到語音方面具有重要的能力,在語音識別方面也是如此。人工智能正在取得重大進(jìn)展,神經(jīng)網(wǎng)絡(luò)的聲音無疑是其中之一。自動語音識別(ASR)中還有很多工作要做 - 我們正在從隱馬爾可夫模型方法轉(zhuǎn)變?yōu)榧兇獾亩说蕉松窠?jīng)網(wǎng)絡(luò) - 我們看到ASR模型從云端移到邊緣設(shè)備,如手機。
我們肯定已經(jīng)意識到這一切,你可以放心,我們正在努力解決這些問題。
VentureBeat:您簡要提到了隱私。您可能已經(jīng)意識到,對于如何存儲和使用來自語音助理的錄制命令存在一些擔(dān)憂。Bixby已經(jīng)提供了一種刪除錄音的方法,但團隊會考慮引入新命令或應(yīng)用內(nèi)設(shè)置,以便更容易刪除這些數(shù)據(jù)嗎?
Cheyer:當(dāng)然 - 我們對所有這些事情持開放態(tài)度。隱私是一個重要且多方面的問題。就我個人而言,不僅僅是我的聲音用于在某處調(diào)整特定的語音識別模型。我更關(guān)心的是助理在語義層面上做了什么 - 它對我的了解以及為什么它向我展示了某些信息。
但不同的用戶會擔(dān)心不同的事情。您必須提供多種方法讓用戶控制公司擁有的數(shù)據(jù),以及他們?nèi)绾问褂眠@些數(shù)據(jù)。
需要注意的一點是,我們已經(jīng)控制了Bixby學(xué)習(xí)基礎(chǔ)平臺能力的內(nèi)容。我舉一個例子:使用Bixby,開發(fā)人員可以選擇使用機器學(xué)習(xí)來處理來自用戶的請求。如果我向比克斯比詢問波士頓的天氣情況,可能并不明顯,但我指的是“波士頓”實際上是一種偏好。大多數(shù)人會選擇馬薩諸塞州的波士頓,但居住在德克薩斯州的人可能會選擇德克薩斯州的波士頓。不得不反復(fù)指定你想要的波士頓是多么煩人,這就是為什么Bixby可以用來了解全球和本地餐館,產(chǎn)品和騎車等方面的偏好。
我們在“理解”頁面中向用戶展示了這些知識。他們會看到Bixby猜測他們上次詢問天氣時他們的意思是馬薩諸塞州的波士頓。如果他們不這樣做,他們就能夠更新它或明確表示他們不希望Bixby知道這些信息。他們總是能夠全面了解已知的內(nèi)容以及如何在非常精細(xì)的級別上使用它們。
VentureBeat:你會說這種程度的定制和個性化是Bixby的強項之一嗎?
謝耶:是的。在較高的層面上,競爭對手為開發(fā)人員提供的大多數(shù)是語音識別和語言理解,但這就是它。從那里,開發(fā)人員必須硬連線每個用例并手動編碼接下來發(fā)生的一切,無論是查詢映射服務(wù)器以確定用戶所指的“波士頓”。
Bixby是一個完全不同的平臺,每個被問到用戶的問題都經(jīng)過機器學(xué)習(xí)過程。市場上任何競爭對手都沒有其他平臺可以做到這一點。我們有一個AI工具,對于開發(fā)人員提出的每個用例,它將編寫代碼并負(fù)責(zé)組裝,調(diào)用不同的API,將信息從一個API轉(zhuǎn)換為另一個API,與用戶交互以及學(xué)習(xí)來自互動。所有這些都是免費的平臺。這種類型的學(xué)習(xí) - 我們稱之為動態(tài)程序生成 - 在隱私和安全方面有很多好處。它可以提供更豐富的體驗并節(jié)省大量的開發(fā)時間。
我認(rèn)為另一件令人興奮的關(guān)于Capsule方法的是開發(fā)人員可以在多個設(shè)備上使用相同的Capsule。他們不需要用于電視的膠囊,用于冰箱的不同膠囊,以及用于電話的第三膠囊。當(dāng)他們構(gòu)建Capsule時,Capsule是支持所有語言和所有設(shè)備的Capsule。我們有這個新的Bixby Views系統(tǒng),它是公開可用的,因此開發(fā)人員可以使用最豐富的組件調(diào)色板構(gòu)建多模式圖形體驗。并且還有自動轉(zhuǎn)換功能,這樣未經(jīng)修改的膠囊就可以在手表這么小的東西上運行,就像The Wall TV一樣大,以及介于兩者之間的所有東西。
大多數(shù)其他助手的主要用途是與這些助手一起開箱即用的內(nèi)置服務(wù)。盡管第三方創(chuàng)建了數(shù)以萬計的技能或行動,但由于各種原因,第三方開發(fā)人員的使用率很低。
我們與Bixby一起致力于為第三方開發(fā)商提供盡可能多的能力和重點。這確實是我們獲勝的長期計劃 - 擁有一個充滿活力的生態(tài)系統(tǒng),其中大部分業(yè)務(wù)和大部分用戶流量都流向第三方。
VentureBeat:三星最近宣布了Bixby Routines,它學(xué)會了搶先推出應(yīng)用程序和設(shè)置的習(xí)慣。您是否有任何更新可以分享Routines或任何其他可能很快就會出現(xiàn)在Bixby上的預(yù)測功能?
Cheyer:三星不僅收購了Viv Labs的技術(shù),還收購了SmartThings [2014年8月],而SmartThings所做的一件事就是它通過SmartThings Cloud管理復(fù)雜的例程。所以已經(jīng)存在,并且我認(rèn)為Bixby和SmartThings之間的現(xiàn)有集成將會持續(xù)增強 - 這是需要尋找的東西。
Bixby框架中的單個用例(例如預(yù)訂航班)被分解為大約60個不同的自動生成的步驟,這些步驟以交互方式執(zhí)行。如果您考慮Routines,它只是將不同的步驟一起改變 - 基礎(chǔ)技術(shù)已經(jīng)在Capsule開發(fā)中使用。請求仍然主要是Capsule特有的,因此跨封裝功能有限。一旦我們在自然語言方面打開它,執(zhí)行和動態(tài)程序生成功能就已經(jīng)存在。
VentureBeat:公平地說,助手的關(guān)鍵吸引力在于他們?nèi)绾螣o縫地命令家用設(shè)備。我很想知道Bixby團隊如何考慮第三方設(shè)備集成,以及他們投入時間和資源以使這些交互更強大的領(lǐng)域。
Cheyer:對我而言,Bixby今年的一個重大宣告將是設(shè)備足跡。去年,Bixby 2.0出現(xiàn)在一部手機上,但三星正積極致力于將新的Bixby向至少一個Bixby按鈕的每個智能手機向后移動,有些甚至沒有Bixby按鈕。因此,擁有Bixby的設(shè)備數(shù)量將在手機尺寸上顯著增加。三星今天也開始在家庭中心冰箱,智能電視以及未來的Galaxy Home揚聲器上運送Bixby,而且還有很多很多設(shè)備我都不會談?wù)摻衲甑腂ixby。
我想當(dāng)你回顧今年年底時,你會看到Bixby幾乎到處都是。如你所知,三星擁有大約10億臺設(shè)備的設(shè)備,該公司有記錄稱,到2020年,他們銷售的所有設(shè)備都將連接起來。他們投入巨資使Bixby成為無處不在的控制界面。
VentureBeat:談到無處不在,我們是否可以期待在不久的將來在第三方設(shè)備上看到Bixby?開發(fā)商和制造商最終能否將Bixby添加到他們的設(shè)備中?
Cheyer: 當(dāng)三星收購Viv時,這對我來說非常重要。我們一直致力于將助手作為網(wǎng)絡(luò)和移動設(shè)備的重要生態(tài)系統(tǒng) - 一旦您擁有蓬勃發(fā)展的生態(tài)系統(tǒng)并且企業(yè)支持它,助理就不僅僅是設(shè)備功能。您希望在世界上的每個設(shè)備上獲得它以驅(qū)動更多請求并允許用戶從其規(guī)模中受益。
三星向我承諾并公開承諾在非三星設(shè)備上運送Bixby。今年,我們的工作將集中在數(shù)百萬臺三星設(shè)備上,并為第三方開發(fā)商開辟市場。明年或很快,我們的意圖絕對是打開Bixby到非三星設(shè)備。