為什么公司想用你的聲音挖掘秘密

V oicesense向客戶做出了一個(gè)有趣的承諾：給我們一個(gè)人的聲音，我們會(huì)告訴你他們會(huì)做什么。以色列公司在通話期間使用實(shí)時(shí)語音分析來評(píng)估某人是否可能違約銀行貸款，購買更昂貴的產(chǎn)品，或成為最佳的工作候選人。

它是尋找我們演講中所包含的個(gè)人見解的眾多公司之一。近年來，研究人員和初創(chuàng)公司已經(jīng)注意到可以從語音中挖掘的豐富信息，尤其是像亞馬遜的Alexa這樣的家庭助理的普及使得消費(fèi)者越來越習(xí)慣于與他們的設(shè)備交談。根據(jù)商業(yè)分析公司IdTechEx的報(bào)告，語音技術(shù)市場正在增長，預(yù)計(jì)到2029年將達(dá)到155億美元。“幾乎所有人都在談?wù)摬⑶矣写罅康脑O(shè)備可以捕捉語音，無論是你的手機(jī)還是像Alexa和Google Home這樣的東西，” Satrajit Ghosh說道。麻省理工學(xué)院麥戈文腦研究中心的研究科學(xué)家，有興趣為心理健康目的開發(fā)語音分析。“聲音在生活中變得無處不在。”

聲音不僅無處不在; 它非常個(gè)人化，很難假裝 - 想想前Theranos首席執(zhí)行官伊麗莎白·霍姆斯(Elizabeth Holmes)錯(cuò)誤的聲音所帶來的懷疑- 并且出現(xiàn)在我們最私密的環(huán)境中。人們在家中與Alexa(錯(cuò)誤地記錄了對(duì)話)交談，數(shù)字語音助理越來越多地用于醫(yī)院。語音雜志應(yīng)用程序，如馬斯洛依靠用戶坦率地談?wù)撍麄兊膯栴}。到目前為止，很多人都知道推文和Instagram帖子會(huì)受到監(jiān)控，但更少考慮我們的聲音作為另一種形式的數(shù)據(jù)，可以告訴我們自己并將我們帶給別人。所有這些都導(dǎo)致了關(guān)于這些信息如何豐富我們生活的激動(dòng)人心的研究，以及關(guān)于這些見解的準(zhǔn)確性以及如何使用它們的隱私問題。

?他關(guān)鍵語音分析的研究是不是有人說，但是他們怎么說：音調(diào)，速度，重點(diǎn)，停頓。技巧是機(jī)器學(xué)習(xí)。從兩組中挑選標(biāo)記樣本 - 例如，焦慮的人與沒有的人 - 并將數(shù)據(jù)提供給算法。然后，該算法學(xué)會(huì)獲取可能表明某人是否屬于A組或B組的微妙說話符號(hào)，并且它可以在將來對(duì)新樣本執(zhí)行相同操作。

Carnegie Mellon大學(xué)的計(jì)算機(jī)科學(xué)家Louis-Philippe Morency表示，結(jié)果有時(shí)可能違反直覺，他建立了一個(gè)名為SimSensei的項(xiàng)目，可以幫助用語音檢測抑郁癥。他說，在一些試圖將聲音特征與再次嘗試自殺的可能性相匹配的早期研究中，Morency的研究小組發(fā)現(xiàn)，聲音柔和，氣喘的人，而不是那些有緊張或憤怒聲音的人，更有可能重新嘗試。然而，這項(xiàng)研究是初步的，而且鏈接通常不那么簡單。通常，贈(zèng)品是一組復(fù)雜的功能和說話模式，只有算法可以接受。

盡管如此，研究人員已經(jīng)建立了使用聲音來幫助識(shí)別從帕金森病到創(chuàng)傷后應(yīng)激障礙的所有算法。對(duì)于許多人來說，這項(xiàng)技術(shù)的最大承諾在于語音分析和心理健康的交叉，并希望創(chuàng)建一種簡單的方法來監(jiān)控和幫助那些有復(fù)發(fā)風(fēng)險(xiǎn)的人。

患有精神健康狀況的人在醫(yī)院時(shí)會(huì)受到密切監(jiān)控，但“精神健康狀況的很多事情發(fā)生在一個(gè)人的日常生活中”，David Ahern說。，誰負(fù)責(zé)布萊根婦女醫(yī)院的數(shù)字行為健康計(jì)劃。他說，在監(jiān)督環(huán)境之外，日常生活可以緩慢而巧妙地穿著人。在這種情況下，一旦被診斷患有抑郁癥的人可能甚至沒有意識(shí)到他們再次感到沮喪。“當(dāng)人們與任何一種衛(wèi)生系統(tǒng)無關(guān)時(shí)，就會(huì)發(fā)生這些事件。如果情況變得更糟，有人在急診室尋求治療，使用中西部的表情，小馬已經(jīng)離開了谷倉，“埃亨說。“在口袋里放置一個(gè)能夠監(jiān)控相關(guān)行為活動(dòng)的傳感器的想法在概念上非常強(qiáng)大。它可能是一個(gè)預(yù)警系統(tǒng)。“

Ahern是CompanionMx臨床試驗(yàn)的首席研究員，CompanionMx是一種精神健康監(jiān)測系統(tǒng)，于12月推出。(CompanionMx目前僅適用于醫(yī)生和患者。其他創(chuàng)業(yè)公司，如Sonde Health和Ellipsis Health，也有類似的目標(biāo)。)患者使用該應(yīng)用程序記錄音頻日記。該程序分析這些日記以及呼叫日志和位置等元數(shù)據(jù)，以確定患者如何評(píng)分四個(gè)因素 - 抑郁情緒，興趣減少，避免和疲勞 - 并跟蹤隨時(shí)間的變化。此信息受聯(lián)邦隱私法HIPAA保護(hù)，與患者共享，并在儀表板中提供給希望密切關(guān)注患者行為的醫(yī)生。

根據(jù)CompanionMx首席執(zhí)行官Sub Datta的說法，該公司已經(jīng)對(duì)該產(chǎn)品進(jìn)行了7年的測試，并且有超過1,500名患者。該產(chǎn)品由另一家名為Cogito的語音分析公司分拆出來，已獲得DARPA和國立精神衛(wèi)生研究所的資助。發(fā)表在“醫(yī)學(xué)互聯(lián)網(wǎng)研究雜志”上的結(jié)果表明，該技術(shù)可以預(yù)測抑郁癥和創(chuàng)傷后應(yīng)激障礙的癥狀，但需要進(jìn)一步驗(yàn)證。

根據(jù)Datta的說法，在試點(diǎn)研究中，95%的患者每周至少留下一次音頻日記，臨床醫(yī)生每天至少進(jìn)入一次儀表板。這些數(shù)字很有希望，盡管埃亨指出，關(guān)于哪個(gè)組件最有幫助仍然存在很多問題。它是應(yīng)用程序本身嗎?反饋?儀表板?組合?研究仍在繼續(xù)，其他結(jié)果尚未公布。CompanionMx計(jì)劃與醫(yī)療保健組織合作，并正在尋找退伍軍人事務(wù)部的機(jī)會(huì)。

中號(hào) eanwhile，服務(wù)，如Voicesense，CallMiner，RankMiner和CompanionMx的一次性母公司Cogito承諾在業(yè)務(wù)環(huán)境中使用語音分析。大多數(shù)時(shí)候，這意味著改善呼叫中心的客戶服務(wù)參與度，但Voicesense有更大的夢想。“今天我們能夠產(chǎn)生完整的個(gè)性檔案，”首席執(zhí)行官Yoav Degani說道。他的計(jì)劃不僅僅是滿足心懷不滿的顧客。他的公司對(duì)一切感興趣：貸款違約預(yù)測，保險(xiǎn)索賠預(yù)測，揭示客戶的投資風(fēng)格，人力資源的內(nèi)部候選人評(píng)估，評(píng)估員工是否可能離開。“我們百分之百的時(shí)間都不正確，但我們在正確的時(shí)間里是非常正確的，”Degani說。“我們可以提供關(guān)于健康行為，工作行為，娛樂等的預(yù)測。”

在Degani分享的一個(gè)案例研究中，Voicesense在一家大型歐洲銀行測試了其技術(shù)。該銀行提供了幾千名債務(wù)人的語音樣本。(該銀行已經(jīng)知道誰曾經(jīng)且沒有拖欠他們的貸款。)Voicesense在這些樣本上運(yùn)行其算法，并將記錄分為低，中，高風(fēng)險(xiǎn)。在一項(xiàng)此類分析中，6%的預(yù)測“低風(fēng)險(xiǎn)”人員違約，相比之下，Voicesense認(rèn)為高風(fēng)險(xiǎn)的人群占27%。在另一項(xiàng)評(píng)估臨時(shí)員工離職概率的評(píng)估中，13%的算法歸類為“低風(fēng)險(xiǎn)”，而高風(fēng)險(xiǎn)組則為39%。

麻省理工學(xué)院的科學(xué)家Ghosh說，這些都是合理的應(yīng)用。沒有什么能像他一樣跳出紅旗。但與任何預(yù)測技術(shù)一樣，如果分析效果不佳，很容易過度概括。“總的來說，直到我看到證據(jù)證明某些事情已經(jīng)在X號(hào)人群和這種多樣化的人口中得到驗(yàn)證，我才會(huì)非常難以將某人的主張視為理所當(dāng)然，”他說。“語音特征可能會(huì)有很大差異，除非你有足夠的樣本，這就是為什么我們不要做出非常強(qiáng)烈的主張。”

對(duì)于他來說，Degani說Voicesense語音處理算法每秒測量200多個(gè)參數(shù)，并且可以在許多不同的語言上準(zhǔn)確，包括像普通話這樣的音調(diào)語言。該計(jì)劃仍處于試點(diǎn)階段，但該公司與大型銀行以及其他投資者保持聯(lián)系。“每個(gè)人都對(duì)這種技術(shù)的潛力著迷。”

ç ustomer服務(wù)是一回事，但羅伯特D'奧維迪奧，在Drexel大學(xué)的犯罪學(xué)教授，關(guān)注的是，一些應(yīng)用程序是Voicesense設(shè)想可能是歧視。想象一下，他打電話給一家抵押貸款公司，并且他們用你的聲音來確定你患心臟病的風(fēng)險(xiǎn)更高，然后你被認(rèn)為風(fēng)險(xiǎn)更高，因?yàn)槟憧赡懿粫?huì)長時(shí)間待在身邊。“我真的認(rèn)為我們將制定消費(fèi)者保護(hù)立法，以防止收集這些，”D'Ovidio補(bǔ)充說。

華盛頓大學(xué)法學(xué)院教授瑞安·卡洛指出，存在這樣的一些消費(fèi)者保護(hù)措施。語音被認(rèn)為是一種生物識(shí)別措施，而像伊利諾伊州這樣的一些州已經(jīng)制定了保證生物識(shí)別安全的法律。Calo補(bǔ)充說，與種族或性別等敏感類別相關(guān)的偏見問題是機(jī)器學(xué)習(xí)技術(shù)的特有問題，無論這些技術(shù)是用于語音分析還是查看簡歷。但是，當(dāng)這些機(jī)器學(xué)習(xí)方法用于面部或語音識(shí)別時(shí)，人們會(huì)感到內(nèi)心不安，部分原因是這些特征是如此個(gè)性化。雖然確實(shí)存在反歧視法律，但圍繞語音分析的許多問題涉及更廣泛的問題，即何時(shí)可以使用信息以及什么構(gòu)成歧視，這是我們作為一個(gè)社會(huì)沒有充分努力解決的概念。

D'Ovidio說：“我希望在我們前進(jìn)的過程中，我們認(rèn)識(shí)到這只是數(shù)據(jù)，無論它采用何種形式，就像在電子表格或聲紋中輸入的一堆數(shù)字一樣。” 他補(bǔ)充說，至少，我們應(yīng)該要求在使用這樣的東西時(shí)告訴我們。“我希望看到在保護(hù)消費(fèi)者方面正在進(jìn)行監(jiān)管的運(yùn)動(dòng)，”他說。“當(dāng)算法出錯(cuò)時(shí)會(huì)發(fā)生什么?”