您的位置:首頁>手機>正文

專訪三角獸技術合夥人陳華榮:能搜索“主角一開始就死了的電影”,小米電視怎麼做到的?

雷鋒網按:雷鋒網正在啟動“新智造成長榜2017”評選活動,我們將對人工智慧與機器人行業進行大規模報導、梳理和調研,並聯合數十家著名投資機構根據這些創新公司的技術實力、商業能力和成長性進行深度評選,最終從多個領域分別選出一些極具潛力成長性的創新公司。如果你想參與我們的評選,可點擊「

報名

」連結,或通過郵箱xinzhizao@leiphone.com聯繫我們!

上個月,小米發佈了一款新電視——小米電視4A。這次發佈會距離小米電視4的發佈僅過去了2個月。小米電視4A的發佈有個小背景,從去年下半年開始,因為原材料價格的大幅上漲,2月份,小米電視3s已經漲價了500-600元,剛發佈的小米電視4雖然還未上市銷售,但4.9mm的厚度以及超窄的邊框,註定了它在價格上不是一個“小米式”的產品。

小米電視4A被稱作回歸高性價比之作,不過同時,王川也給這款電視帶來了一個新特性——人工智慧,這是“小米首款人工智慧語音電視”。發佈會上,王川的演示獲得了全場掌聲,尤其是他說出諸如“小岳岳追車的畫面”、“鄧超和張天愛第一次見面的場景”的指令,小米電視4A準確跳到相應畫面時。

這些讓人驚歎的智慧背後,需要語音辨識以及自然語言處理的支援,三角獸正是為小米電視提供語義理解技術的公司。日前,雷鋒網採訪了具體負責這個項目的三角獸技術合夥人陳華榮,聊了聊他的職業經歷,小米電視4A的人工智慧背後的秘密,以及語義理解在垂直領域的商業化應用。

三角獸技術合夥人陳華榮

陳華榮:從Bing的Answer系統到三角獸的聊天機器人

2005年,在中科院軟體所獲得電腦軟體與理論專業碩士後,陳華榮就加入了微軟,並先後在北京和微軟西雅圖總部工作。2013年,他回到了北京,在Bing部門負責中日韓的Answer系統。所謂Answer系統,即向使用者提供結構化的顯示結果,使用者不用離開搜尋引擎,就能獲取到需要的資訊。

如上圖,當你搜索《羋月傳》時,第一條搜索結果會直接出現這部電視劇的資訊、海報、簡介和每一集的視頻連結,而且來源於兩個不同的視頻網站。百度和Google也有類似的系統,它們通常以卡片的形式向使用者展示。

Answer系統和普通搜索結果的最大區別,是它力求準確而不是關鍵字的相關性。陳華榮向雷鋒網解釋,這主要依靠工程師對資料整理的準確性。對結構化的資料,如電視劇評分,系統會直接抓取,而對於半結構化和非結構化的資料,則需要先抓取下來,再做語義分析,然後以結構化的方式呈現給使用者。對於視頻類資訊,系統則通過接入API的方式,直接把視頻網站的資料呈現出來。

這個工作和三角獸目前專注的語義分析其實是匹配的。而在微軟這樣的大公司,即使有小冰、Cortana這樣的產品,它們的一切也要圍繞微軟的戰略進行,這是最讓陳華榮感到掣肘的地方。所以,在2016年,當三角獸的CTO,也是陳華榮在微軟的同事亓超找來時,他毫不猶豫地加入了後者。

讓自然語言理解的服務應用到更多領域,打造一個語義理解的大腦,是三角獸的願景。現在,三角獸專注的領域之一,任務驅動的多輪對話是陳華榮負責的重要工作。所謂任務驅動的多輪對話,即使用者帶著明確的目的來,通過自然語言的對話模式,快速解決自己的問題,如訂餐、看電影等。

多輪對話的目的,是因為和人類正常的聊天一樣,單獨一句話通常不能明確表達需求,這就需要系統通過反問、反復確認來一步步明確用戶的需求,並返回結果。這已經超越了簡單的語義理解加資訊檢索的過程,而是一個在對話過程中不斷明確需求的決策過程。這也是聊天機器人解決實際問題的基礎。

模糊語義識別:你把電視劇名字記錯了,我依然能給出正確的結果

陳華榮告訴雷鋒網,三角獸此次為小米電視4A準備了一整套的語義理解方案,而小米根據自身的產品需求和排期,主要選擇了模糊語義理解和視頻問答兩個部分。

所謂模糊語義識別,即在用戶輸入模糊的、不準確甚至錯誤的資訊時,依然能給出正確的搜索結果。因為小米電視使用了語音作為對話模式,輸入時,用戶的語調不同,就有可能出現錯誤資訊,另外,當使用者記憶不清時,也經常會給出錯誤的搜索詞。

陳華榮舉了個例子,前段時間有一個很火的電視劇叫《老公們的私房錢》,而用戶則可能錯記為《男人們的私房錢》。這個時候,三角獸的技術就可以返回正確的結果。

對於模糊語義識別的實現過程,陳華榮介紹,三角獸在視頻這個領域建立了語義糾錯的語言模型,會處理字形像(半 -羋)、模糊音(肖生克 - 肖申克)、同音不同字(路遙知馬力 - 陸垚知馬俐)、語義相近(男人們 - 老公們)等等的問題。在該模型的基礎上三角獸做了特別的處理去做索引建庫。

當用戶的查詢(query)過來後,經過糾錯模型去作特別的處理後,再到資料庫中儘量地召回相關的視頻;之後,排序(Rank)模型的特徵在糾錯模型的基礎上,結合大資料採擷的資訊,如熱度、評分等等,對結果進行重排序,從而把使用者想要找的視頻正確的檢索出來和進行了語義上的糾錯。這也是三角獸可以把“男人們的私房錢”糾正為“老公們的私房錢”,“肖生克救贖”糾正為“肖申克的救贖”的原因。

視頻問答:剪刀手愛德華的男主角還演過什麼電影?

視頻問答系統,可以看成是影視百科,包含視頻簡介、演員百科、劇中的角色、該演員還演過什麼電影等各種資訊。這樣,當使用者用語音詢問諸如“剪刀手愛德華的男主角”時,系統就能給出正確的答案。

不過,問答系統的功能遠不止於此。發佈會上,小米也做了很多展示,某些時候,它甚至超出你的想像。比如,“剪刀手愛德華的男主角還演過什麼電影?”、“《肖申克的救贖》是哪一天獲得的奧斯卡獎?”“小李子什麼時候拿過奧斯卡金像獎?”等,問答系統都能給出答案。

而陳華榮告訴雷鋒網,這些其實是很成熟的技術。首先,對這些語句進行理解並不困難,整個實現過程最大的難點,在於資料的提煉,也就是說,要將影視劇的各種資訊提取出來,並提煉出各種標籤,然後通過檢索、排序,匹配用戶的需求。

 和問答系統實現過程類似的是電影搜索,唯一的不同是對使用者的指令進行語義理解後,不是直接返回答案,而是到資料庫裡去檢索相關的電影,並作重排序返回結果。這個功能的實用性更高,比如你甚至可以直接讓電視找出“只有一個人出演的電影”、“主角一開始就死了的電影”等。

 (網路上散步著大量諸如“主角一開場就死了的電影”的資訊,需要系統先抓取,再進行語義分析和資訊提煉)

現在,對於影視劇資訊,打標籤的大部分工作已經可以做到自動化。系統首先從影視劇的官方網站、豆瓣、貼吧、各種評論中抓取資訊,再對這些資訊進行挖掘,自動提煉資訊。另外,對一些知名度高的頭部內容,三角獸也會用人工的方法進行標注,匹配用戶更多樣化的自然語言搜尋需求。

陳華榮還告訴雷鋒網,未來,三角獸還將與小米電視在多輪對話方面展開合作,以對話的方式,更準確地匹配用戶更加個性化的需求。

例如,當使用者發出指令,“我要看《天龍八部》”時,系統會返回非常多的結果,為了更好地理解使用者,多輪對話系統會主動詢問“您要看電視劇還是電影?”如果使用者選擇了電視劇,系統可能會再次詢問使用者要看什麼版本,直到給出用戶滿意的結果。

進行多輪對話時,自然語言處理系統的關鍵一步是對對話狀態的追蹤,即根據多輪的對話來確定使用者當前的目標到底是什麼的過程。在這個過程中,系統要確認是講當前的狀態與前一個狀態是衝突的,還是要將兩個狀態進行合併。舉個簡單的例子,用戶想看劉德華的電影,但是對搜索結果不太滿意,他就可能轉換目的,“張學友的電影”,這個時候,系統已經按照兩個狀態衝突來進行處理,在結果中呈現張學友主演的電影;但是,如果用戶說了“和張學友的電影”,系統就會把兩個狀態進行合併,呈現劉德華和張學友一起演的電影。

所以,在智慧電視的應用上,對影視資料的更精細化的提煉,以及對上下文的準確理解,是語義理解當前的一個難點。小米電視的應用,已經是一個開始。

語義理解大有“錢景”:智慧客服、商場導購、車載系統、機器人、音樂……

除了任務驅動的多輪對話系統,三角獸的專注的另一個領域是開放域聊天。和要解決使用者具體需求的多輪對話系統不同,開放域聊天指系統能對使用者的任何問題給出回應,它的目的更多的是建立情感聯繫,拉近和用戶的距離。

在陳華榮看來,未來,開放域聊天會成為多輪對話的標配,沒有前者,系統會顯得呆板、機械,也很難給人智慧的感覺。而開放域聊天和多輪對話、智慧問答在一起,可以在很多領域有很好的應用。現在,三角獸已經在幾個領域有了應用:

金融領域:恒生電子

三角獸為這家給證券、銀行、基金、期貨等提供技術支援的企業開發了客服機器人系統,為使用者解決開戶,股票、基金投資資訊等服務。

三角獸的客服系統的優勢在於語義理解系統,可以分析非常多樣的用戶提問,理解用戶的真實意圖,然後對應企業問答庫中的答案。

零售領域:香港新世界

三角獸提供了智慧問答和多輪對話系統。比如在商場中,系統會推薦熱門的餐廳,也會在用戶提問時,通過進一步的引導,來明確用戶想要吃中餐、西餐,或者一人食還是聚餐的需求。

目前,該服務主要通過微信公眾號提供。系統還集成了開放域聊天技術,用戶也可以進行閒聊。

媒體領域:光明網

兩會期間,三角獸為光明網的“小明AI兩會”提供了技術支援(詳見

雷鋒網之前的報導

),分析了 40 多萬篇有關媒體報導和官方報告對其進行訓練,從29萬個詞彙中挖掘出近5000 個與兩會相關的關鍵字,並據此整理出針對每一位元代表委員的個性化報導。

車載環境:威馬汽車

主要是威馬汽車車載前裝音樂和導航模組。在陳華榮看來,車載環境是語義理解應用非常好的垂直領域。因為這個環境裡比較封閉,用戶的需求無外乎導航、尋找附近的銀行、餐廳,打電話等。

2015年,有一款叫Vinci的所謂智慧頭機的產品,吸引了很多關注,但也引來了不少非議。現在,Vinci已經轉而主打語音交互,其背後的語義理解技術,同樣由三角獸提供。陳華榮還透露,三角獸正在與另一家大公司合作,更深入地進入音樂和智慧音箱行業。

未來,讓銀行網點中不再需要櫃檯人員,以及對老人、小孩進行情感陪護,抑或通過IoT設備,通過自然語言的方式控制各種傢俱設備,都是三角獸的目標。

喜欢就按个赞吧!!!
点击关闭提示