最近,“影音電商”一詞的熱度直線飆升,一邊是阿裡與優酷土豆戰略發佈影音電商,稱未來可以實現“邊看邊買”;另一邊是京東聯合愛奇藝《愛上超模》推情境行銷。對此,業內稱影音電商時代已經到來。

所謂的“邊看邊買”,就是通過技術手段在影音中嵌入電商元素,使用者在觀看影音時,可以隨時購買影音場景中的物品。這個看似簡單的功能,要實現卻不是易事。其中一大難關就是快速、規模化的影音圖像精准識別。

對此,智慧影音探索平臺Viscovery 創始人黃俊傑表示,通過影音識別技術的應用,Viscovery可以辨識影音、物件、場景、人、動作等,對商品識別可以精確到商品的品牌,準確率在8 成以上。

可以看懂影音的技術

Viscovery 團隊來自臺灣,但公司註冊在新加坡。目前在新加坡、臺北、北京、上海均有辦公室(總公司在上海)。“中國是一個很大的市場,我們想更貼近我們的客戶,為他們提供即時有效的服務。”黃俊傑表示。

從2010 年開始,Viscovery 團隊做靜態圖像識別技術的研發。在2013 年至2014 年,Viscovery團隊認為只做到圖片識別還遠遠不夠,要更深一步去挖掘影音內容的檢索與分析。

影音識別中牽扯到很多技術,包括圖像、語音、人臉、場景識別。雖然現在做影音識別的平臺很多,但大部分只能做到物件分類,例如識別影音中的東西是手錶還是戒指,而不能更精確到品牌、顏色。

黃俊傑介紹,Viscovery 擁有億級圖像存儲及資料庫能力及1200 萬件商品完整資訊資料庫,可以辨識影音、物件、場景、人、動作等,對商品識別可以精確到商品的品牌,做到1:1 的識別速度,準確率在8 成以上。

與Google 等做識別的公司不同,Viscovery 不會識別例如狗、路燈等物件,只做有商業價值的商品識別。“因為這些可以直接產生利潤,目前可覆蓋30 大類主流商品。”黃俊傑說。

此外,Viscovery 還有自己的技術專利。其專利技術FITAMOS, 擴大了多模態識別的廣度:人臉、圖片/ 商標、文字、聲音/ 對話、動作、物件、場景,能夠智慧識別唱歌內容、任務動作、字幕、場景中人物互動更精確的元素,全方位覆蓋影音中七大標的。

“在演算某些物件的時候,會使用我們的專利演算,來提升識別的準確度和效率,為客戶提供更好的服務。”Viscovery 市場總監陳曄補充道。

不只是應用于電商

借著互聯網東風,中國影音業這些年發展迅猛,市場已達百億。雖累積了海量使用者,黃金流量難以規模化變現。Google Adsense 穀歌廣告聯盟給了這道難題一個啟發,通過搜索詞接入適配廣告,讓網站流量變現。黃俊傑表示,Viscovery 的目標則是做影音界的Adsense,通過大資料採擷,自動解析影音畫面內容,實現廣告精准匹配、影音內容社交、黃暴資訊監測等多方位應用。目前,正與國內TOP 級影音網站、DSP、直播平臺洽談合作,已有合作夥伴包括搜狐影音、品友互動、VPON、愛鬧直播、8sian 等。

除了通過智慧影音探索平臺(VDS)識別,機器自動匹配相似品牌,實現邊看邊買,Viscovery的技術還可以應用於影音搜索、盜版及內容監測、影音大資料分析等。

“根據專利技術FITAMOS 分析,Viscovery 可以自動辨識上傳影音中的人臉、聲音、物件、動作、文字、圖像、場景七種標的,查找具有該內容的影音。同時,Viscovery 還可以實現雙屏互動,即識別影音後,讓關聯內容出現在第二屏。”陳曄說。

此外,VDS 提供影音大資料的全智慧辨識,可以對違法資訊進行監控。例如對影音直播平臺,VDS 可以準確識別直播內容中的色情、暴力、違禁品等資訊。通過對直播畫面每一幀的精准切割分析,由VDS filter 過濾模組自動將違規內容進行遮罩,帶來真正智慧高效的監測服務。

不過,VDS 智慧影音探索平臺所做的並非完全商業化的產品,更多的是廣告和資訊如何有效的進行轉換。比如用戶在觀看影音時,喜歡上某一個場景或景點,以往要知道這個景點的資訊,通常採用的方法是使用關鍵字搜索,而現在只需要圖像識別技術,使用者便能夠快速連結到相關的資訊或是電商平臺,也幫助企業實現了精准投放。

2015 年上半年,Viscovery 獲得了由軟銀中國、起點創業營、漢鼎亞太合投的450 萬美元。黃俊傑透露,Viscovery 會將所有的資源全部用於技術研發方面。“這是一個極具挑戰的技術,需要積累技術、資料及經驗。這個技術本身的商業價值不用懷疑,Viscovery 會專心將技術做到最好,讓合作夥伴無後顧之憂的去進行各種不同商業模式的應用。”

作者:離婙

來源:《東方財經》雜誌