最近,“视频电商”一词的热度直线飙升,一边是阿里与优酷土豆战略发布视频电商,称未来可以实现“边看边买”;另一边是京东联合爱奇艺《爱上超模》推情境营销。对此,业内称视频电商时代已经到来。

所谓的“边看边买”,就是通过技术手段在视频中嵌入电商元素,用户在观看视频时,可以随时购买视频场景中的物品。这个看似简单的功能,要实现却不是易事。其中一大难关就是快速、规模化的视频图像精准识别。

对此,智能视频探索平台Viscovery 创始人黄俊杰表示,通过视频识别技术的应用,Viscovery可以辨识视频、物件、场景、人、动作等,对商品识别可以精确到商品的品牌,准确率在8 成以上。

可以看懂视频的技术

Viscovery 团队来自台湾,但公司注册在新加坡。目前在新加坡、台北、北京、上海均有办公室(总公司在上海)。“中国是一个很大的市场,我们想更贴近我们的客户,为他们提供即时有效的服务。”黄俊杰表示。

从2010 年开始,Viscovery 团队做静态图像识别技术的研发。在2013 年至2014 年,Viscovery团队认为只做到图片识别还远远不够,要更深一步去挖掘视频内容的检索与分析。

视频识别中牵扯到很多技术,包括图像、语音、人脸、场景识别。虽然现在做视频识别的平台很多,但大部分只能做到物件分类,例如识别视频中的东西是手表还是戒指,而不能更精确到品牌、颜色。

黄俊杰介绍,Viscovery 拥有亿级图像存储及资料库能力及1200 万件商品完整信息资料库,可以辨识视频、物件、场景、人、动作等,对商品识别可以精确到商品的品牌,做到1:1 的识别速度,准确率在8 成以上。

与Google 等做识别的公司不同,Viscovery 不会识别例如狗、路灯等物件,只做有商业价值的商品识别。“因为这些可以直接产生利润,目前可覆盖30 大类主流商品。”黄俊杰说。

此外,Viscovery 还有自己的技术专利。其专利技术FITAMOS, 扩大了多模态识别的广度:人脸、图片/ 商标、文字、声音/ 对话、动作、物件、场景,能够智能识别唱歌内容、任务动作、字幕、场景中人物互动更精确的元素,全方位覆盖视频中七大标的。

“在演算某些物件的时候,会使用我们的专利演算,来提升识别的准确度和效率,为客户提供更好的服务。”Viscovery 市场总监陈晔补充道。

不只是应用于电商

借着互联网东风,中国视频业这些年发展迅猛,市场已达百亿。虽累积了海量用户,黄金流量难以规模化变现。Google Adsense 谷歌广告联盟给了这道难题一个启发,通过搜索词接入适配广告,让网站流量变现。黄俊杰表示,Viscovery 的目标则是做视频界的Adsense,通过大数据挖掘,自动解析视频画面内容,实现广告精准匹配、视频内容社交、黄暴信息监测等多方位应用。目前,正与国内TOP 级视频网站、DSP、直播平台洽谈合作,已有合作伙伴包括搜狐视频、品友互动、VPON、爱闹直播、8sian 等。

除了通过智能视频探索平台(VDS)识别,机器自动匹配相似品牌,实现边看边买,Viscovery的技术还可以应用于视频搜索、盗版及內容监测、视频大数据分析等。

“根据专利技术FITAMOS 分析,Viscovery 可以自动辨识上传视频中的人脸、声音、物件、动作、文字、图像、场景七种标的,查找具有该内容的视频。同时,Viscovery 还可以实现双屏互动,即识别视频后,让关联内容出现在第二屏。”陈晔说。

此外,VDS 提供视频大数据的全智能辨识,可以对违法信息进行监控。例如对视频直播平台,VDS 可以准确识别直播内容中的色情、暴力、违禁品等信息。通过对直播画面每一帧的精准切割分析,由VDS filter 过滤模组自动将违规内容进行屏蔽,带来真正智能高效的监测服务。

不过,VDS 智能视频探索平台所做的并非完全商业化的产品,更多的是广告和信息如何有效的进行转换。比如用户在观看视频时,喜欢上某一个场景或景点,以往要知道这个景点的信息,通常采用的方法是使用关键字搜索,而现在只需要图像识别技术,用户便能够快速链接到相关的信息或是电商平台,也帮助企业实现了精准投放。

2015 年上半年,Viscovery 获得了由软银中国、起点创业营、汉鼎亚太合投的450 万美元。黄俊杰透露,Viscovery 会将所有的资源全部用于技术研发方面。“这是一个极具挑战的技术,需要积累技术、资料及经验。这个技术本身的商业价值不用怀疑,Viscovery 会专心将技术做到最好,让合作伙伴无后顾之忧的去进行各种不同商业模式的应用。”

作者:离婙

来源:《东方财经》杂志