当AI遇见海量视频,IBM用20秒打开新时代之门

作者: 张?? 2018-06-13 19:36:58

前言:

如何从接近 6 万小时的视频中找出属于某个人的精彩 1 分钟?

6 万小时什么概念?那是 66 年零 7 个月。

在这接近人一生长度的视频中,恐怕即便是亲身经历者也很难快速给你答案。而在视频工业迅速崛起的当下,观众可等不了太久。

当一个新人在某场体育比赛中崭露头角,观众们想要在比赛结束后就立刻了解到他的过去以及他的成长。但显然,在传统技术条件下,这是不可能的。

面对浩如烟海的视频资料,即便是最资深的编辑使用***大的非线性编辑软件和高性能的硬件;在面对整理个人生平和精彩瞬间这样的任务需求时,编辑通常也需要付出数小时甚至数天的时间。而且由于时间和精力的限制,其间的遗漏更是在所难免。

面对越来越无法等待的观众,传统的视频制作方只能大规模的增加视频编辑数量,以期提升视频整理和制作的速度。

但随着视频素材的不断积累以及比赛中明星选手的不断涌现,这项工作只会越来越困难,越来越耗时。

腾讯的 NBA 之路

2015 年,腾讯与 NBA 签约,成为 NBA 中国数字媒体独家官方合作伙伴。而这不仅意味着腾讯体育可以直播 NBA 所有比赛,更意味着腾讯体育可以获得 NBA 联赛开始以来所有的视频资料及其使用权。

这一合作不仅为腾讯体育带来了过亿的 NBA 球迷用户,更对腾讯体育的视频能力提出了更高的要求。

在腾讯体育基于 NBA 的视频业务中,很大一部分都是各类比赛和球员的精彩瞬间。

在过去,腾讯的视频编辑需要将每场比赛的所有视频资料进行精编,并根据每段内容的各种属性进行粗略剪辑,以备后用。

而在进行各类“精彩瞬间”视频的制作时,腾讯的视频编辑就需要在这些浩如烟海的视频库中寻找对应标签的素材,并结合主题、音乐、特效等进行精细编辑,整个流程相当漫长。

即便只是输出 1 分钟的精彩集锦,也需要幕后编辑付出数小时、甚至数天的辛苦劳作。

但随着新媒体营销话题性、时效性要求的逐步提升,传统的编辑流程和模式已经不再能够适应新媒体和数字化传播的需求。

各类基于话题和实时比赛的营销和推广已经无法再为传统视频编辑模式提供足够的编辑制作时间。

面对这一困境,按照传统手段买设备、增人员的升级模式也无以为继。产业需求面临变革,但支持产业变革的内容产生模式却还没有出现;这对矛盾看似已经无解……

AI Vision 为腾讯体育提供视频编辑新解

在新一代算法和半导体技术的推动下,人工智能大潮已经开始在多个层面给企业的业务带来变革,将人们从简单、繁琐的重复性劳动中解放出来。

自动驾驶、文字及语音识别、简单逻辑判断等应用开始成为 AI 大展拳脚的新领域。

而作为全球领先科技的探索者,IBM 中国研究院更是在 AI 技术的应用方面布局已久。

前段时间,为了探索人工智能应用在视频应用方面的更多可能,腾讯体育与 IBM 成为工智能分析与剪辑合作伙伴,以领先的人工智能视觉深度学习平台——被喻为“IBM AI Vision 视觉大脑”,为腾讯 NBA 编辑团队定制 AI 视频剪辑方案,使海量历史赛事视频资料变得可搜索可随需提取,让每一帧每一秒的视频价值***化,将为 1.25 亿篮球迷提供***他们期待的在线观赛新体验。

通过全新的神经网络和深度学习技术,IBM“AI Vision 视觉大脑”可以依照需求自动根据篮球比赛各类技术动作和热点维度进行建模、分析,并依据建模在腾讯体育的视频库中寻找各类球星、主题的视频信息,之后再将这些精选视频剪辑在极短时间内提供给视频编辑。

而视频编辑则可以直接开始相关的配乐、精细剪辑工作。因此,整个视频内容的产出工作将被极大的简化,视频产出速度亦将大幅提升。

由 IBM AI Vision 视觉大脑技术参与制作的杜兰特 11 年精彩回顾(转载自腾讯视频)

以“为 2018 季后赛总决赛 MVP 凯文·杜兰特制作生涯精彩瞬间集锦”这一工作为例,我们来详解“AIVision 视觉大脑”的工作流程:

·首先,腾讯体育编辑根据球赛中球员的表现为“AIVision 视觉大脑”下达任务:寻找凯文·杜兰特的精彩瞬间,这些精彩瞬间包括投篮、扣篮、抢断、盖帽等内容。

·之后,“AI Vision 视觉大脑”会根据视频编辑的需求,边看比赛边识别和分析杜兰特的比赛视频,在晃动的视角、告诉运动的球员、相互遮挡激烈对抗的攻防战中将其中所有相关的内容剪辑出来,并根据精彩程度等相关指标进行加权评估。

·***,在 20 秒内,实时生成精彩视频集锦。

开启 AI 视觉分析技术应用新蓝海

面对如此强悍的性能,也许我们会担心“AI Vision 视觉大脑”会占用大量的硬件资源。

但事实上,在腾讯体育的应用案例中,“AI Vision 视觉大脑”完成某位球星的精彩瞬间仅需调用十余块协处理器的计算资源;而这对于腾讯所拥有的海量硬件资源来说更是九牛之一毛。

在极少的资源占用和极高的性能表现下,建模、遍历、计算、分析、输出结果,所有动作一气呵成。这是腾讯体育的胜利,更是 AI 技术的胜利。当然,如此强大的性能并非只是腾讯体育或 NBA 的专属。

借助“AI Vision 视觉大脑”所具备的多种能力,亮点视频制作、比赛复盘、电影预告片制作、摄像头画面实时分析、自动驾驶、路况实时识别、残障人士关怀等众多场景均可因此受益。

短短几十秒,腾讯体育获得的是一段精彩视频,而我们获得的是一整个 AI 时代。

 点击体验AI的剪辑能力

IBM、AI、人工智能、腾讯体育
上一篇:人工智能揭示提高员工保留率的秘密 下一篇:百度发布尝鲜价89元“小度智能音箱”
评论
取消
暂无评论,快去成为第一个评论的人吧

更多资讯推荐

厨师与AI完美搭配,一起刺激你的味蕾

最近,索尼人工智能团队和韩国高丽大学联合开发了一种名为FlavorGraph的人工智能映射工具,该工具可以推荐互补的配料,帮助厨师们烹饪菜肴。

科技行者 ·  1天前
违规企业可面临营业额6%罚款 欧盟欲加强对人工智能技术监管

据外媒报道,欧盟委员会近日修订文件显示,如有企业违反欧盟规则使用被禁止的人工智能应用,可能会面临最多相当于其全球营业额6%的罚款,这一数字高于此前提议的4%。

贾桂鹏 ·  1天前
外卖小哥要失业了?美团募资650亿打造无人配送

从疫情开始之后,美团就已经在无人配送方面发力,根据美团的数据显示,目前美团的无人车配送服务已经覆盖了20多个小区,累计配送3.5万订单,自动驾驶里程近30万公里!

首席财经观察 ·  1天前
未来网络领域发生混合威胁的三大趋势

4月7日,欧洲反混合威胁卓越中心发布报告《未来的网络空间与混合威胁》,指出网络空间是发生混合威胁的领域之一,是网络行动和网络信息行动的促成者。

张明月 张岸佳 ·  1天前
MIT小哥联合谷歌训练7个多任务机器人,9600个任务成功率高达89%!

Google研究团队率先研发出了处理大规模任务的新型机器人,这些机器人竟然具有「学习世界」的能力。

新智元 ·  1天前
有了这支矢量神经风格画笔,无需GAN也可生成精美绘画

一种新的神经风格画笔能够生成矢量形式的绘画作品,在统一框架下支持油画、马克笔、水彩画等多种笔触,并可进一步风格化。

机器之心 ·  1天前
5G只比4G多1G?人工智能不答应

4月4日,论文共同作者之一、美国艺术与科学院院士、清华大学智能产业研究院院长张亚勤在接受科技日报记者采访时表示,通信行业正在走向5G,马上要走向6G,光是看视频快点、多发送点图片,那不是5G。什么才是真正的5G?为什么要在5G网络里“注入”人工智能?

科技日报 ·  1天前
无人机都能拿来做什么?这些用途太给力了!

无人机如今已越发普及,甚至几百块钱就可以买到一台带有高清摄像头的机器,但是我们日常使用无人机都只是用来拍照片、视频,其实在军事等领域,无人机的用途更大。

科技星空plus ·  1天前
Copyright©2005-2021 51CTO.COM 版权所有 未经许可 请勿转载