前言:
如何从接近 6 万小时的视频中找出属于某个人的精彩 1 分钟?
6 万小时什么概念?那是 66 年零 7 个月。
在这接近人一生长度的视频中,恐怕即便是亲身经历者也很难快速给你答案。而在视频工业迅速崛起的当下,观众可等不了太久。
当一个新人在某场体育比赛中崭露头角,观众们想要在比赛结束后就立刻了解到他的过去以及他的成长。但显然,在传统技术条件下,这是不可能的。
面对浩如烟海的视频资料,即便是最资深的编辑使用***大的非线性编辑软件和高性能的硬件;在面对整理个人生平和精彩瞬间这样的任务需求时,编辑通常也需要付出数小时甚至数天的时间。而且由于时间和精力的限制,其间的遗漏更是在所难免。
面对越来越无法等待的观众,传统的视频制作方只能大规模的增加视频编辑数量,以期提升视频整理和制作的速度。
但随着视频素材的不断积累以及比赛中明星选手的不断涌现,这项工作只会越来越困难,越来越耗时。
腾讯的 NBA 之路
2015 年,腾讯与 NBA 签约,成为 NBA 中国数字媒体独家官方合作伙伴。而这不仅意味着腾讯体育可以直播 NBA 所有比赛,更意味着腾讯体育可以获得 NBA 联赛开始以来所有的视频资料及其使用权。
这一合作不仅为腾讯体育带来了过亿的 NBA 球迷用户,更对腾讯体育的视频能力提出了更高的要求。
在腾讯体育基于 NBA 的视频业务中,很大一部分都是各类比赛和球员的精彩瞬间。
在过去,腾讯的视频编辑需要将每场比赛的所有视频资料进行精编,并根据每段内容的各种属性进行粗略剪辑,以备后用。
而在进行各类“精彩瞬间”视频的制作时,腾讯的视频编辑就需要在这些浩如烟海的视频库中寻找对应标签的素材,并结合主题、音乐、特效等进行精细编辑,整个流程相当漫长。
即便只是输出 1 分钟的精彩集锦,也需要幕后编辑付出数小时、甚至数天的辛苦劳作。
但随着新媒体营销话题性、时效性要求的逐步提升,传统的编辑流程和模式已经不再能够适应新媒体和数字化传播的需求。
各类基于话题和实时比赛的营销和推广已经无法再为传统视频编辑模式提供足够的编辑制作时间。
面对这一困境,按照传统手段买设备、增人员的升级模式也无以为继。产业需求面临变革,但支持产业变革的内容产生模式却还没有出现;这对矛盾看似已经无解……
AI Vision 为腾讯体育提供视频编辑新解
在新一代算法和半导体技术的推动下,人工智能大潮已经开始在多个层面给企业的业务带来变革,将人们从简单、繁琐的重复性劳动中解放出来。
自动驾驶、文字及语音识别、简单逻辑判断等应用开始成为 AI 大展拳脚的新领域。
而作为全球领先科技的探索者,IBM 中国研究院更是在 AI 技术的应用方面布局已久。
前段时间,为了探索人工智能应用在视频应用方面的更多可能,腾讯体育与 IBM 成为工智能分析与剪辑合作伙伴,以领先的人工智能视觉深度学习平台——被喻为“IBM AI Vision 视觉大脑”,为腾讯 NBA 编辑团队定制 AI 视频剪辑方案,使海量历史赛事视频资料变得可搜索可随需提取,让每一帧每一秒的视频价值***化,将为 1.25 亿篮球迷提供***他们期待的在线观赛新体验。
通过全新的神经网络和深度学习技术,IBM“AI Vision 视觉大脑”可以依照需求自动根据篮球比赛各类技术动作和热点维度进行建模、分析,并依据建模在腾讯体育的视频库中寻找各类球星、主题的视频信息,之后再将这些精选视频剪辑在极短时间内提供给视频编辑。
而视频编辑则可以直接开始相关的配乐、精细剪辑工作。因此,整个视频内容的产出工作将被极大的简化,视频产出速度亦将大幅提升。
由 IBM AI Vision 视觉大脑技术参与制作的杜兰特 11 年精彩回顾(转载自腾讯视频)
以“为 2018 季后赛总决赛 MVP 凯文·杜兰特制作生涯精彩瞬间集锦”这一工作为例,我们来详解“AIVision 视觉大脑”的工作流程:
·首先,腾讯体育编辑根据球赛中球员的表现为“AIVision 视觉大脑”下达任务:寻找凯文·杜兰特的精彩瞬间,这些精彩瞬间包括投篮、扣篮、抢断、盖帽等内容。
·之后,“AI Vision 视觉大脑”会根据视频编辑的需求,边看比赛边识别和分析杜兰特的比赛视频,在晃动的视角、告诉运动的球员、相互遮挡激烈对抗的攻防战中将其中所有相关的内容剪辑出来,并根据精彩程度等相关指标进行加权评估。
·***,在 20 秒内,实时生成精彩视频集锦。
开启 AI 视觉分析技术应用新蓝海
面对如此强悍的性能,也许我们会担心“AI Vision 视觉大脑”会占用大量的硬件资源。
但事实上,在腾讯体育的应用案例中,“AI Vision 视觉大脑”完成某位球星的精彩瞬间仅需调用十余块协处理器的计算资源;而这对于腾讯所拥有的海量硬件资源来说更是九牛之一毛。
在极少的资源占用和极高的性能表现下,建模、遍历、计算、分析、输出结果,所有动作一气呵成。这是腾讯体育的胜利,更是 AI 技术的胜利。当然,如此强大的性能并非只是腾讯体育或 NBA 的专属。
借助“AI Vision 视觉大脑”所具备的多种能力,亮点视频制作、比赛复盘、电影预告片制作、摄像头画面实时分析、自动驾驶、路况实时识别、残障人士关怀等众多场景均可因此受益。
短短几十秒,腾讯体育获得的是一段精彩视频,而我们获得的是一整个 AI 时代。