七牛云秦国栋:智媒时代下的视频能力提升
本文根据七牛云智慧新媒体解决方案架构师秦国栋,在“智媒时代下的视频智作”主题沙龙上的分享整理而成,全文介绍了七牛云直播解决方案、智能媒资解决方案和影视后期制作解决方案。以下是演讲正文。

智媒时代,技术到底能为媒体行业带来什么价值?相信各位都有这种体会:媒体行业的业务部门、研发部门、运维部门都在探索引入新技术,对现有能力平台做一些提升。从 IT 基础架构来看,不管是芯片、网卡还是 SSD,这些 IaaS 层资源业内已经做得非常完善,互相之间也没有任何差异。那么从业务效率入手,我们能为媒体行业带来哪些提升呢?
PART.1 直播解决方案
多年来,我们服务了非常多的直播平台和互联网 APP,近几年我们发现,客户要的不再是单纯的直播能力,自己也不再投入人员去集成云厂商的直播能力,而是买开箱即用的直播方案。于是,我们顺应市场趋势,做了很多直播业务层的功能,像直播带货、企业内部培训等各类直播场景,都可以采用七牛云开箱即用的直播方案。
很多客户用七牛云直播方案,往往是因为某一个功能刚好解决了其痛点。就拿多平台转推来讲,某客户在自己的 APP 里做直播时人气较低,使用“一键转推”功能转到 6 个平台后,一下子吸引了 12.66 万人次的观看,效果立竿见影。
再说一个大家比较熟悉的场景,景区慢直播。我们提供摄像头上云能力,就是把摄像头视频流拉到云端按需分发。我们当时把这个场景构建出来以后,有很多客户提出疑问:如果在某个中心位置有人拉条幅了怎么办?这时可以结合七牛的内容审核能力帮助客户先审后播,目前也应用得非常成熟。

最近刚刚流行起了 VR 直播,如果大家有测试过,肯定遇到了全景摄像头的兼容性、转码性能等一系列问题,我们已经把全景摄像头从推流、到播放器播放、再到 CDN 加速等全流程打通,后面还可以根据客户需求定制 LOGO 背景墙,在行业应用上面给大家带来了 N 多种可能。
再说一个场景:在景区和游乐场,摄像头往往被架设在一些最佳打卡点上,比如过山车的俯冲点,这些位置游客自己拍不到,游乐场的摄像头可以高速抓拍,并根据人脸识别信息进行匹配,生成一段 vlog,游客根据个人意愿决定是否付费。
PART.2 智能媒资解决方案
这个话题媒体这两年讨论很多,大家或多或少已经具备一些能力,这里并不是让大家废弃掉现有的,而是参考七牛云的能力,从自身实际需求出发,按需集成使用。

我们基于广电客户的需求,部署了很多媒资系统,其中最核心的技术是视频的结构化处理,包含对视频当中一些人物的识别、字幕/文本的识别,并将识别信息作为一个结果或标签,方便后期处理。
我们公有云的存储和公有云的处理能力很早就可以根据客户需要做私有化部署了,这两年响应国产化趋势,我们也兼容了多款国产处理器,适配了多个操作系统与服务器,满足不同需求(如分布式存储、存算一体、存算分离)场景并提供全国产化的一体机解决方案。
PART.3 影视后期制作解决方案
大家今年看了乘风破浪的姐姐,王心凌风靡全网,如果你们是甲方看到这个场景,接下来的剪辑是不是倾向于多给她一些镜头?
从节目素材量来看,乘风破浪的姐姐拍摄一期就要 1 个 PB 的原始素材,而现在磁盘都是 TB 级的,大家想想这得需要多少设备和盘。从流程上来看,摄像机录制到物理拷贝,中间就需要 9 天时间,客户往往只给我们三周时间,这意味着从拿到素材到输出成片,中间时间非常紧。

传统的传输方式是通过有线传输,我们的合作伙伴乐田智作是怎么做的呢?乐田基于 5G 网络,将摄像机的拍摄内容直接通过网络发送到后端机房。那么一档综艺拍摄的机器,至少是几十台上百台,又是如何管理呢?七牛云联合乐田智作共同研发了一套设备管理平台,可以对现场拍摄设备及素材进行统一注册和文件管理,并把这些文件传到中转 NAS 或者云端存储,大大节省了前期传素材的时间。

接下来可以利用 AI 能力把这些素材当中哪些人什么时候出现,根据故事线输出 XML 文件,这样就可以直接拿来做精剪了。此外,制作方在长沙演播基地拍摄,导演如果因为各种原因在外地过不来,可以通过实时远程监看系统进行监看,方便快速干预调整,解决了人不能到场的问题。

整体来看这个解决方案,我们先是对相机盒子做集成化管理,实现网络传输;接着通过实时直播流实现导演远程监看、互动和点评;最后应用「人脸检测与识别、声纹比对、表情识别、镜头类型」等算法能力,生成 XML 文件一键导入各大主流剪辑软件中。
原来一个 PB 的素材需要一个团队辛辛苦苦加班搞几天,现在从拍摄传输到 AI 处理,统统交给软件系统和 GPU 服务器来做,显卡和服务器的数量决定了剪辑效率,我们现在也做了 GPU 的虚拟化,可以实现多台设备集群化提供剪辑服务。拍摄到制作的周期从 9 天缩短至几小时,精剪师可以根据 AI 预剪的 XML 文件精准定位,结合监看系统中的导演批注快速成片;素材云端备份也可以避免硬盘丢失损坏等意外情况。
未来,我们会和乐田智作一起把云端制作链条打通,方便大家在整个流程当中享受便捷高效的云服务。我今天分享就到这里,谢谢大家。