从去年七牛云音视频团队发布音画质量分析系统到现在已有半年多的时间,得到了很多业内玩家和客户的认可。在即将召开的 LiveVideoStackCon 2022 音视频技术大会上海站,七牛云将以专场的形式再次亮相。对此,七牛云技术总监、本次七牛云专场出品人陈辉接受 LVS 采访,与大家分享这半年来七牛云在以音画质量为主线,结合自身 QRTC 产品进行的迭代和创新;以及七牛云未来在 RTC 方面的规划。
编者按: 从去年七牛云音视频团队发布音画质量分析系统到现在已有半年多的时间,得到了很多业内玩家和客户的认可。在即将召开的 LiveVideoStackCon 2022 音视频技术大会上海站,七牛云将以专场的形式再次亮相。对此,七牛云技术总监、本次七牛云专场出品人陈辉接受 LVS 采访,与大家分享这半年来七牛云在以音画质量为主线,结合自身 QRTC 产品进行的迭代和创新;以及七牛云未来在 RTC 方面的规划等内容。
陈辉:七牛云技术总监,主要带领七牛云的直播、RTC、SDK 等团队升级产品能力和攻克技术难关。曾主导过大型服务化体系建设和业务中台建设,有着丰富的性能调优和架构设计经验。
LiveVideoStack:陈老师,您好。自从去年参加完大会到现在,这段时间您主要从事哪些工作?有没有什么新的进展,可以和大家分享一下。
陈辉: 在去年 10 月底的 LiveVideoStackCon 2021 北京站上,我们发布了结合行业特定属性打造的「音画质量分析系统 QoE」,通过对通用音视频评价维度的打分和基于质量美学维度的评分相结合,客观、综合地对数据源进行评价。
公测至今,已有多家行业头部客户完成测试并上线,这一系统正在切实地助力客户业务发展。围绕着音画质量评价和提升这个维度,我们走访了大量不同行业的客户,寻找合适的共创伙伴,一起来打磨、提升产品。
除了上述音画质量相关的工作外,我的另一个工作重心在实时互动产品(QRTC)上,有几点变化可以和大家分享:
这半年时间,我们升级了内部传输协议(QRTP,这次专场专门会有人分享),使之能够更好地适配媒体传输环境;
同时,我们迭代了客户端架构,发布了 4.X 的大版本升级,极大地提升了客户端的易用性;
更重要的是,面向不同的行业和场景,七牛云深入分析并理解场景需求,QRTC 结合七牛云的其他产品,构建了极为丰富的解决方案生态。
三位一体——七牛云音画质量分析系统 QoE
LiveVideoStack:七牛云早在去年 10 月就发布了音画质量分析系统 QoE ,这个系统的主要评测的标准和原理是什么?
陈辉: 七牛云音画质量分析系统 QoE,是通过结合前沿的音视频处理技术和深度学习模型打造,将通用音视频评价维度的打分和基于质量美学维度的评分相结合,实现客观、综合地对数据源进行评价。
拿视频评分举例,从基础视频质量上,我们会分析视频卡顿率、黑屏、马赛克、音画同步等现象;从视频美学角度,纳入平衡、颜色和谐、趣味、景深、光照、主体颜色丰富性等指标,最终获取音视频资源的主客观质量分值。
基于不同的维度,客观地为实时音视频打分,用户能借助明细分对视频做进一步的分析和优化。
LiveVideoStack:市场上与 QoE 相关的产品层出不穷,七牛云的音画质量分析系统 QoE 的特点是什么?
陈辉: 和传统 QoE 不同的是,七牛云音画质量分析系统从设计之初就有个明确的要求:贴近和理解客户的业务。通过和行业头部玩家共同探索合作、积累经验,七牛云独创了由基础评分、美学评分和行业特定维度评分三位一体的评价体系。
所以,这一系统最大的特点就是如何紧贴行业,也是很重要的一项突破。
比如在电商领域,我们评价一个画面的好坏,除了会关注它基础的分辨率、色彩饱和度等,我们还会从美学维度关注画面和谐、景深位置等。从行业属性看,电商的大部分业务都会要求图片或视频尽可能“实拍”和“原创”,所以针对这类的音画分析,我们还纳入了主体突出、水印、九宫格、白底图等电商维度的特有元素。
在实践中,七牛云音画质量分析系统 QoE 进行质量的评分,再通过七牛云的锐智转码、HDR、超分、降噪等工具,全面提升画质,快速、高效地形成质量分析和优化的闭环,为更好的用户体验助力。
七牛云在 RTC 方面的未来规划
LiveVideoStack:目前看来 RTC 市场还将会处在一个增量趋势,七牛云在 RTC 方面的未来规划是什么?
陈辉: 我们主要还是从两方面来看未来的发展,一方面是用户想要什么,另一方面是我们能创造什么。
从用户最基础的实时通信需求看,“眼见为实”是我们一贯的追求。所以在体验端,我们主要会围绕着音视频质量的维度进行突破,结合七牛云的锐智转码、超分、3A 优化、空间音等能力,进一步提升 RTC 场景下的用户视觉、听觉体验。
解决用户实际场景下的问题,也是我们关注的一个重点。比如在 2021 年,QRTC 结合 AR 眼镜打造的智能船舶检修方案就是实实在在满足了用户对于效率提升的诉求。
七牛云 QRTC 不会做一味的需求追随者,而是不断要求自己去创新和突破。
七牛云在音视频行业中的规划
LiveVideoStack:七牛云在音视频行业中的规划是什么?可以给我们介绍一下吗?
陈辉: 七牛云的业务以视频云为主,视频云主要包括媒体的采集和优化(推流 SDK\美颜、短视频 SDK 等)、传输和分发(QRTC 和直播 Pili、低延时直播 Geek、视频监控 QVS),智能多媒体服务 Dora(审核、优化等)和媒体的渲染(播放器)。
我们致力于打造端到端的多媒体解决方案,让使用者可以实现快速、高效的集成,缩短从想法到产品的距离。当然,我们的产品也将持续围绕用户体验进行打磨,这也是我们会长期坚持下去的事情。
去年发布的音画质量分析系统,正是从我们的视频云当中演化出来的产品,同时也可用来客观地评价内部产品的体验质量,从而进一步提高我们对于自身产品质量的要求。
LiveVideoStack:您认为未来几年音视频需求增长来自哪里?
陈辉: 我个人认为元宇宙的爆发会为音视频行业带来猛烈的增长。其实从去年年底开始,已经有厂商在陆续地推出元宇宙概念型的产品,包括音视频类的社交互娱产品,以及虚拟空间、数字人等一系列的产品或场景,都离不开音视频能力的加持。
另外悄悄说一句,七牛云音视频团队在紧锣密鼓地准备元宇宙领域的相关产品。
LiveVideoStackCon 2022 上海站 七牛云专场分享剧透
LiveVideoStack:回到本次 5 月份 LiveVideoStackCon 上海站活动,本次大会的七牛云专场会有哪些精彩内容?您可以和我们分享一下吗?
陈辉: 这次七牛云的专场主要会带来三场分享,这三场分享都会围绕七牛云如何提升音画质量展开。
第一场会围绕七牛云音画质量分析系统 QoE,为大家介绍这半年来我们所接触的一些业务场景和遇到的技术挑战;
第二场,会从协议层给大家介绍去年七牛云实时互动团队在升级传输协议上,如何设计和应对升级过程中的一些难点;
第三场分享,会从“RTC+数据”的视角介绍在七牛云 RTC 的生产环境中如何快速定位、解决问题,以及结合相关特定场景如何将数据发挥更大价值。
LiveVideoStack:谢谢您接受采访!
陈辉: 谢谢!期待在 LiveVideoStackCon 2022 上海站与大家见面!