导读: 在近期召开的 2024 年世界移动通信大会(2024 MWC 上海)上,七牛云发布了全新的 Miku 快直播产品,将超低延时直播与 AIGC 智能交互相结合,构建了全新的低延时直播互动体验。相比于传统的直播产品,通过对网络架构、底层协议、媒体引擎的优化,提供更稳定、流畅、超低延时的服务,为直播与 AIGC 的业务场景提供无限可能。
低延时直播作为音视频领域的热门话题,业内非常多的厂商都在这一领域发声并发布相关产品。这一类产品为何会受到追捧?背后的核心技术与价值又是什么?
2024 MWC 上海大会上,七牛云产品经理吴昊为现场与会嘉宾和从业者带来了关于 Miku 快直播的精彩分享。他详细介绍了 Miku 快直播的产品特性、技术优势、应用场景与案例,展现了七牛云在低延时直播领域的创新成果。本期「牛人说」,我们邀请吴昊来分享他对「Miku 快直播」的观察与思考。
1、Miku 快直播,究竟是什么?对于行业有哪些价值?
随着数字时代的到来,直播已成为连接用户与内容的重要桥梁。在体育赛事、电商直播、在线教育等传统直播场景中,用户对直播延时的容忍度不断降低,他们期望获得更加流畅和实时的互动体验。此外,新兴业务场景如云渲染、数字人互动、以及 GPT-4o 呈现的生成式人工智能交互等,对超低(亚秒级)延时直播的需求愈发强烈。
正是在这样的市场需求背景下,七牛云推出了 Miku 快直播,旨在满足用户对高质量直播服务的迫切需求。Miku 快直播依托于 WebRTC 技术,实现了亚秒级的延时,极大的改善了标准直播的体验。与传统的 HLS、FLV/RTMP 直播相比,Miku 快直播将直播延时降低至约 800 毫秒,远低于传统直播 3 到 15 秒的延时范围。
Miku 快直播的价值是多方面的,与现有 RTC 产品的打通,具备了深度融合 AIGC 服务的能力,为行业带来了更生动、互动性更强的体验,并为有实时反馈需求的行业提供了技术支撑,开辟了新的业务模式和增长机会。
2、与市场上其他低延时直播产品相比,七牛云 Miku 快直播的特点是什么?
七牛云的 Miku 快直播产品设计注重用户体验和便捷性,特别强调易接入性。用户可以通过简单的两步操作实现从七牛云标准直播到快直播的转换。首先,将播放流地址从 RTMP、FLV、M3U8 的后缀名更新为 WHEP。其次,升级播放器 SDK 以支持新的流媒体协议,此外,七牛云提供了丰富的跨平台的 SDK 支持,包括移动端、PC 端、Web 端等,确保用户可以从不同平台无缝接入快直播,获得更流畅、更低延时的播放体验。
Miku 快直播还提供了包括全链路监控和日志记录功能,这些功能对于保障直播质量和用户体验至关重要。系统能够监控流量、带宽峰值、总请求数等关键性能指标,同时提供卡顿率、失败率等质量指标的实时分析。日志数据的记录和诊断功能,包括推/拉流日志、断流日志和异常日志,为用户提供了深入洞察直播过程和快速定位问题的能力。特别需要强调的是,我们开放了实时数据接口,提供了控制台数据可视化和配置告警服务,帮助用户更有效地监控和管理直播活动。
此外,通过融合 RTC 互动和快直播 CDN 分发,Miku 快直播大幅降低了直播用户的延时,同时降低了 RTC 用户在多人互动时的成本,从而提供了更加流畅和成本效益高的直播解决方案。
3、能否分享一些具体的业务场景和遇到的技术挑战?Miku 快直播做了哪些技术优化?
Miku 快直播已成功应用于数字人互动、云渲染、体育赛事、在线教育等多个领域。例如,在数字人互动中,实现了与观众的实时互动,提供了新颖的观看体验。然而,在实现这些应用的过程中,我们也遇到了技术挑战,尤其是在保证超低延时的同时,如何确保直播的稳定性和扩展性。
为了克服这些挑战,七牛云 Miku 快直播在技术层面进行了深入的优化。首先,信令接入流程优化,通过对 QUIC 协议的支持,改善了 TCP 协议队头阻塞、重传歧义、内核态策略不可控等缺陷,并在 QUIC 协议上拓展了协商调整发送端策略的能力。同时采用了 Minisdp 技术压缩 SDP 信息,减少了数据量,可在一个 UDP 包内传输。此外,通过媒体流复用 ICE 通道,避免重复建立和关闭连接,实现了快速传输媒体流,有效降低了首帧耗时。
除了信令接入流程的优化,Miku 快直播还对网络 QoS 模块进行了增强,特别是在弱网环境下的表现。系统采用了七牛云自研的自 适应平滑发送策略,显著降低重传率,极大降低了重传导致的延时,同时音频动态冗余发送技术保障了音频的流畅性。视频方面支持多种 FEC 编码算法,根据接入设备自适应选择相应冗余算法,有效抵抗了网络抖动和丢包问题,确保了直播的极致流畅性。这些技术优化措施共同作用,使得 Miku 快直播在复杂网络环境下依然能提供较高质量的直播服务。
4、AI 技术在 Miku 快直播中扮演了怎样的角色?Miku 快直播的未来发展方向?
面向 AI 时代,七牛云以打造全球领先的一站式场景化音视频 APaaS 平台为愿景,携手各界合作伙伴共建开放解耦的繁荣生态。Miku 快直播计划主要集中在三个方向:
- 延时、成本 的 持续双降
- QoS、音画质 的 持续双升
- 进一步 支持 AIGC 智能交互应用
我们将持续致力于降低直播延时和成本,同时提升服务质量(QoS)和音视频质量,确保用户享受到更流畅、更清晰的直播体验。此外,Miku 快直播将支持人工智能生成内容(AIGC)和智能交互应用,进一步探索智能时代下的新应用场景,为用户带来更加丰富和个性化的直播服务。
七牛云愿与更多客户、合作伙伴一道,共同探索更多 AI 时代下的无限可能。
**粗体** _斜体_ [链接](http://example.com) `代码` - 列表 > 引用
。你还可以使用@
来通知其他用户。