真·实时!打破技术瓶颈,即构首创在线KTV实时合唱方案

100 篇文章 42 订阅
订阅专栏
25 篇文章 2 订阅
订阅专栏

想K歌,上云端!疫情常态化推动了线上娱乐的蓬勃发展,线下KTV长时间的“闭麦”让线上云K歌更加火热。

从本地录唱到多人KTV,再到实时合唱,线上KTV的实时性与互动性越来越强。线上K歌娱乐不断迭代升级,背后折射的是用户“以歌会友”的需求,对真实的、实时的“陪伴感”的追求。

即构ZEGO 全网首创在线KTV实时合唱方案,打破行业技术限制,把线下KTV场景更完整的“复制”到线上,让实时陪伴的感知最大化。

 

 

『真实时』,即构创新“实时合唱”解决方案

目前行业内普遍采用的合唱方案为“串行合唱”。在“串行合唱”方案中,合唱各方串行加入,伴奏由主唱端混入。从本质上来说,这是一种“伪实时合唱”——

·主唱体验缺失:副唱、听众合唱同步效果良好,但主唱无法实时听到副唱的歌声

·合唱人数有限制:三人或以上的合唱实现复杂,延迟高,难以真正落地

图片

▲串行合唱方案(点击查看大图)

 

为了突破这两个限制,同时不影响副唱和听众端的体验,即构对方案架构进行了重构,克服了多个技术挑战,实现了合唱者之间的实时互动,也满足了三人及以上的合唱需求。

图片

▲即构实时合唱方案(点击查看大图)

 

 

『超硬核』,即构实时合唱克服技术挑战

 

即构凭借在音视频领域多年的技术积累,克服了多个挑战,完成了实时合唱方案的落地。

 

端到端的感官延迟低至70ms

本质上,实时合唱效果可以通过极低延迟的RTC技术实现,我们需要将一端的歌声用最小的耗时传送到对端。

图片

我们将整个过程进行拆解,针对每个环节做以降低延迟为首要目标的优化,包括采集渲染延迟优化、音频前后处理算法优化、应用超低延迟编码方案、调整流控策略等。

通过对每个环节的“压榨”,即构在保障的合唱体验效果的前提下,将端到端的感官延迟降低至70ms。

 

多端精准同步播放伴奏

为了实现线下KTV歌房的合唱效果,让伴奏音乐在各自端播放,各方演唱者由伴奏音乐驱动演唱,不必等待对方。这里引入另一个挑战:如何让各方同步播放伴奏音乐?

图片

为此,我们做了各端精准的时钟对齐,让各端在同一时刻启动伴奏播放。同时,结合播放器资源预加载,实现各端伴奏同时播放特性。

 

服务端多演唱流同步混流

在满足演唱各方实时合唱的同时,我们还需要考虑观众端的体验。即构采用了服务端精准混流的方案,各方演唱者的声音和伴奏混音成一路流,混音的同时通过NTP时间精准对齐各方演唱进度。

听众端只需拉一路流就能听到良好的合唱效果,且这一方案对听众的网络要求很低。

 

3人以上合唱拓展

基于以上即构“实时合唱”方案的架构,每一端的合唱的加入是独立的,不相互依赖,合唱人数的拓展变得十分简单,对合唱的人数没有限制。同时,观众通过混流收听不会受到多方合唱的影响。

 

 

『更适配』,基于场景需求选择合唱方案

 

基于不同K歌业务的场景需求,选择更适配的合唱方案,才能为用户带来最佳的体验。

 

付费点歌合唱

专业主播在直播间开播,观众通过付费等方式获得与主播连麦合唱的机会。

图片

核心需求:优先保障付费连麦用户(即副唱)的体验,其次保障直播间中观众的体验。

方案适配:串行合唱方案

在此方案下副唱的拉流中主唱歌声与伴奏同步,副唱合唱后发起混流,观众端听到主副唱歌声与伴奏同步,副唱和观众的体验得到较好的保障。

 

在线KTV实时合唱

多个用户在“歌房”中连麦互动,体验虚拟KTV的乐趣,社交属性更强。

图片

 

核心需求:实现连麦几方多人实时合唱。

方案适配:实时合唱方案

即构超低感官延迟连麦技术,保障了合唱者之间无障碍实时互动;接入成本低,扩展容易,支持3人及以上的合唱,复刻更贴近线下KTV的互动体验。

 

OMO歌房连麦

线下传统KTV歌房与mini-KTV欢唱室打通,线上线下融合(Online Merge Offline),实现线下不同场景连麦合唱。

图片

 

核心需求:连麦双方实时互动合唱。

方案适配:实时合唱方案

即构超低感官延迟连麦技术,打破空间壁垒,让陪伴和互动更加真实。


“即构最愿意做的事就是对变化迅速反应对新场景主动开拓不断创新解决方案驱动核心技术落地,适应各类场景需要,真正让音视频技术深入各行各业,融于无形。”即构科技CEO林友尧表示。

基于对在线K歌的发展趋势和用户需求的洞察,即构发挥核心的音视频技术能力,创新场景解决方案,进一步打破空间壁垒,把线下的欢乐无缝的、完整的复制到线上,给用户带来更实时的陪伴和互动体验。

 

博客
全球布局、极速集成:IMkit搭建全面、快捷、安全的聊天应用
09-13 324
不论是在传统的互动聊天、在线客服、企业办公等场景,还是与实时音视频结合的音视频通话、直播语聊、AI应用等场景,即构的即时通讯产品IMKit都能为开发者提供低成本、高效率的IM服务。目前,已有多家国内外社交平台采用即构IM方案并取得明显成效。
博客
安全合规、资源专属!即构科技联合亚马逊云科技推出实时互动解决方案
09-12 844
“不出海,就出局”。为了应对国内市场竞争压力、形成新的业务增长点,越来越多科技企业加快拓展海外市场的步伐。然而,在这一过程中,业务操作的和成为科技企业出海的“绊脚石”。如何满足跨境传输、数据储存和隐私保护等要求,搭建稳定合规的底层架构?
博客
互联网医疗 | 基于音视频SDK和即时通讯IM技术实现线上问诊功能
09-10 561
不论是科普医学知识,还是医疗行业者的专业培训、手术示教,采用远程直播培训的方式能够打破空间限制,同时也保留了课堂的互动性,大大节省了讲师和学员的成本。,帮助开发者全面监测音视频服务,包括问题定位诊断、洞察质量与体验、业务经营分析、实时监控告警等,低门槛、高效提升音视频质量和用户体验。支持医生与患者之间的单聊,发送文本消息、语音消息、表情等,支持发送患处病状的高清图片消息,以及诊断pdf文件等。需要支持各种类型的消息,包括文本、已读回执、高清原图等,同时离线推送到达率需要较高,才能通知到患者和医生。
博客
“码”力全开!高效开发就靠这款神器
06-03 1106
​即构致力于用领先的音视频技术帮助开发者即刻构建实时互动世界。通过大量的用户调研了解到,兼顾高效开发和个性化UI以实现产品快速上线,是许多开发者的共同需求。为此,即构推出了含标准化 UI 的音视频互动 SDK —— UIKits,帮助开发者应对互动应用开发中的各种挑战。
博客
即构 UIKits 重磅发布!高效开发与自定义UI兼备,打造互动场景新标杆
05-17 1127
音视频通话UIKit(Call Kit)、互动直播UIKit(Live Streaming Kit)、语聊房UIKit(Live Audio Room Kit)核心功能:呼叫邀请、高清画质、通话布局、成员列表、实时文本聊天等。核心功能:呼叫邀请、实时通话、高清画质、纯净音质等。通过广泛与开发者交流发现,对于追求快速实现音视频通话功能的开发者而言,如果要实现完整的互动场景,基于场景化最佳实践,整合RTC、IM、直播、美颜等多款产品,打造了。,轻松实现1V1、多人通话、直播、语聊房等多样的实时互动场景。
博客
上架难、买量贵?即构 Web 端 1v1 方案全力加速泛娱乐出海
03-28 1016
平台仅需让两个用户通过匹配、选择等形式连通后,用户即可在房内进行 1v1 视频社交,且在社交的同时又极具私密性,满足了用户社交与 dating 的需求,盛行在中东土耳其、印度、南美等一些热门出海地区。近年来,1v1 视频社交平台也在往更加多元化的方向发展,逐渐搭建起直播间、语聊房,为匹配环节提供更多社交场景,增添玩法形式提升用户留存。另一方面,1v1 场景简单、变现能力强,也是备受社交平台关注的主要原因之一。
博客
即构直播PK玩法:如何创造爆款直播内容
03-27 1155
直播作为泛娱乐社交出海的典型场景,已发展多年,,提升业务营收,形成自己的差异化优势?为直播场景增添更多的玩法是重要的方法之一。
博客
助力客户效益增长近10倍!即构宝藏算法是如何做到的?
03-19 394
助力客户效益增长近 10 倍!即构宝藏算法如何做到的?
博客
如何轻松实现在线K歌房,在家也能线上合唱
02-04 1136
搭建一个完整的在线 KTV 需要实时语音(RTC)、点歌(歌曲的获取与分享)、歌词展示等基础能力,并通过以上基础能力实现合唱、麦位管理、房间管理、歌词展示与同步等业务系统。以下介绍实现一个完整在线 KTV 的基本流程,可帮助您从整体上理解在线 KTV 的核心业务。
博客
基于ZEGO即构 SDK 实现iOS一对一音视频聊天应用
02-04 1297
在用户调用 loginRoom 接口后,可以直接调用 startPublishingStream 接口,传入 “streamID”,将自己的音视频流推送到 ZEGO 音视频云。创建项目,并申请有效的 AppID,这一步很关键,appid为应用的唯一标识,如身份证号,是应用的身份证明,用于明确你的项目及组织身份。用户 A、B 加入房间,用户 B 预览并将音视频流推送到 ZEGO 云服务(推流),用户 A 收到用户 B 推送音视频流的通知之后,在通知中播放用户 B 的音视频流(拉流)。
博客
30分钟快速搭建秀场直播间
01-29 1227
秀场直播既可以实现单人视频直播,也可以邀请观众上麦、进行多人连麦互动。您可以通过如下视频快速了解秀场直播的主要功能演示和接口调用。
博客
使用VUE+WebRTC快速实现简单的音视频通话
01-29 3490
本文将介绍如何快速使用 Vue 实现一个简单的实时音视频通话。ZEGO Express SDK:由 ZEGO 提供的实时音视频 SDK,能够为开发者提供便捷接入、高清流畅、多平台互通、低延迟、高并发的音视频服务。推流:把采集阶段封包好的音视频数据流传输到 ZEGO 实时音视频云的过程。拉流:从 ZEGO 实时音视频云将已有音视频数据流进行拉取的过程。
博客
音视频解决方案(二):直播电商场景最佳实践
01-15 1048
提供商品列表推送功能,商家可以自定义商品的相关信息(简介、图片、列表、链接等),生成商品列表,主播直播时可同步推送列表中的商品链接,引导观众下单购买;:提供高清低延时的直播体验,支持设置最大、最小码率,自动适配标清、高清、超清分辨率,直播流媒体可采用低延迟,直播延时远低于CDN分发,实现主播语音画面、商品列表、观众IM消息三端同步;:提供商品列表推送功能,商家可以自定义商品的相关信息(简介、图片、列表、链接等),生成商品列表,主播直播时可同步推送列表中的商品链接,引导观众下单购买;支持切换摄像头、麦克风。
博客
音视频解决方案(一):直播电商场景方案
01-15 385
即构电商直播解决方案包含即构电商助手及相关业务组件,提供音视频直播、主播美颜、房间消息、商品推送等功能,帮助开发者快速构建自有电商直播小程序。
博客
基于 即构 ZIM SDK 实现APP实时聊天功能
01-15 1056
ZEGO 提供 ZIM + RTC 服务联动的场景解决方案,公开语聊房、秀场直播等业务场景搭建的示例源码,帮助开发者能在极短的时间内搭建完美的业务场景。
博客
VUE实现Web端多人语音视频聊天
01-04 1403
本文展示了如何使用 ZEGO Express SDK 构造多人音视频通话场景,即实现多对多实时音视频聊天互动。用户可在房间内与其余用户进行实时音视频通话,互相推拉流。该场景可用于多人实时音视频聊天、多人视频会议等。
博客
WebRTC实现简单音视频通话能力
01-04 1159
本文介绍如何基于WebRTC快速实现一个简单的实时音视频通话。流:一组按指定编码格式封装的音视频数据内容。一个流可以包含几个轨道,比如视频和音频轨道。推流:把采集阶段封包好的音视频数据流推送到 ZEGO 实时音视频云的过程。拉流:从 ZEGO 实时音视频云将已有音视频数据流拉取播放的过程。房间:是 ZEGO 提供的音视频空间服务,用于组织用户群,同一房间内的用户可以互相收发实时音视频及消息。用户需要先登录某个房间,才能进行音视频推流、拉流操作。
博客
Avatar虚拟人(三):实现一键“变妆换装”,打造专属元宇宙虚拟形象
01-02 857
ZEGO Avatar SDK 虚拟人SDK提供了多种妆容配饰(如美瞳、口红、眼镜、胡子等)等美术素材,支持在虚拟形象上实时渲染、自然替换,打造符合自己品味的专属虚拟形象。
博客
Avatar虚拟人(二):语音驱动虚拟人的面部表达
01-02 1017
ZEGO Avatar SDK 提供了语音驱动功能,通过声音的声波信息,实时驱动当前虚拟人物的嘴形变化,使得虚拟形象能够和真人一样进行自然的情绪表达。可广泛应用于社交互动、语聊直播等场景中。开发者可以调用接口,设置自定义的音频数据采集代理(需要继承实现onStart和onStop方法)。采集到音频数据后,调用接口,发送数据。@Override// 启动音频采集@Override// 停止音频采集。
博客
即时通讯实践(二):uniapp实现IM即时通讯聊天功能
12-31 2377
即时通讯SDK ZIM SDK 提供了如下接入方案:搭建客户端的用户管理逻辑,并下发用户 ID 用于客户端登录。鉴权 Token,建议由您的业务后台自行实现,保证鉴权数据安全。uni-app SDK 是一个基于原生 iOS/Android 平台 ZIM SDK 的 uni-app Wrapper。下载 Web SDK和下载小程序 SDK。uni-app 官方自定义调试基座使用说明,请参考什么是自定义调试基座及使用说明。选择 “运行 > 运行到手机或模拟器 > 制作自定义调试基座” 菜单。
写文章

热门文章

  • WebRTC 简单入门与实践 12925
  • 面由 AI 生|虚拟偶像“捏脸”技术解析 8750
  • 音频自动增益控制 AGC 解决的问题及原理解析 8372
  • 暗黑系王者,低照度图像增强技术解析 8198
  • 鸿蒙应用开发:环境搭建(Mac)与项目构建 7978

分类专栏

  • 音视频解决方案系列 15篇
  • 即构UIKits 2篇
  • 行业热门技术 68篇
  • 直播/活动/沙龙 1篇
  • 技术教程专栏 5篇
  • #技术教程 52篇
  • 音视频常见问题 5篇
  • 音视频开发进阶课程 18篇
  • #泛娱乐 25篇
  • SDK迭代 16篇
  • #在线教育 25篇
  • 实时音视频 100篇

最新评论

  • 如何在uniapp平台快速实现一对一音视频通话app

    hdhdydbbd: 问题是怎么进行推流,让对方收到通知呢?

  • 安全合规、资源专属!即构科技联合亚马逊云科技推出实时互动解决方案

    Sam9029: 这篇文章实在是太棒了!

  • 安全合规、资源专属!即构科技联合亚马逊云科技推出实时互动解决方案

    接着奏乐接着舞。: 这篇博文真是令人印象深刻!作者的语言表达清晰、简洁,吸引了我的关注。文章结构紧凑,逻辑严谨,使我能够轻松地理解作者的观点。此外,作者还使用了丰富的例子和引文,为观点提供了充分的支持和验证。

  • 互联网医疗 | 基于音视频SDK和即时通讯IM技术实现线上问诊功能

    计算机学姐: 内容丰富,细节满满,干货!

  • 即时通讯实践(二):uniapp实现IM即时通讯聊天功能

    weixin_44212621: 收费吗?🤔支持 h5、小程序吗?

大家在看

  • Python SQL 注入攻击及其防护措施:编写安全的数据库查询
  • Sqli-labs less-27 375
  • C语言动态内存管理 11
  • 【C++刷题】力扣-#121-买卖股票的最佳时机 336
  • VBA代码按模板批量新建Excel工作簿(1.0) 246

最新文章

  • 全球布局、极速集成:IMkit搭建全面、快捷、安全的聊天应用
  • 安全合规、资源专属!即构科技联合亚马逊云科技推出实时互动解决方案
  • 互联网医疗 | 基于音视频SDK和即时通讯IM技术实现线上问诊功能
2024年19篇
2023年36篇
2022年38篇
2021年43篇
2020年35篇
2019年26篇
2018年37篇
2017年18篇

目录

目录

评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值

玻璃钢生产厂家户外玻璃钢景观雕塑江西景区绿化玻璃钢花盆玻璃钢火锅店龙雕塑喷水龙头小龙卡通雕塑玻璃钢哪家正规商场户外美陈拱门大理市玻璃钢雕塑设计代理个旧市玻璃钢雕塑定制玻璃钢花盆绘画平板浙江室内商场美陈采购兰州动物玻璃钢雕塑定制送子观音玻璃钢雕塑辽宁玻璃钢人物雕塑价格浙江开业商场美陈销售公司白银玻璃钢动物雕塑定制玻璃钢足球卡通雕塑云南玻璃钢雕塑厂定西玻璃钢景观雕塑欧式玻璃钢人物雕塑厂家现货福建定制玻璃钢雕塑生产厂家玻璃钢卡通动漫雕塑视频江苏校园玻璃钢雕塑哪家专业商场美陈公司优质商家安庆欧式玻璃钢雕塑市场许昌公园景观校园玻璃钢雕塑厂家淮安玻璃钢卡通雕塑厂家甘肃玻璃钢商场美陈雕塑重庆玻璃钢雕塑灯价格拉丝玻璃钢雕塑价格安徽个性化玻璃钢雕塑定做价格义乌玻璃钢动物雕塑香港通过《维护国家安全条例》两大学生合买彩票中奖一人不认账让美丽中国“从细节出发”19岁小伙救下5人后溺亡 多方发声单亲妈妈陷入热恋 14岁儿子报警汪小菲曝离婚始末遭遇山火的松茸之乡雅江山火三名扑火人员牺牲系谣言何赛飞追着代拍打萧美琴窜访捷克 外交部回应卫健委通报少年有偿捐血浆16次猝死手机成瘾是影响睡眠质量重要因素高校汽车撞人致3死16伤 司机系学生315晚会后胖东来又人满为患了小米汽车超级工厂正式揭幕中国拥有亿元资产的家庭达13.3万户周杰伦一审败诉网易男孩8年未见母亲被告知被遗忘许家印被限制高消费饲养员用铁锨驱打大熊猫被辞退男子被猫抓伤后确诊“猫抓病”特朗普无法缴纳4.54亿美元罚金倪萍分享减重40斤方法联合利华开始重组张家界的山上“长”满了韩国人?张立群任西安交通大学校长杨倩无缘巴黎奥运“重生之我在北大当嫡校长”黑马情侣提车了专访95后高颜值猪保姆考生莫言也上北大硕士复试名单了网友洛杉矶偶遇贾玲专家建议不必谈骨泥色变沉迷短剧的人就像掉进了杀猪盘奥巴马现身唐宁街 黑色着装引猜测七年后宇文玥被薅头发捞上岸事业单位女子向同事水杯投不明物质凯特王妃现身!外出购物视频曝光河南驻马店通报西平中学跳楼事件王树国卸任西安交大校长 师生送别恒大被罚41.75亿到底怎么缴男子被流浪猫绊倒 投喂者赔24万房客欠租失踪 房东直发愁西双版纳热带植物园回应蜉蝣大爆发钱人豪晒法院裁定实锤抄袭外国人感慨凌晨的中国很安全胖东来员工每周单休无小长假白宫:哈马斯三号人物被杀测试车高速逃费 小米:已补缴老人退休金被冒领16年 金额超20万

玻璃钢生产厂家 XML地图 TXT地图 虚拟主机 SEO 网站制作 网站优化