资讯
展览资讯 大型展会 灯光节 大型盛典 赛事 中标捷报 产品快讯 热门话题 艺术节 活动 演出 新闻 数艺报道 俱乐部签约
观点
大咖专访 观点洞察 书籍推荐 吐槽 设计观点 企业访谈 问答 趋势创新 论文 职场方法 薪资报价 数艺专访
幕后
幕后故事 团队访谈 经验分享 解密 评测 数艺访谈
干货
设计方案 策划方案 素材资源 教程 文案资源 PPT下载 入门宝典 作品合集 产品手册 电子书 项目对接
  • 0
  • 0
  • 0

分享

《泡泡堂》开发商Nexon+腾讯TRTC,将在线会议常用实时音视频技术引入3D虚拟社交 |「游戏技术与游戏进化」集

2023-01-12

期,韩国游戏开发商Nexon宣布与腾讯云达成合作,双方将基于腾讯云的实时音视频(TRTC)技术,共同搭建虚拟世界社区平台NEXONTOWN。

Nexon作为韩国老牌游戏公司,拥有诸多经典游戏IP,如《地下城与勇士》《跑跑卡丁车》等。近年来,韩国游戏公司纷纷向元宇宙、Web 3领域靠拢,寻求新的增长机会。Nexon也不例外,早些时候启动了元宇宙平台《冒险岛世界(Maple Story Worlds)》的测试运营,《冒险岛世界》基于《冒险岛》IP的素材资源,用户可以利用素材创造自己的世界,Nexon将其定位为类似Roblox的UGC平台。

近期推出的NEXONTOWN则将Nexon旗下《冒险岛》《洛奇(Mabinogi)》《泡泡堂》等经典游戏IP联合起来,旨在为不同游戏的玩家创造共同的沟通空间。NEXONTOWN的开发负责人芮正圭表示:“这是Nexon游戏角色聚在一起,一起沟通的空间,同时也是Nexon游戏各种功能联动的综合性服务平台。”

对于诸多游戏、技术公司入局的3D虚拟社交品类,虚拟形象、社交场景、社交体验是不可或缺的要素。其中,虚拟形象和场景可以借助现有的游戏IP、数字资产等资源快速创建,如何为用户提供独特、高质量的社交体验则成为现阶段3D虚拟社交产品的关键竞争力之一。

RTC(Real-Time Communication,实时通信)技术作为在直播、在线会议、在线教育等B端场景中大量应用并持续迭代的音视频传输技术,也正在成为有多人在线、实时社交需求的3D虚拟社交产品的技术选择。


RTC技术:多种通信技术的复合领域,各家根据资源和业务场景构建解决方案

RTC技术是包含了网络传输、全局调度、媒体处理算法、媒体编解码等诸多相关技术的复杂技术领域,它的发展伴随着互联网的进程,已经历了多代技术架构的演化。2020年全球疫情以来,远程办公、在线协作和在线教育等领域的需求激增,也加速了RTC技术解决方案的发展以及在各行业的应用落地。

现阶段RTC技术架构依赖于大规模的云计算和边缘计算节点资源,因此主流参与者为互联网大厂和有一定基础的RTC PaaS厂商。国内的RTC技术厂商主要有阿里云、腾讯云、华为云、声网Agora、网易云信等。

当前RTC技术架构并没有统一的标准和做法,各家技术厂商根据自身资源和业务特点构建系统和解决方案。

其中,阿里云构建了全球实时传输网络GRTN,并基于GRTN推出了云处理+端渲染架构的RTC“零处理”解决方案。这套“零处理”解决方案旨在突破端侧能力限制,端侧只需进行视频采集和传输,视频传输到云端后就可以利用云端的实时处理引擎和庞大算力进行处理,处理好的视频再被回传到端侧呈现,从而实现终端体验的一致性。

为多人在线语音社交软件Clubhouse提供RTC技术的声网Agora提出了“RTE(Real-Time Engagement)”概念,相比于RTC更聚焦于用户所需的共享时空,即场景。声网采用基于SDN架构的SD-RTN技术,构建了全球实时通信网络,利用边缘节点和智能路由加速技术,能够做到全球端到端延迟控制在400ms以内。

此次Nexon选择合作的TRTC(Tencent Real-Time Communication,腾讯实时音视频)技术是由腾讯的音视频团队经过22年技术积累开发出来,以PaaS产品的形式开放出来的RTC云服务,专长于为各种即时通信提供技术和服务,包括多人音视频通话和会议,屏幕实时分享,音视频实时直播等。


目前,由TRTC技术所支撑的腾讯产品有腾讯会议、企业微信群直播和腾讯课堂等。疫情以来各类远程/在线交互需求猛增,使用腾讯会议等产品的人数也随之增加。

TRTC是一个音视频通讯的云服务,TRTC的SDK则是用户使用它的桥梁。用户可以仅仅通过SDK和应用之间的交互,就能实现音视频实时通讯。

在服务器端,当用户在应用1与应用2的用户进行视频通话时,应用1的SDK和应用2的SDK会先与TRTC云服务进行通讯,由TRTC云服务对双方的音视频数据进行处理和传输。

在播放器端,为了抵抗网络抖动,TRTC会设置一个叫做Jitter Buffer的区域,对数据流起到缓冲作用,再将视频帧交给解码器解码。这样做相对于用一、两秒的延时,换来了实时视频的观感的流畅性。

此外,TRTC使用NACK的方式进行UDP传输,还会应用FEC技术来优化网络抗性。

多重技术的综合运用之下,运用TRTC技术的平台可以使得实测抗丢包率超过80%、抗网络抖动超过1000ms,在弱网环境下,仍然能够提供高质量的音视频通信。



腾讯TRTC与游戏和元宇宙相关领域结合:云游戏、开发工具、提供音视频解决方案

在本次与Nexon合作前,腾讯的TRTC技术已经在游戏和元宇宙相关领域有过不少结合案例。

TRTC为云游戏提供PaaS服务,可以在短时间内将游戏云化,并满足云游戏在超低延时、超大码率、多终端支持等方面的技术要求。

在游戏开发方面,腾讯还开发了 TRTC Unity SDK,帮助游戏开发者快速实现在游戏中的音视频通话。Unity是目前市面上最主流的游戏开发引擎。目前,手游玩家越来越多,开发者意识到,在游戏中集成实时音视频功能可以快速拉近玩家之间的距离,增强游戏体验感,使大家越来越依赖实时互动功能。

除Nexon外,TRTC近期在元宇宙领域也与其他产品展开了合作。

2022年12月,腾讯云宣布支持“Metalife”,让用户能够通过其 TRTC 技术在沉浸式虚拟环境中进行连接。

Metalife是一款来自日本的虚拟通信产品,可以用作元宇宙办公室、在线活动场所、学校教室等,产品发布三周后就突破了两万的用户总量。Metalife采用了TRTC以及音视频解决方案等腾讯云媒体服务。

Metalife的首席执行官Kiyoshi Kondo表示:“……Metalife 很高兴从中受益,借助腾讯云高性价比、高兼容性、高性能的TRTC SDK,让我们的用户能在虚拟世界中更流畅地交流,更真实地互动。”



结 语

RTC技术此前更多在各种B端场景中发展迭代,各自发展出了针对不同场景的解决方案,以应对诸如金融面签场景的可连接性、在线教育场景的多并发等不同需求。

在多样化的B端场景中发展出来的RTC技术,现阶段正在向3D虚拟社交、元宇宙等领域迁移,为3D虚拟社交产品中关键的社交体验提供技术支持。在能够支持大量用户同时在线、稳定、高质量的音视频交互的基础上,3D虚拟社交产品才有条件探索虚拟空间中的独特社交方式,为用户提供新颖的社交体验。

Hello!
我们在为更加闭环、更加高效的服务模式做准备
欢迎加入限定白名单
与我们一起探索

阅读原文

* 文章为作者独立观点,不代表数艺网立场转载须知

本文内容由数艺网收录采集自微信公众号共同虚拟 ,并经数艺网进行了排版优化。转载此文章请在文章开头和结尾标注“作者”、“来源:数艺网” 并附上本页链接: 如您不希望被数艺网所收录,感觉到侵犯到了您的权益,请及时告知数艺网,我们表示诚挚的歉意,并及时处理或删除。

数字媒体艺术 新媒体艺术 泡泡堂 腾讯 3D虚拟社交

13284 举报
  0
登录| 注册 后参与评论