腾讯互娱内容生态部(ContentDevelopment Department,以下简称CDD)正在构建以NVIDIA RTX A6000+ NVIDIA BlueField-2 DPU + Spectrum-3交换机等先进技术为基础的新一代超大分辨率渲染平台。双方团队沿着视频流超低延迟传输这一方向进行持续的技术攻关,将NVIDIA Rivermax整合到生产软件环境中,进一步降低了超大分辨率渲染平台的交互延迟。
本案例主要应用了NVIDIA Rivermax,NVIDIA RTX A6000,NVIDIA BlueField-2 DPU,NVIDIA Spectrum-3交换机。
(资料图片)
客户简介及应用背景
作为国内游戏大厂,腾讯早早布局虚拟制片业务。2020年底,腾讯游戏成立内容生态部门(Content Development Department,以下简称CDD),旗下拥有虚拟人、虚拟制片等多个业务线。2021年11月CDD在深圳坪山建成了总占地3000平米的LED虚拟影棚。影棚配置有40m*6m 的240° 弧形LED立面屏幕,并配有可上下移动的100多平方米的天幕。LED点间距2.3,支持高速拍摄。
为了在硬件和软件上持续保持领先,CDD与业内领先企业频繁交流,不断改进自研软件以提升虚拟拍摄影棚的制作体验。
客户挑战
在虚拟影棚中,LED立面屏幕被分割为多个显示区域,每个显示区域由不同的工作站驱动,其呈现的内容则由其搭载的GPU渲染完成。在实时拍摄过程中,需要LED光照、实时摄像机追踪和实时渲染投屏三者的结合,实现前台演员和虚拟背景之间的完美整合。这种拍摄方案消除了对绿幕合成的需求,让摄像机直接拍摄最终成像。而所有需要在大型LED立面屏幕上显示实时渲染内容的行业都面临着一个普遍挑战,即每个渲染节点其实是一个独立运行工作站,在实际拍摄制片过程中,不仅需要消耗大量的计算资源用于渲染高分辨率高帧率的高品质实时内容,还需要同步所有渲染节点间的技术参数,同时推进所有显示媒介的呈现内容。目前鲜有人在这一领域取得突破,原因可以归纳为以下几个方面:
· 每台工作站需要独立渲染特定显示区域的内容,在保证高标准画面渲染细节的同时还需要维持面板刷新一致,对GPU性能提出了极高要求。
· 节点间存在通讯障碍,普通同步方式不能保证所有节点的帧同步,一旦出现不同步就会造成画面撕裂影响观看体验。
· 节点间参数同步和数据传输占用了大量的网络带宽和CPU资源,进一步造成节点间时间同步的不可预测。
由于上述瓶颈导致渲染平台整体无法进一步提升成片的帧率和分辨率,无法进一步满足人们对于高帧率渲染实时内容的需求。
应用方案
客户的超大分辨率渲染平台通过集成NVIDIA Rivermax整体方案,解决了这些难题。完成集成后的系统架构如下图所示:
图1.系统架构图
新的平台由NVIDIA RTX A6000承担分布式实时渲染任务。RTX A6000拥有48GB显存,可以将拍摄场景需要的模型和纹理数据全部加载到显存中,在拍摄过程中按需调用。渲染节点支持多GPU进行视口渲染,此模式支持创作者指定一个GPU渲染特定视口,并通过NVLink将渲染结果直接复制到另一个GPU上显示输出。而多个显示区域则通过NVIDIA Quadro Sync II同步vsync信号,并结合NVIDIA专业显卡提供的NVAPI swapgroup/barrier技术将渲染结果完美的拼合在一起。此外整个渲染平台通过添加NVIDIA BlueField-2 DPU 和NVIDIA Spectrum-3 交换机,具备了运行NVIDIA Rivermax整体方案的硬件能力。NVIDIA Rivermax提供了高性能的流媒体传输服务,这种服务在Windows平台上实现了GPU Direct P2P支持,消除了额外的GPU显存到系统内存的拷贝,降低了操作系统层面的延迟,同时也降低了CPU资源的占用,从而让整个渲染平台的运行更为可靠。启用NVIDIA Rivermax后,单颗CPU核心可以轻松收发100Gbps的媒体流。
图2.单颗CPU核心收发100Gbps媒体流
而且整个平台也具备了部署DOCA Firefly的条件。DOCA Firefly是NVIDIA提供的基于硬件的精确时间同步服务。在NVIDIA BlueField-2 DPU 上部署DOCA Firefly可以实现纳秒级别的时间同步精度,其典型值如下表所示:
使用效果及影响
腾讯CDD综合NVIDIA提供的各项产品,使用NVIDIA RTX A6000实时渲染,使用NVIDIA Rivermax在GPU显存间直接传输数据,使用NVIDIA BlueField-2 DPU部署精确时间服务DOCA Firefly来同步所有渲染节点的系统时钟,使用NVIDIA Spectrum-3交换机复制GPU显存数据并承载时钟网络,通过这一系列改进措施,最终实现了在LED立面屏幕上以超低延迟呈现数字流资产的能力。
技嘉(GIGABYTE) RTX4090 24G 魔鹰超级雕 台式机电脑电竞游戏旗舰独立显卡 RTX4090 魔鹰【注册四年保修】
进入购买
英伟达(NVIDIA) Tesla T4 A40 V100 A100 H100 A800显卡GPU Quadro GV100 32G
进入购买
标签:
腾讯互娱内容生态部(ContentDevelopmentDepartment,以下简称CDD)正在构建以NVIDIARTXA6000+NVIDIABlu...
市城管局开展慰问环卫工人活动
HAPPYNEWYEAR新年到福运到HAPPYNEWYEAR马上就要迎来春节了作为我们最盛大的传统节日春节已经逐渐演变成...
1、一年四季都可以在市场上看到草莓,但最佳种植时间通常是在9月初。2、种植草莓时,要注意提供混有腐殖...
腊月二十九,挂灯笼,贴春联,万家团圆,喜气洋洋……上午8时许,在山东省潍坊市临朐县某乡镇街道旁院子...
党组织书记专访|——访市公共资源交易管理委员会办公室党组书记、主任尚高明
数据显示,截至2022年末,我国普惠小微贷款余额同比增长23 8%,比各项贷款余额增速高12 7个百分点;普...
国家消防救援局发布春节消防安全提示
天府机场专线1号线起讫点天府国际机场↔春熙路出收车时间天府国际机场:07:30-23:30春熙路:05:00-23:30...
目前,我国沥青产业的上市公司数量较多。其中,上游的石油加工及炼焦行业的公司有华锦股份(000059 SZ)...
贵阳南明区2022年“十件实事”圆满交卷
重点四个字!1月20日周五早评:重点四个字!一、市场分析重点四个字:持股过节;谈三点:1、指数无忧,...
有些人嗜睡,有些人失眠,新冠感染后睡眠成了许多人关注的问题。 阳过后你是睡不着还是睡不醒 ?阳后...
中国诚通发展集团(00217)发布公告,于2023年1月19日,诚通融资租赁(公司间接全资附属公司)与承租人...
2023桂林年货消费券为什么用不了?可能有以下几种原因1、用户消费的商家不参与优惠券活动,无法核销用户...
开启年货“备货”模式。 随着岁末脚步的不断临近,人们纷纷开启年货“备货”模式,各地特产跨越山海...
①1月17日,中铁二局建设者进入海底隧道北主线施工现场。②1月17日,中铁二局建设者在海底隧道施工现场...
本文为英军视角下的朝鲜战争佛弥地伏击战1951年1月2日到3日的高阳追击战(英军也叫佛弥地,HappyValley...
1、拉丁植物动物矿物名:Cunninghamialanceolata(Lamb )Hook [PinuslanceolataLamb ]。文章到此就分
中国白酒的发展历史源远流长,邛崃因独特的历史渊源,在白酒史上留下浓墨重彩的一笔,邛崃是“中国白酒原酒...
X 关闭
X 关闭