易知微数字孪生实时云渲染技术方案分享

微微菌

| 2023-11-03 15:07 515 0 0

实时云渲染是和基于游戏引擎开发本地部署应用、基于WebGL开发的应用相并列的第三种大型数字孪生应用交付方案，尤其是在业主要求能多终端无门槛使用的诉求中，该方案具有一定的优势。

实时云渲染是基于分布式GPU集群，提供音视频串流、应用云化的云端渲染平台。用户只需上传应用包、发布应用、访问链接三个步骤即可进行云端的渲染体验。适用于GPU渲染工作站、数字孪生以及AR/VR/MR等场景。

云渲染与本地渲染的技术对比

	云渲染	本地渲染
原理	服务器端渲染，通过视频流分发到用户端	客户端渲染
多并发支持	根据云端资源弹性配置	取决于本地设备性能和内容
渲染效果	云端服务器通常都配备高性能显卡，渲染画面逼真，也适用于复杂场景	和本地设备性能相关
交互性	良好，可随意调整角度/方向/位置等	良好，可随意调整角度/方向/位置等
数据安全性	高，客户端无任何应用数据，只接收视频流	低，需下载模型数据
移动端支持	移动端通过浏览器即可体验应用	需安装在移动端，且效果取决于移动端本身性能
对客户端配置要求	极低，能联网即可	高，否则画面卡顿或无法浏览

UE云渲染——像素推流

通过UE的云渲染像素推流功能，可以将渲染的画面实时传输到Web端，支持用户在浏览器中访问数字孪生应用。这种方案的优点是可以让用户在任何设备上访问数字孪生，只要能够打开浏览器即可。同时，这种方案也不需要用户安装任何客户端软件，对于推广和传播数字孪生非常有利。此外，Web端具有更加丰富的样式和交互设计能力，可以让数字孪生更加生动和直观。但基于UE的云渲染像素推流也具有一定的局限性，只适用于UE模型，在实际项目中对于不同浏览器的兼容也存在一定局限。

图 UE像素推流功能技术框架

像素推流技术的框架包含两部分：像素推流插件Pixel Streaming、信令和Web服务器。Pixel Streaming Plugin插件在UE中运行，它使用视频压缩对每个渲染帧的最终结果进行编码，将这些视频帧与游戏音频一起打包成媒体流，并通过直接点对点连接将该流发送到一个或多个连接的浏览器。信令和Web服务器负责协商浏览器和像素流插件之间的连接，并为浏览器提供播放媒体流的HTML和JavaScript环境。