英伟达详细介绍可变速超级采样VRSS,大大提升VR体验VR/AR科技头条

利用图灵架构,英伟达显卡能够以原生分辨率提供VR体验所需的性能。为了进一步提升图像清晰度,英伟达在CES2020大会期间发布了“可变速率超级采样(VariableRateSupersamplin;VRSS)功能。

日前,英伟达资深软件工程师DeepChandPalswamy和资深系统软件工程师SwaroopBhonde撰文对其进行了介绍,下面是映维网的具体整理:

可变速率超级采样(VRSS)扩展了图灵架构的可变速率着色(VariableRateShading;VRS)功能,它可以通过执行选择性超级采样来改善图像质量。VRSS仅在GPU周期可用时开启,但你可以选择地进行启用。无需应用开发者集成,这项功能可完全在英伟达显示驱动中处理。

1.背景

1.1超级采样

SSAA(超级采样抗锯齿)是一种早期的抗锯齿方式。具体来说,先把图像映射到缓存并把它放大,再用超级采样对放大后的图像像素进行采样,一般选取2个或4个邻近像素,然后将采样混合起来,生成最终像素,令每个像素拥有邻近像素的特征,从而致使图形边缘的过渡趋于平滑。最后再把最终像素恢复至原来大小的图像,保存到帧缓存,并输出到显示器。

MSAA(多重采样抗锯齿)主要是通过专用的多重采样缓冲区(渲染目标)来实现。缓冲区的可用配置为2倍,4倍,8倍。MSAA发生在管道的光栅化阶段。你可以理解成是一种特殊的SSAA。MSAA只对Z缓存(Z-Buffer)和模板缓存(StencilBuffer)中的数据进行超级采样抗锯齿的处理,亦即只对多边形的边缘进行抗锯齿处理。相比于对画面所有数据进行处理的SSAA。

尽管SSAA有利于提升视觉质量,但它存在自身的局限性:

SSAA是性能密集型功能:像素负载与样本数量成线性比例难以精细控制着色率:无法对4xMSAA缓冲区执行2x超级采样,同时无法根据渲染区域或任何其他条件选择性地对对象进行着色。

图1:MSAA和SSAA的像素着色器执行。MSAA为覆盖样本执行一次像素着色器并共享数值,SSAA为所有样本执行像素着色器。

1.1.1MSAA和SSAA的示例

图2将每个像素显示为一个正方形,点表示一个像素内的样本位置。

在运行像素着色器之前,硬件会生成一个“覆盖遮罩”。它存储当前三角形所覆盖及未覆盖的样本。

在方框1中,覆盖所有4个样本。在方框2中,覆盖3个样本。

MSAA超级采样像素着色器为中心的像素执行一次,仅生成一个着色并将其复制到“覆盖”样本中。像素着色器为每个采样位置的样本执行一次,为每个覆盖样本生成唯一的着色。方框1:所有4个样本都包含完全相同的着色,所以将它们平均会产生相同的着色;没有质量提升方框1:所有4个样本均包含唯一的着色。所以,将它们平均会产生更为准确的着色;提升质量+内部抗锯齿方框2:3个样本包含完全相同的着色,第4个样本包含背景色,所以将它们平均会产生抗锯齿输出;没有质量提升,但边缘抗锯齿方框2:3个样本包含唯一的着色,第4个样本包含背景色,所以将它们平均会产生更正确的和抗锯齿的输出;提升质量+边缘抗锯齿

1.2超级分辨率

应用可以具有用于缩放渲染分辨率的动态缩放功能。这个方法涉及按比例缩放渲染目标。但这种缩放是整帧执行,甚至外围都是以更高的分辨率缩放和渲染,而VR并不真正需要这样。更好但更复杂的解决方案是仅缩放中心区域,并按比例缩小以提高质量。

1.3目标区域

对于VR,渲染区域可分为中心区域或外围区域。用户一般是把注意力集中在VR屏幕的中心区域。透镜畸变会严重挤压图像的外围,但用户一般无法感知。仅在中心区域进行的任何优化都会改善最终用户的整体体验。

1.4图灵可变速率着色(VRS)

图灵的VRS功能能够选择性地控制整个渲染表面的着色率。VRS可以使用以下两种方式之一来动态改变实际像素着色期间的着色率,而不是每个像素执行一次像素着色器:

粗略着色:每个多栅格像素执行一次像素着色器,然后将相同的着色复制到像素超级采样:每个单栅格像素执行多次像素着色器。

VRS功通过仅对注视区域进行超级采样来改善视觉质量。

2.可变速率超级采样(VRSS)

2.1介绍

VRSS的工作原理是选择性地对帧中心区域进行超采样:固定注视点超级采样。你可以使用VRS功能为渲染目标应用不同的着色率。在对中心区域进行超采样的同时,你不会触及外围区域。VRSS仅在空闲GPU周期可用时进行选择地启动。

图3:VRSS的示例。

根据应用程序选择的MSAA级别,中心区域可以进行多达8倍的超级采样。所有这一切都可以由英伟达显示驱动处理,无需任何应用集成。

用户可以通过NVIDIAControl(控制面板)->“Manage3DSettings(管理3D设置)”页面->“ProgramSettings(程序设置)”标签启用VRSS。在开启时,你可以看到数个选项。

Adaptive(自适应):将超级采样应用于帧的中心区域。中心区域的大小取决于可用的GPU余量AlwaysOn(始终开启):将超级采样应用于固定大小的中心区域。这个模式不考虑GPU余量,并可能导致丢帧。

这项功能仅适用于满足以下条件并接受英伟达性能分析的应用:

DirectX11VR应用MSAA+正向渲染

2.2幕后

VRSS不需要任何开发者集成,并且完全是由英伟达显示驱动实现和处理。

英伟达显示驱动处理多个功能板块,包括:

帧资源跟踪:驱动跟踪每帧遇到的资源,并构建启发式模型来标记可以调用VRS的情景。在配置VRS着色率时请注意MSAA级别:在图像中心使用的超级采样因子。提供用于配置VRS遮罩的渲染目标参数。帧渲染监视:这涉及测量跨帧的渲染负载,应用程序的当前帧速率,基于头显刷新率的目标帧速率等。这反过来会计算VRSS自适应模式所需的渲染统计信息。可变速率超级采样支持:如前所述,VRS允许你能整个渲染表面配置着色率。这是通过着色率遮罩和着色率查找表完成。有关所述技术的详细信息,请参见TuringVariableRateShadinginVRWorks页面。VRS架构设置:处理VRS遮罩和VRS着色率查找表的配置。VRS框架根据性能统计信息配置,如下所示:

3.1:VRS遮罩:中心区域遮罩的大小与余量可用性成比例配置

3.2:根据检测到的MSAA缓冲区采样数配置VRS着色率

图4:VRS的帧周期表格

3.3VRSS模式

Adaptive(自适应):自适应模式将考虑性能限制,它会尝试最大化超级采样区域,同时不影响VR体验。在这里,中心区域的大小与可用的GPU余量成比例增大/缩小。

图5:自适应模式的中心区域动态变化。绿色遮罩描绘了超采样区域。基于GPU负载(场景复杂度),超采样区域会缩小并增长。

AlwaysOn(始终开启):这个模式始终对固定注视点中心区域进行超级采样,从而最大程度地提高图像质量。中心区域的大小足以覆盖中心的用户视场。它可以帮助用户感知最大的质量增益。但是,这可能会导致性能密集型应用出现丢帧情况。

4.开发者指南

VRSS的优势包括:

无需集成:不需要显式VRSAPI集成。完全封装在英伟达显示驱动之中。易用:可通过简单的开关(利用英伟达控制面板)打开/关闭超级采样。质量提升:超级采样可提供最高的渲染质量,并尽可能减轻锯齿。性能模式:自适应模式尝试在不减损性能的情况下提高图像质量。无需维护:因为整个技术是由驱动处理,所以无需开发者进行维护

对VRSS应用程序进行性能分析的标准如下:

DirectX11VR应用MSAA+正向渲染:超级采样需要使用MSAA缓冲区,所以它兼容使用MSAA的应用。所应用的超级采样因子级别基于MSAA缓冲区中使用的基础样本数量。对于MSAA-2倍,中心区域着色2倍;对于MSAA-4倍,着色4倍。MSAA级别越高,超级采样效果越强。

受益于超级采样的内容同样会受益于VRSS。超级采样不仅可以减轻锯齿现象,而且可以显示图像中的细节。但需要注意的是,质量提高的程度因内容而异。

图6:受益于VRSS的示例。

遇到以下类型的内容时,超级采样的效果将会非常明显:

高分辨率纹理高频内容具有Alpha通道的纹理,如栅栏,树叶,菜单图标和文本等。

但下面情况则没有太大的质量提升:

平面阴影几何低细节层次的纹理

5.已兼容的游戏和应用

VRS技术已经作为显式编程API提供,并提供用于应用集成的精细控制。开发者同时可以利用VRS进行透镜匹配着色(lensmatchedshading),内容自适应着色,注视追踪着色等。

VRSS开箱即用,无需为基于DirectX11MSAA的应用进行任何应用集成。

THE END
1.虚拟现实技术VR未来是怎样的体验在不久的将来,虚拟现实技术(Virtual Reality, VR)将成为我们日常生活中不可或缺的一部分。它通过沉浸式体验,让用户置身于一个完全模拟的环境中,与现实世界相比,它能够提供更加真实、互动和个性化的体验。这项技术已经从科幻电影中的梦想变成了现实,正在改变我们的工作方式、学习习惯以及娱乐活动。 https://www.twhqeth1hf.cn/bai-jia-dian/427625.html
2.VR技术带你穿越虚拟景区,沉浸式体验新世界!VR技术,全称为虚拟现实技术,它是一种能够通过计算机模拟生成的三维虚拟世界。这个虚拟世界可以提供视觉、听觉等多种感官的模拟体验,让用户仿佛身临其境,体验到一种全新的、沉浸式的感觉。让我们想象一下,你戴上VR设备,瞬间就被传送到了一个遥远的景区。你可以不受任何限制地观察这个三维虚拟景区的内部结构,无https://baijiahao.baidu.com/s?id=1794848643369009558&wfr=spider&for=pc
3.VR体验原理介绍方案炫群展馆展厅多媒体文化科技创意VR体验 虚拟现实体验具有3I的特征,分别是沉浸感(Immersion)、交互性(Interaction)和想象性(Imagination),主要优势也是这三个特征体现的: 沉浸性,是指利用计算机产生的三维立体图像,让人置身于一种虚拟环境中,就像在真实的客观世界中一样,能给人一种身临其境的感觉; 交互性,在计算机生成的这种虚拟环境中,人们可以http://www.xuanqun.com/zhinenshibielei/129.html
4.体验式安全区vr体验馆介绍安全vr体验馆体验式安全区vr体验馆介绍_安全vr体验馆 1、一站式vr安全体验馆以实际施工中的安全体验区为切入点,利用先进的VR技术创建更真实的虚拟体验区。使用先进的硬件和软件设备,施工人员可以在室内的施工过程中经历各种类型的安全事故。 2、体验式安全区vr体验馆利用vr虚拟现实技术专用设备的教育培训训练方法远比浏览消防安全https://www.jiamengfei.com/article/1108
5.VR全景体验项目介绍(初版)ppt参考范例.ppt* * * * * * * * * * * * * * * * * * * * * * * * * * * 【VR全景体验项目介绍】 目录 Catalog VR全景体验的互动方式 VR全景体验的应用领域 VR全景体验的优势 VR艺术的表现 VR是什么 VR 360 给您不一样的艺术体验 VR 是英文Virtual Reality的简称,即虚拟现实技术,它具有多感知性、存在https://max.book118.com/html/2020/1205/8136075115003023.shtm
6.vr体验馆的特点和前景介绍元居科技二、vr体验馆前景介绍 VR体验馆行业是指利用虚拟现实技术提供沉浸式体验的场馆。这种场馆通常使用头戴式显示器、手柄等设备,让用户在虚拟世界中获得身临其境的感觉。 随着科技的进步,VR体验馆行业得到了快速发展。根据市场研究机构的数据,全球VR市场规模不断扩大,VR设备的销量也在逐年增长。VR技术已经被广泛应用于游https://www.mvpmeta.com/newdetail/2285.html
7.VR巧渡金沙江模拟体验介绍星幻元宇PICO深圳市星幻元宇科技有限公司 提供的 VR巧渡金沙江模拟体验介绍,VR巧渡金沙江XHYY-PS500软件通过场景模拟互动科普金沙江战役,了解为跳出数十万国民党军的围追堵截,粉碎蒋介石围歼红军于川黔滇的计划,采取的一连串“巧招”,体验不同巧计场景下,与国民党军队惊心动https://shenzhen.11467.com/info/33751770.htm
8.深圳弥天VR游戏体验馆(5G智能VR游戏舱)娱乐介绍,弥天VR游戏体验深圳弥天VR游戏体验馆(5G智能VR游戏舱)地址位于广东省深圳市宝安区沙井街道西环路2105号新沙天虹购物中心4楼,马蜂窝深圳弥天VR游戏体验馆(5G智能VR游戏舱)景点介绍包含了深圳弥天VR游戏体验馆(5G智能VR游戏舱)简介、地址、电话、网址等弥天VR游戏体验馆(5G智能VR游戏https://www.mafengwo.cn/poi/105446336.html
9.VR生命安全科普体验设备供应全面介绍!VR生命安全科普体验设备|供应全面介绍! 为增添趣味性,结合科技发展,挖掘时代特点,中天科普从生产安全、消防安全,居家安全等多个主题版块展示安全科普教育的重要性。体验者通过深入了解在日常生活中所会遇到的危机和威胁,并学习如何保障自身生命的方法。互动性强的体验设备,新奇有趣的多媒体装置,富有代入感的内容设计。https://www.caigou.com.cn/news/2022060641.shtml
10.探秘日本VR线下体验馆:月流水100万+是常态?以上虽然不能代表所有日本的VR线下体验店,也没有达到月流水100万+的常态,不过从每家店的体验人数来看,VR体验店这门生意在日本的表现是值得关注的。 日本VR线下体验馆的特点 在亲身体验并与日本诸多相关业内人士交流之后发现,日本的VR线下体验馆市场还是有一些特征。 https://www.tmtpost.com/3124118.html
11.什么是VR大空间?主要特点与应用领域介绍主要特点与应用领域介绍 1、什么是VR大空间? VR大空间是指利用空旷的空间,让使用VR应用(例如VR游戏)的人能够移动体验的一种项目方式。当用户可以在空间内进行物理移动时,就可以在虚拟世界中复制现实世界的动作,从而使虚拟环境看起来更加真实。 图源网络 2、大空间VR的主要特点https://www.3dcat.live/share/post-id-540/
12.在日本体验火遍全球的VR吧!除了本次为您介绍的设施之外,日本全国各地能体验VR的场所越来越多。 例如游乐设施"TOKYO JOYPOLIS"(东京都台场)、AEON LakeTown mori(埼玉县越谷市)的"VR中心",豪斯登堡的"虚拟世界"(长崎县)等。 来日本旅游时,别忘了去体验一下各种VR吧。 TNM & TOPPAN博物馆剧场 https://www.meipian.cn/ggynp7m
13.VR创业潮已退,那些线下体验馆为什么还活着?界面·财经号据内场工作人员王璇(化名)介绍,这个VR体验馆是全北京最大的,共有4000平米,分为VR体验收费区和大厅免费休息区,大厅的桌游、台球、小霸王游戏机等都可以免费体验,而VR项目是收费的。宣传资料上介绍的也是全馆占地4000平米,并不是5000平米。 王璇说道,“因为现在是淡季,所以没有什么人玩,但周末会多一点。” https://m.jiemian.com/article/3702209.html
14.VR沉浸体验的要求muyouking大家好!今天我来这里主要介绍的是使用UE4做VR内容的一些优化技巧。VR需要给大家一个沉浸式的体验,这要求两点:一点是你的画面要尽可能的精美,另外一点是你的呈现要尽可能的流畅。 这两点其实是相互矛盾的,因为你画面做的越细致、越精美,其实你的内容就越重,你的渲染压力也就越大。你要做到75帧双眼同时渲染难度就https://www.cnblogs.com/muyouking/p/6714711.html
15.《塞尔达传说:荒野之息》VR模式介绍海拉鲁大陆的全新体验想要体验《塞尔达传说:荒野之息》VR模式非常简单,只要在游戏菜单的“系统”中选择“选项”,切换到“使用VR眼镜”,再将Switch本体插入便可以体验了,扩大化的海拉鲁大陆将会通过VR眼镜展现。 堂田监督表示本作推出VR模式的理念是希望早已通关游戏的玩家能够通过一种新的方式在海拉鲁大陆再游玩一番。VR模式下保留游戏此前https://www.ali213.net/news/html/2019-4/421705.html
16.vr电力培训vr安全体验vr应急演练AR巡检ARMR电力徐州幻威动力智能科技专注于vr电力安全体验馆,vr应急处置,提供vr应急培训,现场急救VR,事故体验,有限空间安全以及电力安全培训,详情致电18018461845.http://www.huanpower.com/
17.VR音乐体验行业发展预测分析.docxVR音乐体验行业发展预测分析第1页 VR音乐体验行业发展预测分析 2 一引言 2 对音乐与VR技术结合的简要介绍 2 VR音乐体验行业发展的意义及背景 3 二当前VR音乐体验行业现状 4 国内外VR音乐体验的发展现状 4 主要的应用场景及用https://www.renrendoc.com/paper/368332840.html
18.虚拟现实VR(精选十篇)虚拟现实VR 篇1 1 什么是虚拟现实VR 其实VR设备的最大的特点,就是能够带给人一种身临其境的感觉,这也是人们所向往的未来科技体验。当用户带上VR设备观看内容,就好像进入到另外一个真实的世界,即使这个世界是虚拟出来的,而内容中的现实环境在千里之外。 https://www.360wenmi.com/f/cnkey9jz2cxg.html
19.VR体验馆存在的意义及其不同环境的应用建筑工地上发生一些事故是不可避免的。为了避免事故的发生,VR体验馆为我们提供了一个提高施工安全意识的好地方,通过VR模拟真实环境,避免误操作造成事故。接下来我给大家详细介绍一下“VR体验馆存在的意义及其不同环境的应用”。 一、VR体验馆存在的意义 http://www.sksky.cn/news/698.html
20.今天是第一次体验VR,过程十分满意,还可今天是第一次体验VR,过程十分满意,还可以帮配镜片,我虽然散光比近视严重但是也没啥影响挺好的。会有工作人员介绍设备使用以及游戏种类,然后先玩的射箭游戏练练手,小哥重复问了几次"确定?" 可能是没想到情侣来会这么佛系吧哈哈哈哈。这玩意,啥都好就是废手,然后换了个射击游戏,打怪的,也挺爽挺刺激,最后那个巨人https://m.dianping.com/review/727428734
21.广东VR安全体验馆沈阳腾越建筑工程有限公司与汉坤实业的合作的主要是软件方面的服务,市面上各家VR体验馆的硬件趋同,真正的差异体现在软件方面,也就是场景真实度、细腻度等软件体验,汉坤实业在不断优化场景的前提下,提供售后三年的免费软件服务,保证施工单位可在不同工地重复利用VR安全体验馆,并且教育场景越来越细腻、真实,效果越来越好http://www.hkvrkj.com/index/Article/info.html?cate=59&id=38