0

0

OpenSVBRDF发布:材质界的ImageNet级别的大规模6维材质实拍数据库

王林

王林

发布时间:2023-11-26 17:26:57

|

1127人浏览过

|

来源于51CTO.COM

转载

在计算图形学领域,材质的外观描述了真实物体与光线之间的复杂物理交互。这种描述通常被称为随空间位置变化的双向反射分布函数(Spatially-Varying Bidirectional Reflectance Distribution Function,缩写为 SVBRDF)。在视觉计算中,它是不可或缺的组成部分,并广泛应用于文化遗产、电子商务、电子游戏和视觉特效等领域

在过去的二十年中,特别是深度学习流行之后,学术界和工业界对于高精度、多样化数字材质外观的需求不断增加。然而,由于技术方面的挑战,采集大型数据库仍然是一项相当困难的任务,目前能够公开使用的材质外观实拍数据库数量非常有限

为此,浙江大学计算机辅助设计与图形系统全国重点实验室和杭州相芯科技有限公司的研究团队联合提出了一种新型集成系统,用于鲁棒、高质量和高效地采集平面各向异性材质外观。利用该系统,研究团队构建了 OpenSVBRDF 公开材质数据库

☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 免费无限量使用 DeepSeek R1 模型☜☜☜

OpenSVBRDF发布:材质界的ImageNet级别的大规模6维材质实拍数据库

以下是OpenSVBRDF数据库中一些材质样例的展示,如图1所示。每一行都属于同一种材质类别

这是第一个大规模 6 维 SVBRDF 的实测数据库,共有 1,000 个高质量平面样本,空间分辨率为 1,024×1,024,等效为超过 10 亿个实测 BRDF,涵盖了包括木材、织物和金属在内的 9 种类别。

数据库主页:https://opensvbrdf.github.io/

目前,数据库对非商业应用完全免费。只需在网站上提交基本信息申请账号,经过审核后,即可直接下载包括GGX纹理贴图在内的相关数据和代码。相关研究论文《OpenSVBRDF: 一个包含测量空间变化反射性的数据库》已被计算机图形学顶级国际会议ACM SIGGRAPH ASIA 2023(期刊论文)接收

OpenSVBRDF发布:材质界的ImageNet级别的大规模6维材质实拍数据库

请点击以下链接查看论文主页:https://svbrdf.github.io/

技术挑战

在不改变原意的情况下,需要重写的内容是:根据[Lawrence et al. 2006],直接采样方法是在不同的光照和观察角度下对物理材质进行密集测量。尽管这种方法可以获得高质量且稳定的采集结果,但它的效率较低,需要大量的时间和存储成本。另一种选择是基于先验知识的重建方法,它可以从稀疏的采样数据中重建材质。虽然这种方法提高了效率,但当先验条件不满足时,重建的质量可能不如人意[Nam et al. 2018]。此外,尽管当前的光路复用技术达到了较高的采集效率和重建质量,但在处理高度复杂的材质,如拉丝金属和抛光木皮等方面,算法的鲁棒性还有待提高[Kang et al. 2018]

OpenSVBRDF发布:材质界的ImageNet级别的大规模6维材质实拍数据库

图 2:现有材质采集研究的代表工作。从左到右分别是 [Lawrence et al. 2006],[Nam et al. 2018] 以及 [Kang et al. 2018]。其中 [Kang et al. 2018] 为该团队在 2018 年发表于 ACM SIGGRAPH 的早期工作。

Artbreeder
Artbreeder

创建令人惊叹的插画和艺术

下载

硬件

为高效扫描材质外观,研究团队搭建了一个接近半立方体的近场光照多路复用设备,其尺寸约为 70cm×70cm×40cm。样本被放置在一块透明的亚克力板上,可以通过抽屉滑轨快速滑入 / 滑出,来实现高吞吐率。该设备由 2 台机器视觉相机和 16,384 个高亮度 LED 组成,两台相机分别从大约 90 度(主视角)和 45 度(次视角)的角度拍摄样本,LED 分布在设备的 6 个面上。自主研发的高性能控制电路负责对每个 LED 进行独立亮度控制,并在硬件层面实现了光源投射和相机曝光的高精度同步。

OpenSVBRDF发布:材质界的ImageNet级别的大规模6维材质实拍数据库

请看图3:采集设备的外观以及从两个不同角度拍摄的照片

采集重建

本系统独特地融合了目前流行的基于网络预测和基于微调的两种方法,以提高物理采集的效率。通过可微分光照图案的优化,同时通过微调进一步提升结果的质量。这是首次实现对平面SVBRDF高鲁棒性、高质量和高效率的采集和重建

具体而言,为了重建物理样本,研究人员首先通过在均匀照明下匹配密集的SIFT特征来建立两个相机视角之间的高精度对应关系。对于物理采集,首先将光照图案作为自编码器的一部分进行优化,以实现高效的采集。该自编码器会自动学习如何基于两个视角的测量值来重建复杂外观,并将结果表示为中间神经表达。随后,通过绘制图像误差对神经表达进行微调,以提高最终结果的质量和鲁棒性,这是根据主视角相机在63个等效线性光源下拍摄的照片来进行的。图3展示了整个系统的处理流程。详细信息请参阅原文论文

OpenSVBRDF发布:材质界的ImageNet级别的大规模6维材质实拍数据库

图 4:整个系统的采集重建流程。

结果

研究团队收集了外观数据,并共计采集了1,000个样本,共分为9个类别。为了更方便地使用基于物理标准绘制管线(PBR),该研究还将神经表达适配至业界标准的各向异性GGX BRDF模型参数。图5展示了材料重建结果的分项参数和属性。每个样本都包含193张原始HDR照片(总大小为15GB)、中间神经表达(290MB)以及6张贴图,其中包括表示GGX参数的纹理贴图和透明度贴图(总大小为55MB)。神经表达和纹理贴图的空间分辨率均为1,024×1,024

OpenSVBRDF发布:材质界的ImageNet级别的大规模6维材质实拍数据库

重写后的内容:图5:重建材质结果的分项属性(包括神经表达、漫反射率、高光反射率、粗糙度等)

为了证明重建结果的正确性,研究人员将主视角下的照片(下图第一行)和神经表达绘制结果(下图第二行)进行了比较。定量误差(以 SSIM/PSNR 表达)标注在绘制图片的底部。由下图结果可见,本系统实现了高质量材质重建(SSIM>=0.97, PSNR>=34db)。

OpenSVBRDF发布:材质界的ImageNet级别的大规模6维材质实拍数据库

图 6:实拍照片和神经表达绘制结果在主视角下的对比。

为了进一步证明重建结果的视角域泛化性,研究人员将点光源照射下、两个视角所拍摄的照片和使用 GGX 拟合参数绘制的结果进行了比较,验证了重建结果的跨视角正确性。

OpenSVBRDF发布:材质界的ImageNet级别的大规模6维材质实拍数据库

图片 7:比较实际拍摄照片和使用各向异性 GGX 拟合参数绘制的结果在两个视角下的对比

研究人员还展示了该数据库在材质生成、材质分类以及材质重建三方面的应用。具体细节请参考原始论文。

OpenSVBRDF发布:材质界的ImageNet级别的大规模6维材质实拍数据库

图8展示了利用OpenSVBRDF训练MaterialGAN来实现材质生成与插值的过程

OpenSVBRDF发布:材质界的ImageNet级别的大规模6维材质实拍数据库

图9展示了利用OpenSVBRDF训练主动光照以提升材质分类精度的过程


OpenSVBRDF发布:材质界的ImageNet级别的大规模6维材质实拍数据库

重写内容如下:图片10:使用OpenSVBRDF来提高基于单点采样(左)和光路多路复用(右)的BRDF重建质量

展望

研究人员将努力扩展现有数据库,增加展现多样性外观的材质样本。未来,他们还计划建立同时包含材质外观和几何形状的大规模高精度实测物体数据库。此外,研究人员将基于 OpenSVBRDF 设计在材质估计、分类和生成等方向上的公开 Benchmark,通过客观定量的标准测试,为推动相关研究的未来发展提供坚实的数据保障。

相关专题

更多
function是什么
function是什么

function是函数的意思,是一段具有特定功能的可重复使用的代码块,是程序的基本组成单元之一,可以接受输入参数,执行特定的操作,并返回结果。本专题为大家提供function是什么的相关的文章、下载、课程内容,供大家免费下载体验。

475

2023.08.04

js函数function用法
js函数function用法

js函数function用法有:1、声明函数;2、调用函数;3、函数参数;4、函数返回值;5、匿名函数;6、函数作为参数;7、函数作用域;8、递归函数。本专题提供js函数function用法的相关文章内容,大家可以免费阅读。

163

2023.10.07

页面置换算法
页面置换算法

页面置换算法是操作系统中用来决定在内存中哪些页面应该被换出以便为新的页面提供空间的算法。本专题为大家提供页面置换算法的相关文章,大家可以免费体验。

400

2023.08.14

数据库三范式
数据库三范式

数据库三范式是一种设计规范,用于规范化关系型数据库中的数据结构,它通过消除冗余数据、提高数据库性能和数据一致性,提供了一种有效的数据库设计方法。本专题提供数据库三范式相关的文章、下载和课程。

344

2023.06.29

如何删除数据库
如何删除数据库

删除数据库是指在MySQL中完全移除一个数据库及其所包含的所有数据和结构,作用包括:1、释放存储空间;2、确保数据的安全性;3、提高数据库的整体性能,加速查询和操作的执行速度。尽管删除数据库具有一些好处,但在执行任何删除操作之前,务必谨慎操作,并备份重要的数据。删除数据库将永久性地删除所有相关数据和结构,无法回滚。

2074

2023.08.14

vb怎么连接数据库
vb怎么连接数据库

在VB中,连接数据库通常使用ADO(ActiveX 数据对象)或 DAO(Data Access Objects)这两个技术来实现:1、引入ADO库;2、创建ADO连接对象;3、配置连接字符串;4、打开连接;5、执行SQL语句;6、处理查询结果;7、关闭连接即可。

347

2023.08.31

MySQL恢复数据库
MySQL恢复数据库

MySQL恢复数据库的方法有使用物理备份恢复、使用逻辑备份恢复、使用二进制日志恢复和使用数据库复制进行恢复等。本专题为大家提供MySQL数据库相关的文章、下载、课程内容,供大家免费下载体验。

253

2023.09.05

vb中怎么连接access数据库
vb中怎么连接access数据库

vb中连接access数据库的步骤包括引用必要的命名空间、创建连接字符串、创建连接对象、打开连接、执行SQL语句和关闭连接。本专题为大家提供连接access数据库相关的文章、下载、课程内容,供大家免费下载体验。

322

2023.10.09

Java 桌面应用开发(JavaFX 实战)
Java 桌面应用开发(JavaFX 实战)

本专题系统讲解 Java 在桌面应用开发领域的实战应用,重点围绕 JavaFX 框架,涵盖界面布局、控件使用、事件处理、FXML、样式美化(CSS)、多线程与UI响应优化,以及桌面应用的打包与发布。通过完整示例项目,帮助学习者掌握 使用 Java 构建现代化、跨平台桌面应用程序的核心能力。

36

2026.01.14

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
10分钟--Midjourney创作自己的漫画
10分钟--Midjourney创作自己的漫画

共1课时 | 0.1万人学习

Midjourney 关键词系列整合
Midjourney 关键词系列整合

共13课时 | 0.9万人学习

AI绘画教程
AI绘画教程

共2课时 | 0.2万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号