liu.seSearch for publications in DiVA
Change search
CiteExportLink to record
Permanent link

Direct link
Cite
Citation style
  • apa
  • ieee
  • modern-language-association-8th-edition
  • vancouver
  • oxford
  • Other style
More styles
Language
  • de-DE
  • en-GB
  • en-US
  • fi-FI
  • nn-NO
  • nn-NB
  • sv-SE
  • Other locale
More languages
Output format
  • html
  • text
  • asciidoc
  • rtf
A Sparse Non-parametric BRDF Model
Linköping University, Department of Science and Technology, Media and Information Technology. Linköping University, Faculty of Science & Engineering.ORCID iD: 0000-0002-3239-8581
Linköping University, Department of Science and Technology, Media and Information Technology. Linköping University, Faculty of Science & Engineering.ORCID iD: 0000-0002-7765-1747
INRIA, France.
Linköping University, Department of Science and Technology, Media and Information Technology. Linköping University, Faculty of Science & Engineering.
2022 (English)In: ACM Transactions on Graphics, ISSN 0730-0301, E-ISSN 1557-7368, Vol. 41, no 5, article id 181Article in journal (Refereed) Published
Abstract [en]

This paper presents a novel sparse non-parametric Bidirectional Reflectance Distribution Function (BRDF) model derived using a machine learning approach to represent the space of possible BRDFs using a set of multidimensional sub-spaces, or dictionaries. By training the dictionaries under a sparsity constraint, the model guarantees high-quality representations with minimal storage requirements and an inherent clustering of the BDRF-space. The model can be trained once and then reused to represent a wide variety of measured BRDFs. Moreover, the proposed method is flexible to incorporate new unobserved data sets, parameterizations, and transformations. In addition, we show that any two, or more, BRDFs can be smoothly interpolated in the coefficient space of the model rather than the significantly higher-dimensional BRDF space. The proposed sparse BRDF model is evaluated using the MERL, DTU, and RGL-EPFL BRDF databases. Experimental results show that the proposed approach results in about 9.75dB higher signal-to-noise ratio on average for rendered images as compared to current state-of-the-art models.

Place, publisher, year, edition, pages
ASSOC COMPUTING MACHINERY , 2022. Vol. 41, no 5, article id 181
Keywords [en]
Rendering; reflectance and shading models; machine learning; dictionary learning; non-parametric BRDF model; BRDF interpolation
National Category
Computer Sciences
Identifiers
URN: urn:nbn:se:liu:diva-190356DOI: 10.1145/3533427ISI: 000885871900013OAI: oai:DiVA.org:liu-190356DiVA, id: diva2:1716633
Note

Funding Agencies|Knut and Alice Wallenberg Foundation (KAW); Wallenberg Autonomous Systems and Software Program (WASP); strategic research environment ELLIIT; EU H2020 Research, and Innovation Programme [694122]

Available from: 2022-12-06 Created: 2022-12-06 Last updated: 2022-12-28
In thesis
1. Data-Driven Approaches for Sparse Reflectance Modeling and Acquisition
Open this publication in new window or tab >>Data-Driven Approaches for Sparse Reflectance Modeling and Acquisition
2023 (English)Doctoral thesis, comprehensive summary (Other academic)
Abstract [en]

Photo-realistic rendering and predictive image synthesis are becoming increasingly important and utilized in many application areas ranging from production of visual effects and product visualization to digital design and the generation of synthetic data for visual machine learning applications. Many essential components of the realistic image synthesis pipelines have been developed tremendously over the last decades. One key component is accurate measurement, modeling, and simulation of how a surface material scatters light. The scattering of light at a point on a surface (reflectance and color) is described by the Bidirectional Reflectance Distribution Function (BRDF); which is the main research topic of this thesis. The BRDF describes how radiance, light, incident at a point on a surface is scattered towards any view-point from which the surface is observed. Accurate acquisition and representation of material properties play a fundamental role in photo-realistic image synthesis, and form a highly interesting research topic with many applications. 

The thesis has explored and studied appearance modeling, sparse representation and sparse acquisition of BRDFs. The topics of this thesis cover two main areas. Within the first area, BRDF modeling, we propose several new BRDF models for accurate representation of material scattering behaviour using simple but efficient methods. The research challenges in BRDF modeling include tensor decomposition methods and sparse approximations based on measured BRDF data. The second part of the contributions focuses on sparse BRDF sampling and novel highly efficient BRDF acquisition. The sparse BRDF sampling is to tackle tedious and time-consuming processes for acquiring BRDFs. This challenging problem is addressed using sparse modeling and compressed sensing techniques and enables a BRDF to be measured and accurately reconstructed using only a small number of samples. Additionally, the thesis provides example applications based on the research, as well as a techniques for BRDF editing and interpolation. 

Publicly available BRDF databases are a vital part of the data-driven methods proposed in this thesis. The measured BRDF data used has revealed insights to facilitate further development of the proposed methods. The results, algorithms, and techniques presented in this thesis demonstrate that there is a close connection between BRDF modeling and BRDF acquisition; efficient and accurate BRDF modeling is a by-product of sparse BRDF sampling. 

Abstract [sv]

Fotorealistisk rendering och prediktiv bildsyntes har blivit allt viktigare och an-vänds i flera olika tillämpningsområden, allt ifrån produktion av visuella effekter och produktvisualisering till digital design och generering av syntetiska data för tillämpningar inom visuell maskininlärning. Utvecklingen har tagit en ordentlig fart under de senaste decennierna för många av de väsentliga komponenterna i det fotorealistiska bildsyntes-området. En nyckelkomponent inom området är att noggrant kunna mäta, modellera och simulera ljusets spridning från ytan hos ett material. Ljusspridningen från en punkt på en yta med reflektion och färg, beskrivs av en funktion (eng. BRDF); vilket är det huvudsakliga forskningsområdet i den här avhandlingen. BRDF beskriver hur strålning, ljus i detta fall, träffar en punkt på en yta och sprids mot varje observerad synvinkel. En noggrann uppmätning och representation av materialegenskaper är en fundamental del i fotorealistisk bildsyntes och omger ett väldigt intressant forskningsområde med många tillämpningar.

Den här avhandlingen har utforskat och studerat modellering för materialytors utseende, glesa representationer och glesa mätningar av ljusspridningsfunktioner. Avhandlingen täcker två huvudområden. Inom det första området, BRDF-modellering, så presenterar vi ett flertal nya BRDF-modeller för noggrann representation av ljusspridningens beteende från materialets yta genom att använda simpla men effektiva metoder. Forskningsutmaningarna inom BRDF-modellering inkluderar både metoder för tensoruppdelning och glesa approximationer baserat på uppmätt BRDF-data. Den andra delen fokuserar på gles BRDF-sampling och en ny och effektiv mätningsmetod för att mäta BRDF. Syftet med den glesa BRDF-samplingen är för att förenkla och snabba upp de enormt tidskrävande processerna som krävs för att mäta BRDF. Detta utmanande problem löses genom att använda glesa modeller och tekniker från compressed sensing som möjliggör att BRDF kan be uppmätt och noggrant rekonstruerad genom att endast använda ett fåtal uppmätta sampel. Slutligen så visar avhandlingen ett flertal exempel på tillämpningsområden från forskningen, så väl som tekniker för BRDF-editering och interpolation.

De BRDF-databaser som är öppna och tillgängliga för allmänheten är en vital del av de datadrivna metoderna som presenteras I denna avhandling. De uppmätta BRDF-data som använts har öppnat nya insikter för vidare utveckling av de framtagna metoderna. Resultaten, algoritmerna och teknikerna presenterade i den här avhandlingen visar på att det finns en nära koppling mellan BRDF modellering och BRDF-mätning; effektiv och noggrann BRDF-modellering är en biprodukt av gles BRDF-sampling.  

Place, publisher, year, edition, pages
Linköping: Linköping University Electronic Press, 2023. p. 118
Series
Linköping Studies in Science and Technology. Dissertations, ISSN 0345-7524 ; 2272
Keywords
BRDF, Reflectance modeling, Sparse representation, Compressed sensing, Factorization
National Category
Media Engineering
Identifiers
urn:nbn:se:liu:diva-190754 (URN)10.3384/9789179295585 (DOI)9789179295578 (ISBN)9789179295585 (ISBN)
Public defence
2023-02-01, Kåkenhus, K3, Campus Norrköping, Norrköping, 09:15 (English)
Opponent
Supervisors
Available from: 2022-12-28 Created: 2022-12-28 Last updated: 2023-02-01Bibliographically approved

Open Access in DiVA

No full text in DiVA

Other links

Publisher's full text

Search in DiVA

By author/editor
Tongbuasirilai, TanaboonUnger, JonasMiandji, Ehsan
By organisation
Media and Information TechnologyFaculty of Science & Engineering
In the same journal
ACM Transactions on Graphics
Computer Sciences

Search outside of DiVA

GoogleGoogle Scholar

doi
urn-nbn

Altmetric score

doi
urn-nbn
Total: 287 hits
CiteExportLink to record
Permanent link

Direct link
Cite
Citation style
  • apa
  • ieee
  • modern-language-association-8th-edition
  • vancouver
  • oxford
  • Other style
More styles
Language
  • de-DE
  • en-GB
  • en-US
  • fi-FI
  • nn-NO
  • nn-NB
  • sv-SE
  • Other locale
More languages
Output format
  • html
  • text
  • asciidoc
  • rtf