Projekte pro Jahr
Abstract
Multi-layer images are a powerful scene representation for high-performance rendering in virtual/augmented reality (VR/AR). The major approach to generate such images is to use a deep neural network trained to encode colors and alpha values of depth certainty on each layer using registered multi-view images. A typical network is aimed at using a limited number of nearest views. Therefore, local noises in input images from a user-navigated camera deteriorate the final rendering quality and interfere with coherency over view transitions. We propose to use a focal stack composed of multi-view inputs to diminish such noises. We also provide theoretical analysis for ideal focal stacks to generate multi-layer images. Our results demonstrate the advantages of using focal stacks in coherent rendering, memory footprint, and AR-supported data capturing. We also show three applications of imaging for VR.
Originalsprache | englisch |
---|---|
Seiten (von - bis) | 4719-4729 |
Seitenumfang | 11 |
Fachzeitschrift | IEEE Transactions on Visualization and Computer Graphics |
Jahrgang | 29 |
Ausgabenummer | 11 |
DOIs | |
Publikationsstatus | Veröffentlicht - 1 Nov. 2023 |
ASJC Scopus subject areas
- Software
- Signalverarbeitung
- Maschinelles Sehen und Mustererkennung
- Computergrafik und computergestütztes Design
Fingerprint
Untersuchen Sie die Forschungsthemen von „Multi-layer Scene Representation from Composed Focal Stacks“. Zusammen bilden sie einen einzigartigen Fingerprint.Projekte
- 1 Laufend
-
FWF - 3DDR - Dreidimensionale Diminished Reality in Echtzeit
1/01/21 → 31/12/24
Projekt: Forschungsprojekt
Aktivitäten
-
Multi-layer Scene Representation from Composed Focal Stacks
Shohei Mori (Redner/in)
19 Okt. 2023Aktivität: Vortrag oder Präsentation › Vortrag bei Konferenz oder Fachtagung › Science to science
-
22nd IEEE International Symposium on Mixed and Augmented Reality
Shohei Mori (Teilnehmer/-in)
16 Okt. 2023 → 20 Okt. 2023Aktivität: Teilnahme an / Organisation von › Konferenz oder Fachtagung (Teilnahme an/Organisation von)
Auszeichnungen
-
Best Journal Paper Award, IEEE ISMAR 2023, Multi-layer Scene Representation from Composed Focal Stacks
Ishikawa, Reina (Empfänger/-in), Saito, Hideo (Empfänger/-in), Kalkofen, Denis (Empfänger/-in) & Mori, Shohei (Empfänger/-in), Okt. 2023
Auszeichnung: Preise / Medaillen / Ehrungen