3D Vision/NeRF with Real-World(13)
-
Splatfacto-W: A Nerfstudio Implementation of Gaussian Splatting for Unconstrained Photo Collections
Splatfacto-W: A Nerfstudio Implementation of Gaussian Splatting for Unconstrained Photo Collections Congrong Xu, Justin Kerr, Angjoo Kanazawa Abstract정확한 장면 재구성을 복잡하게 만드는 photometric 변화와 일시적인 폐색기로 인해 제약이 없는 야생 이미지 컬렉션의 새로운 뷰 합성은 여전히 중요하지만 어려운 작업입니다. 이전 방법은 이미지별 외관 피쳐 임베딩을 Neural Radiance Field (NeRF)에 통합하여 이러한 문제에 접근해 왔습니다. 3D Gaussian Splatting (3DGS)은 더 빠른 학습과 실시간 렌더링을 제공하지만, 아키텍처가 크게 다르기 때문에 ..
2024.10.03 -
RobustNeRF: Ignoring Distractors with Robust Losses
RobustNeRF: Ignoring Distractors with Robust Losses Sara Sabour, Suhani Vora, Daniel Duckworth, Ivan Krasin, David J. Fleet, Andrea Tagliasacchi AbstractNeural radiance fields (NeRF)는 정적 장면의 멀티뷰, 보정된 이미지가 주어졌을 때 새로운 뷰를 합성하는 데 탁월합니다. 장면에 이미지 캡처 중에 지속되지 않는 distractors (이동하는 물체, 조명 변화, 그림자)가 포함된 경우, 아티팩트는 뷰 종속 효과 또는 'floaters'로 나타납니다. distractors에 대처하기 위해 학습 데이터에서 distractors를 최적화 문제의 이상치로 모델링하여 Ne..
2024.10.03 -
Cross-Ray Neural Radiance Fields for Novel-view Synthesis from Unconstrained Image Collections
Cross-Ray Neural Radiance Fields for Novel-view Synthesis from Unconstrained Image Collections Yifan Yang, Shuhai Zhang, Zixiong Huang, Yubing Zhang, Mingkui Tan AbstractNeural Radiance Fields (NeRF)는 픽셀당 단일 ray를 샘플링하여 장면을 렌더링하는 혁신적인 접근 방식으로, 정적 장면 이미지에서 새로운 뷰 합성에 인상적인 기능을 입증했습니다. 그러나 실제로는 일반적으로 제약이 없는 이미지 컬렉션에서 NeRF를 복구해야 하므로 두 가지 과제가 있습니다: 1) 이미지는 캡처 시간과 카메라 설정이 다르기 때문에 종종 외형이 동적으로 변화하며, 2) 이미..
2024.10.02 -
NeRF-MS: Neural Radiance Fields with Multi-Sequence
NeRF-MS: Neural Radiance Fields with Multi-Sequence Peihao Li, Shaohui Wang, Chen Yang, Bingbing Liu, Weichao Qiu, Haoqian Wang AbstractNeural radiance fields (NeRF)는 단일 시퀀스 데이터로만 학습할 때 새로운 뷰 합성에서 인상적인 성능을 달성합니다. 그러나 더 나은 재구성 성능을 위해서는 서로 다른 시간에 서로 다른 카메라로 캡처한 멀티 시퀀스를 활용하는 것이 필수적입니다. 멀티 시퀀스 데이터에는 두 가지 주요 과제가 필요합니다: 조명 조건이 다르고 보행자와 같은 비 정적 물체로 인한 외관 변화. 이러한 문제를 해결하기 위해 멀티 시퀀스 데이터로 NeRF를 학습하는 새로운 접..
2024.09.28 -
NeRF for Outdoor Scene Relighting
NeRF for Outdoor Scene Relighting Viktor Rudnev, Mohamed Elgharib, William Smith, Lingjie Liu, Vladislav Golyanik, Christian Theobalt Abstract사진에서 실외 장면을 사실적으로 편집하려면 이미지 형성 과정에 대한 깊은 이해와 장면 지오메트리, 반사율 및 조명의 정확한 추정이 필요합니다. 그런 다음 장면 알베도와 지오메트리를 변경하지 않으면서 조명을 섬세하게 조작할 수 있습니다. 뉴럴 래디언스 필드를 기반으로 한 실외 장면 재조명을 위한 최초의 접근 방식인 NeRF-OSR을 제시합니다. 기존 기술과 달리, 이 방법은 제어되지 않은 설정에서 촬영한 실외 사진 모음만 사용하여 조명과 카메라 시점을 동시..
2024.09.25 -
Hallucinated Neural Radiance Fields in the Wild
Hallucinated Neural Radiance Fields in the Wild Xingyu Chen, Qi Zhang, Xiaoyu Li, Yue Chen, Ying Feng, Xuan Wang, Jue Wang AbstractNeural Radiance Fields (NeRF)는 최근 인상적인 새로운 뷰 합성 능력으로 인기를 얻고 있습니다. 이 논문은 환각 상태의 NeRF 문제를 연구합니다: 즉, 관광 이미지 그룹에서 하루 중 다른 시간에 현실적인 NeRF를 복구하는 것입니다. 기존 솔루션은 다양한 조건에서 새로운 뷰를 렌더링하기 위해 제어 가능한 외관 임베딩을 갖춘 NeRF를 채택하지만, 보이지 않는 외관으로 뷰 일관성 있는 이미지를 렌더링할 수는 없습니다. 이 문제를 해결하기 위해 Ha-Ne..
2024.09.16