์ ์ฒด ๊ธ122 [Paper Review] 3D Gaussian Splatting for Real-Time Radiance Field Rendering ์ด ๋ ผ๋ฌธ ๋ด์ฉ์ผ๋ก ๋ค์ด๊ฐ๊ธฐ ์ ์ Pinhole Camera Model ์ ๋ํด์ ์ด๋ ์ ๋ ์ดํด๋ฅผ ํ๊ณ ๊ฐ๋ฉด ์ข๋ค. Abstract1080p ํด์๋์ ๋ฌด์ ํ ๋ฐ ์์ ํ ์ฅ๋ฉด์ ๋ ๋๋ง์์๋ ์ด์ ๊น์ง๋ ์ด๋ค ๋ฐฉ๋ฒ๋ ์ค์๊ฐ ๋์คํ๋ ์ด ์๋(≥30 fps)๋ฅผ ๋ฌ์ฑํ์ง ๋ชปํ๊ณ ์๋ค.์ด ๋ ผ๋ฌธ์์๋ 1080p ํด์๋์์ ๊ณ ํ์ง ์ค์๊ฐ(≥30 fps) ์๋ก์ด ์์ ํฉ์ฑ์ ๊ฐ๋ฅํ๊ฒ ํ๋ ์ธ ๊ฐ์ง ์ฃผ์ ์์๋ฅผ ์๊ฐํ๋ค.1. 3D ๊ฐ์ฐ์์ ํ์ฉ: ์นด๋ฉ๋ผ ์บ๋ฆฌ๋ธ๋ ์ด์ ๊ณผ์ ์์ ์์ฑ๋ ํฌ์ ํฌ์ธํธ๋ฅผ ์์์ผ๋ก, ์ฅ๋ฉด์ 3D ๊ฐ์ฐ์์์ผ๋ก ํํํ์ฌ ์ฐ์์ ์ธ ๋ณผ๋ฅจ๊ธฐ๋ฐ Radiance Field ์ ์ฅ์ ์ ์ ์งํ๋ฉด์ ๋น ๊ณต๊ฐ์์์ ๋ถํ์ํ ๊ณ์ฐ์ ํผํ๋ค.2. ์ต์ ํ์ ๋ฐ๋ ์ ์ด: 3D ๊ฐ์ฐ์์์ ๋น๋ฑ๋ฐฉ์ฑ ๊ณต๋ถ์ฐ์ ์ต์ ํํ์ฌ ์ฅ๋ฉด์ ์ .. 2024. 12. 14. [Paper Review] NeRF: Representing Scenes as Neural Radiance Fields for View Synthesis Abstract์ด ๋ ผ๋ฌธ์์๋ ๋ณต์กํ ์ฅ๋ฉด์ ์๋ก์ด ์์ ์ ์์ฑํ๋ฉฐ, ๊ธฐ์กด ์ฐ๊ตฌ๋ฅผ ๋ฐ์ด๋๋ ์ฑ๋ฅ์ ๋ฌ์ฑํ๋ ๋ฐฉ๋ฒ์ ์ ์ํ๋ค.์ด ๋ฐฉ๋ฒ์ ์์์ ์ ๋ ฅ ๋ทฐ๋ฅผ ์ฌ์ฉํ์ฌ ์ฐ์์ ์ธ volume scene ํจ์๋ฅผ ์ต์ ํํ๋ค.์๊ณ ๋ฆฌ์ฆ์ ์ฅ๋ฉด์ fully connected (not convolution) deep network ๋ก ํํํ๋ค. - ์ ๋ ฅ: ์ฐ์์ ์ธ 5D ์ขํ => ๊ณต๊ฐ ์์น(x, y, z) ์ ์์ ๋ฐฉํฅ(θ, φ) ์ ์ ๋ ฅ- ์ถ๋ ฅ: ํด๋น ์์น์ ์ฒด์ ๋ฐ๋(volume density) ์ ์์ ์ข ์ ๋ฐฉ์ถ ๋ณต์ฌ๊ด(view-dependent emitted radiance) ์ถ๋ ฅ- ํฉ์ฑ ๊ณผ์ : ์นด๋ฉ๋ผ์์ ์ฅ๋ฉด์ผ๋ก ๋ป์ด๋๊ฐ๋ ๊ด์ (rays) ์ ๋ฐ๋ผ 5D ์ขํ(๊ณต๊ฐ์์น์ ์์ ๋ฐฉํฅ)๋ฅผ ์ ํํ ๋ค, ํด๋น ์ขํ์์ ์ ๊ฒฝ๋ง์.. 2024. 12. 10. [Paper Review] DeepSDF: Learning Continuous Signed Distance Functions for Shape Representation Abstract1. DeepSDF๋?- ํ์ต ๊ธฐ๋ฐ์ ์ฐ์์ Signed Distance Function (SDF) ํํ- ํ์ ํด๋์ค ์ ์ฒด๋ฅผ ๊ณ ํ์ง๋ก ํํ, ๋ณด๊ฐ(interpolation), ๋ถ์์ ๋ฐ์ดํฐ ๋ณต์ ๊ฐ๋ฅ2. ํํ ๋ฐฉ์- ๋ถํผ ํ๋์์ ์ ์ ํฌ๊ธฐ: ํ๋ฉด ๊ฒฝ๊ณ๊น์ง์ ๊ฑฐ๋ฆฌ- ๋ถํธ: ํ์ ๋ด๋ถ(-) ๋๋ ์ธ๋ถ(+)- ๊ฒฝ๊ณ๋ ํจ์์ 0-level-set ์ผ๋ก ์๋ฌต์ ์ผ๋ก ์ธ์ฝ๋ฉ3. ๊ธฐ์กด SDF ์ ์ฐจ์ด์ - ๊ธฐ์กด SDF ๋ ๋จ์ผ ํ์ ํํ- DeepSDF ๋ ํ์ ํด๋์ค ์ ์ฒด๋ฅผ ํ์ตํ๊ณ ํํ ๊ฐ๋ฅ4. ์ฑ๊ณผ- 3D ํ์ ํํ๊ณผ ๋ณต์์์ ์ต์ฒจ๋จ ์ฑ๋ฅ- ๋ชจ๋ธ ํฌ๊ธฐ๋ฅผ ๊ธฐ์กด ๋๋น 10๋ฐฐ ๊ฐ์ Introduction1. ๋ฌธ์ ์ ์: 3D ๋ฅ๋ฌ๋ ๋ชจ๋ธ์ ๊ธฐ์กด ๋ฐฉ์์์ ๊ณต๊ฐ ๋ฐ ์๊ฐ ๋ณต์ก๋ ์ฆ๊ฐ, ์ ์ (vertex) .. 2024. 12. 9. [Paper Review] DeepVoxels: Learning Persistent 3D Feature Embeddings Abstract์ด ๋ ผ๋ฌธ์ 3D ์ดํด๊ฐ ๋ถ์กฑํ ์์ฑ ์ ๊ฒฝ๋ง์ ๋ฌธ์ ๋ฅผ ํด๊ฒฐํ๊ธฐ ์ํ ์๋ก์ด ์ ๊ทผ๋ฒ์ ์ ์ํ๋ค.๊ตฌ์ฒด์ ์ผ๋ก DeepVoxels ๋ 3D ์ฅ๋ฉด์ ๋ณต์กํ ๊ธฐํํ์ ๋ชจ๋ธ๋งํ์ง ์์ผ๋ฉด์๋, ์์ ์ ๋ฐ๋ผ ๋ฌ๋ผ์ง๋ ์ธํ์ ์ ํํ ์บก์ฒํ ์ ์๋ ํจ์จ์ ์ธ 3D ํน์ง ์๋ฒ ๋ฉ์ ์ ์ํ๋ค. ์ด๋ฅผ ํตํด ์๋ก์ด ์์ ์์ ์ฅ๋ฉด์ ์ฌ๊ตฌ์ฑํ๋ ๋ฌธ์ ๋ฅผ ํด๊ฒฐํ๊ณ , ๊ธฐ์กด ๋ฐฉ๋ฒ๋ค๋ณด๋ค ๋ ๋์ ํ์ง์ Synthesis ๊ฒฐ๊ณผ๋ฅผ ์ป์ ์ ์๋ค. Introduction Generative Machine Learning:- ์ต๊ทผ ๋ช ๋ ๋์ Generative Machine Learning ๊ธฐ์ ์ด ํฌ๊ฒ ๋ฐ์ ํ์ฌ, ์ด๋ฏธ์ง ์์ฑ๊ณผ ๊ฐ์ ์์ ์์ ๋ฐ์ด๋ ์ฑ๊ณผ๋ฅผ ๋ณด์ฌ์ฃผ๊ณ ์๋ค.- ๋ณ๋ถ ์คํ ์ธ์ฝ๋(Aariational Autoencoders) ๋.. 2024. 12. 4. ์ด์ 1 2 3 4 ยทยทยท 31 ๋ค์