๐link: https://arxiv.org/abs/2403.14166
methodology ๋ถ๋ถ๋ง ์ฐ์ ์ ๋ฆฌ
4. Methodology
densification & simplification โ reorganizing the spatial distribution of Gaussians
4.1. Densification
์ด๋ฏธ์ง ๋ด์ Gaussian ๋ถํฌ๋ฅผ ์ต์ ํํ์ฌ ์ด๋ฏธ์ง์ ์ ๋ช
๋๋ฅผ ๊ฐ์
- Blur Split & Depth Initialization
- Gaussian ๋ถํฌ๊ฐ ๊ณ ๋ฅด๊ฒ ๋ฐฐ์ด๋๋๋ก ํ์ฌ ์ด๋ฏธ์ง์ ์ด๊ธฐํ ๋จ๊ณ์์ ์ฌ์ฉ๋จ
- Gaussian ๋ธ๋ฌ ์ํฐํฉํธ ์ฒ๋ฆฌ
- Depth Initialization: ์ด๋ฏธ์ง์ ๊น์ด ์ ๋ณด๋ฅผ ํ์ฉํ์ฌ ๋ ์ ํํ 3D ์ฌ๊ตฌ์ฑ์ ๊ฐ๋ฅํ๊ฒ ํ๋ค
- Gradient-based Split & Clone Strategy
- ๋ถ๋๋ฌ์ด ์ ์ ํ์ ์ํด ์ค๊ณ
- ํฌ๊ณ ๋นํจ์จ์ ์ธ Gaussian๋ค์ ์ต์ ํ ๊ณผ์ ์์ ๋ณด์กด๋๋ค
- ๊ฐ์ฐ์์ ํฌ์, ๊ฐ์ฐ์์ ์ธ๋ฑ์ค ๋ ๋๋ง
- ๊ฐ ํฝ์
์ ๋ํด ์ต๋๋ก ๊ธฐ์ฌํ๋ Gaussian์ ์ธ๋ฑ์ค๋ฅผ ์๊ฐํํ๋ค. ์ด๋ฐ ์ธ๋ฑ์ค๋ ๋ฌด์์ ์์์ผ๋ก ํ์๋์ด ๊ฐ ๊ฐ์ฐ์์์ ๊ตฌ๋ณํ ์ ์๋ค
- ํฌ์๋ ๊ฐ์ฐ์์ ์ธ๋ฑ์ค์ ์ค์ ๊ฐ์ฐ์์ ์ธ๋ฑ์ค๋ฅผ ๋น๊ตํจ์ผ๋ก์จ ์ด๋ ๊ฐ์ฐ์์์ด ๊ฐ์ฅ ํฐ ์ํฅ์ ๋ฏธ์น๋์ง ํ์
ํ ์ ์๋ค
- Deblurring Strategy
- ๋ธ๋ฌ ์ฒ๋ฆฌ๊ฐ ํ์ํ Gaussian gi๋ ํด๋น Gaussian์ด ์ฐจ์งํ๋ ์ต๋ ์์ญ Si๊ฐ ์๊ณ๊ฐ Tblur ๋ณด๋ค ํด ๋ ์๋ณ๋๋ค. ์ด ์๊ณ๊ฐ์ ์ด๋ฏธ์ง์ ํด์๋ H รW์ ํ์ดํผํ๋ผ๋ฏธํฐ ฮธblur์ ๊ณฑ์ผ๋ก ๊ณ์ฐ๋๋ค.
โ์์ ์ค๋ช
giblurโ={giโโฃSiโ>Tblurโโงiโ[1,N]},Tblurโ=ฮธblurโโ
Hโ
W
์ด๋ฏธ์ง ๋ด์์ ๋ธ๋ฌ ์ฒ๋ฆฌ๊ฐ ํ์ํ Gaussian gi๋ฅผ ์๋ณํ๊ธฐ ์ํ ๊ธฐ์ค
- ๋ณ์๋ค ์๋ฏธ
- gblur: ๋ธ๋ฌ ์ฒ๋ฆฌ ํ์ํ Gaussian ์งํฉ
- gi: i๋ฒ์งธ Gaussian
- Si: i๋ฒ์งธ Gaussian์ด ํฝ์
์ ๊ธฐ์ฌํ๋ ์ต๋ ์์ญ์ ํฌ๊ธฐ
- Tblur: ๋ธ๋ฌ ์ฒ๋ฆฌ๋ฅผ ์ํ threshold
- ฮธblur: ๋ธ๋ฌ ์ฒ๋ฆฌ์ ์ ๋๋ฅผ ๊ฒฐ์ ํ๋ ํ์ดํผํ๋ผ๋ฏธํฐ
- H, W: ์ด๋ฏธ์ง์ ๋์ด์ ๋๋น
- Si๋ (H, W) ํด์๋์์ ๋์คํฐํ ๊ณผ์ ์ ํตํด ๊ณ์ฐ ๊ฐ๋ฅ
- gblur ์งํฉ์ Si๊ฐ Tblur ๋ณด๋ค ํฐ ๋ชจ๋ Gaussian์ ํฌํจํ๋ค. ํด๋น Gaussian๋ค์ด ์ด๋ฏธ์ง์ ํฐ ๋ธ๋ฌ ํจ๊ณผ๋ฅผ ์ค์, ์ ๋ช
๋๊ฐ ๋ฎ์์ง๋ ์์ธ์ด ๋๊ธฐ ๋๋ฌธ์ ํน๋ณํ ์ฒ๋ฆฌ๊ฐ ํ์ํ๋ค.
