NeRF и Gaussian splatting

NeRF-идея

Интеграл

C(r) = ∫ T(t) σ(r(t)) c(r(t), d) dt · T(t) = exp(−∫σ ds)

Нужны позы камер (снова бандл). Mildenhall et al., ECCV 2020. matthewtancik.com/nerf

3D Gaussian

Где ломается метрика

• floater’ы, каша на проводах, дыры при малом перекрытии
• Нет встроенной СК заказчика и контрольных точек
• Красивый viewer ≠ орто 1:2000

Kerbl et al., 2023. repo-sam.inria.fr/fungraph/3d-gaussian-splatting

Зачем калибровка снова

Луч в NeRF идёт из S через пиксель. Кривой K — кривой луч — каша объёма. Сначала COLMAP, потом поле.

Splatting vs mesh

Эллипсоид рисуется быстро; топология «стенка-крыша» не обязана быть честной. Mesh + текстура ближе к Ф08. Орто — ещё ближе к ГОСТ.

Артефакты 3DGS

• floaters в небе
• провода и антенны
• мало видов → дыры, как в ФГМ

Эссе на зачёт

Два экрана: splat двора и орто в МСК. Что отдадите в кадастр и почему. Формул volume rendering наизусть не требуется — схема луча требуется.

Экзамен CV

Покажи эпиполяру / бандл / splat-vs-орто на своих данных. Не архитектуры 2024 наизусть.