Modeling Depth Ambiguity: A Mixture-Density Representation for Flying-Point-Free Depth Estimation

깊이 추정의 발전에도 불구하고, 떠다니는 점은 지속적인 실패 모드로 남아 있다. 객체 경계 근처에서 깊이 추정기는 종종 전경과 배경 표면 사이의 빈 공간에 잘못된 3D 점을 예측한다.

깊이 추정기는 물체 경계의 한 픽셀에 앞쪽과 뒤쪽 표면이 함께 걸릴 때 두 깊이의 중간값을 내서 빈 공간에 떠 있는 3D 점을 만들곤 한다. MDA는 픽셀마다 하나의 깊이 대신 여러 깊이 후보와 각 확률을 예측하는 혼합 밀도 표현을 쓴다. 경계에서는 후보들이 서로 다른 표면에 붙고 최종 깊이는 실제 후보 가운데 하나에서 골라져 중간의 빈 공간을 피한다. 여러 백본에서 입력이 심하게 흐린 경우에도 경계 복원을 높이고 떠다니는 점을 대부분 없앴으며 실행 시간 증가는 거의 없었다. 다만 카메라와 거의 나란한 표면이나 작고 얇은 구조에서는 시각 단서와 기본 백본의 약점 때문에 일부 오류가 남는다.

핵심 요약

• 저자들은 이 아티팩트를 표준적인 모델링 선택, 즉 각 픽셀에 단일 깊이 가설을 할당하는 것에서 비롯된 것으로 추적한다.
• 각 픽셀에 대해 여러 깊이 가설과 그에 연관된 확률을 예측할 수 있게 하는 혼합 밀도 표현인 MDA로 이를 해결한다.
• 서로 다른 백본 전반에서 MDA는 경계 재구성을 크게 향상시키고 심각한 입력 블러 하에서도 떠다니는 점 아티팩트를 대부분 제거하면서도, 무시할 수 있을 만큼 미미한 런타임 오버헤드만을 추가한다.

논문 링크

외부 연구를 정리한 자료입니다. HDATF가 발표한 논문이나 제품 성능을 측정한 결과는 아닙니다.