응용정보공학전공 어영정 교수, 지도 학생들과 인공지능 주요 학회 AAAI에 논문 발표

어영정 교수(응용정보공학전공, (겸)인공지능대학원)는 2025년 2월, 지도 학생들과의 연구 결과물인 아래 논문들을 인공지능 주요 학회인 AAAI 에 발표했다.

제목: Rethinking Open-Vocabulary Segmentation of Radiance Fields in 3D Space

저자: Hyunjee Lee*, Youngsik Yun*, Jeongmin Bae, Seoha Kim, Youngjung Uh

요약: NeRFs와 3DGS는 3차원 공간을 새로운 시점에서 본 이미지를 렌더하기에 적합하지만, 이들로부터 3차원 공간의 의미를 이해하는 능력은 간접적으로만 발전해 왔다. 기존 방법의 의미 이해 결과는 2D 마스크에 불과하며, supervision 또한 2D 픽셀에만 기반한다. 본 논문에서는 NeRFs 및 3DGS로 모델링된 장면에 대한 보다 향상된 3D 이해를 목표로 다음과 같은 방법을 제안한다.

언어 임베딩 필드를 학습하기 위해 3D 포인트를 직접 supervise한다. 이를 통해 다중 스케일 언어 임베딩에 의존하지 않고도 최고 정확도를 달성한다.

사전 학습된 언어 필드를 3DGS로 전이하여, 학습 시간이나 정확도를 희생하지 않으면서 최초로 실시간 렌더링 속도를 구현한다.

재구성된 기하학적 구조와 의미론을 함께 평가할 수 있도록 3D 질의 및 평가 프로토콜을 도입한다.

프로젝트 페이지: https://hyunji12.github.io/Open3DRF/