새로운 컴퓨터 이미징 기술이 개발되어 일반적인 무광택 표면을 가상 디스플레이 스크린으로 변환할 수 있게 되었다. 라이스 대학교와 애리조나 대학교 연구진이 공동으로 개발한 이 방법은 벽, 가구, 심지어 의복까지 활용하여 3차원 장면을 빠른 속도와 높은 정밀도로 재구성한다. 네이처 커뮤니케이션즈에 발표된 이 연구는 현재 머신 비전 시스템이 가진 치명적인 약점, 즉 무광택과 반사성 물체가 혼재된 동적 환경을 정확히 포착하지 못하는 문제를 해결한다. 레이저 광을 무반사 표면에 투사하고 초고속 뉴로모픽 이벤트 카메라를 사용함으로써, 이 시스템은 기존 카메라가 포착하기 어려운 급격한 조명 변화와 움직이는 피사체까지도 효과적으로 기록한다.
기존 머신 비전의 한계 극복
대부분의 3D 이미징 시스템은 구조광(structured light) 방식을 채택한다. 이 방식은 장면에 패턴을 투사하고 물체 표면에서 패턴이 어떻게 변형되는지를 측정하여 깊이 지도를 생성한다. 그러나 이러한 시스템은 움직임이나 강한 조명, 그리고 무광택과 반사성 재료가 혼합된 환경에서 자주 오류를 보인다. 특히 혼합 반사율 환경에서는 표면 사이에서 빛이 반사되어 측정값이 왜곡되고 화질이 저하된다. 연구진은 이러한 문제를 해결하기 위해 오히려 문제의 원인이었던 무광택 표면을 가상 스크린으로 재활용하는 혁신적인 접근법을 도입했다.
디플렉토메트리의 재해석
애슈크 비어라가반(Ashok Veeraraghavan) 라이스 대학교 전기컴퓨터공학과 학과장은 이 팀이 컴퓨터 비전에서 잘 알려진 기법인 디플렉토메트리(deflectometry)를 활용했다고 설명했다. 디플렉토메트리는 반짝이는 표면의 형태를 측정하기 위해 투사된 광 패턴의 왜곡을 관찰하는 방법이다. 전통적으로 이 기법은 크고 정밀하게 배치된 스크린이 필요해 비용이 많이 들고 유연성이 떨어졌다. 그러나 연구진은 레이저 광을 장면에 이미 존재하는 무광택 표면에 투사함으로써 특수 장비 없이도 어떤 방이든 기능적인 이미징 환경으로 전환할 수 있었다.
시스템 작동 원리와 핵심 기술
이미징 과정은 두 단계로 이루어진다. 첫 번째 단계에서 레이저가 벽, 의복, 가구 같은 무광택 표면을 스캔하여 해당 표면의 정밀한 3D 지도를 생성한다. 레이저 포인트가 반짝이는 물체에 반사될 때, 주변 무광택 표면이 사실상 가상 디스플레이 스크린 역할을 한다고 연구 제1저자이자 비어라가반 연구실의 대학원생인 아니케트 대슈프트(Aniket Dashpute)는 설명했다. 두 번째 단계에서는 뉴로모픽 이벤트 카메라가 빛 강도의 변화를 기록하는 방식으로 고속 3D 비디오를 재구성한다.
이 이벤트 카메라는 매우 어두운 곳에서 극도로 밝은 곳까지 다양한 광량을 처리할 수 있다. 논문 제2저자이자 애리조나 대학교 와이언트 광과학대학의 박사후 연구원인 지아장 왕(Jiazhang Wang)은 이 특성 덕분에 장면 내 모든 물체 표면을 반사율 차이와 관계없이 동일한 정확도와 속도로 측정할 수 있다고 강조했다. 레이저 스캐닝과 이벤트 기반 이미징의 결합은 기존 3D 센싱 방식과는 현저히 다른 접근법이다. 일반 카메라는 빠른 움직임이나 극단적인 조명 대비에 압도되는 반면, 이벤트 카메라는 변화만을 캡처하여 데이터 부하를 줄이고 시간 해상도를 높인다. 이는 밀리초 단위가 중요한 실시간 애플리케이션에 특히 적합하다.
주요 응용 분야
이 기술은 여러 고위험 분야에서 머신 비전을 혁신할 잠재력을 지닌다. 자율주행차의 경우 혼합 조명과 복잡한 반사 조건에서 보행자, 다른 차량, 도로 표면을 정확히 인식하는 것이 안전 운행에 필수적이다. 산업 검사 분야에서는 제조업체가 이 기술을 활용하여 현재 표준 스캐너로 놓치기 쉬운 반짝이는 금속 부품이나 투명 표면의 결함을 탐지할 수 있다. 얼굴 인식 시스템은 다양한 환경에서 더 강건한 깊이 센싱을 통해 혜택을 볼 수 있으며, 제스처 인식이나 건강 모니터링 같은 인간 감지 응용도 이 방법의 속도와 정확성 덕분에 개선될 수 있다.
미시에서 거시까지 확장 가능한 기술
비록 이 기술이 현재까지는 실험실 탁자 규모에서만 시연되었지만, 연구진은 이 접근법이 본질적으로 확장 가능하다고 강조한다. 연구 공동저자이자 와이언트 광과학대학의 플로리안 빌로미처(Florian Willomitzer) 부교수는 확장성이 3D 이미징의 핵심 요구사항이라고 말했다. 동일한 방법이 수술 중 미세한 반사성 혈관을 측정하거나 건물 전체를 디지털화하는 데 적응될 수 있다. 이러한 유연성은 이 기술이 휴대용 기기로 소형화되거나 대규모 건축 스캐닝으로 확장될 가능성을 시사한다.