심리학, 인지 과학에서 의료, 교육, 소매, 부동산, 관광에 이르기까지 다양한 분야에서 아이 트래킹 기술은 인간의 주의력과 행동을 이해하는 방식을 변화시키고 있습니다. 사람의 눈 움직임을 분석하여 무엇을 보고 있는지, 얼마나 오래 보는지, 시선의 순서를 파악합니다. 이 데이터는 사용자 경험 연구, 광고 효과 평가, 운전자 안전 모니터링, 심지어 자폐증의 조기 진단에도 중요한 가치를 지닙니다.
고품질 아이 트래킹을 장치에 통합하는 VR 헤드셋 제조업체에게는 눈의 미세한 움직임을 정확하게 포착하고 빠르게 초점을 맞추며 고해상도 이미지를 제공할 수 있는 카메라 모듈이 필수적입니다. VR 헤드셋은 내부 공간이 극도로 제한적이며, 다양한 조명 조건(실내 조명부터 헤드셋 내부의 어두운 환경까지)에서 작동하고 대량의 이미지 데이터를 실시간으로 처리해야 합니다.카메라 모듈의 이미지 품질, 초점 속도, 해상도 및 인터페이스 안정성은 아이 트래킹의 정확성과 전반적인 사용자 경험에 직접적인 영향을 미칩니다.
표준 카메라와 달리 아이 트래킹에 사용되는 카메라는 까다로운 요구 사항을 충족해야 합니다:
초고해상도: 홍채 질감, 동공 가장자리, 각막 반사점과 같은 미세한 특징을 명확하게 포착해야 합니다. 해상도가 높을수록 추적 정확도가 높아집니다.
빠른 자동 초점: 사용자의 눈과 카메라 사이의 거리는 헤드셋 착용에 따라 약간씩 달라질 수 있습니다. 자동 초점은 눈이 항상 선명하게 유지되도록 합니다.
낮은 왜곡 광학계: 왜곡은 눈의 모양을 왜곡하여 시선 계산 정확도를 저하시킬 수 있습니다.
균일한 전체 프레임 이미징: 눈은 프레임의 어느 위치에나 나타날 수 있으므로(예: 옆을 볼 때) 중심과 가장자리 모두에서 높은 해상도를 유지해야 합니다.
컴팩트한 크기: VR 헤드셋 내부 공간은 매우 제한적이므로 모듈은 원활하게 통합될 수 있을 만큼 작아야 합니다.
고속 인터페이스: 실시간 추적에는 고해상도 이미지의 저지연 전송이 필요하므로 MIPI 인터페이스가 이상적인 선택입니다.
스마트 하드웨어 및 컴퓨터 비전 애플리케이션에 대한 이해를 바탕으로, VR 헤드셋 아이 트래킹에 진정으로 적합한 MIPI 카메라 모듈은 센서, 광학계, 초점 및 인터페이스 간의 정밀한 정렬이 필요합니다.
아이 트래킹 알고리즘은 일반적으로 동공 가장자리, 홍채 질감, 각막 반사(푸르키니 이미지)의 세 가지 주요 특징에 의존합니다. 해상도가 부족하면 이러한 미세 구조가 흐릿해져 시선 계산 오류가 증가합니다.
MIPI 4레인 고속 인터페이스: 대규모 데이터의 저지연 전송UHD 카메라 모듈은 IMX576 CMOS 센서(1/2.7인치, COB 패키지)를 기반으로 제작되었습니다. 주요 사양은 다음과 같습니다:
유효 픽셀 수: 5760(H) x 4312(V) — 약 24메가픽셀(24MP). 이는 현재 사용 가능한 가장 높은 해상도의 MIPI 카메라 모듈 중 하나입니다. 일반적인 2MP 또는 5MP 모듈과 비교하여 24MP는 4~12배 더 많은 디테일을 제공하여 미묘한 홍채 질감, 정확한 동공 가장자리 위치 및 작은 각막 반사점을 명확하게 포착할 수 있습니다.
24MP UHD 출력: 초고해상도 이미지 출력을 지원하여 아이 트래킹 알고리즘의 극도의 선명도 요구 사항을 충족합니다. 빠른 안구 운동 중에도 후속 분석에 충분히 선명한 프레임을 캡처합니다.
VR 헤드셋에서 사용자의 눈과 카메라 사이의 거리는 일반적으로 2~5cm입니다. 이 거리에서 24MP 해상도는 1픽셀이 나타내는 물리적 크기가 불과 몇 마이크로미터에 불과함을 의미하며, 이는 서브 밀리미터 동공 변위를 해결하기에 충분합니다.
VR 헤드셋을 착용할 때 동공 간 거리와 눈 돌출은 사용자마다 다르며, 움직이는 동안 헤드셋이 약간 이동할 수 있습니다. 고정 초점 카메라의 경우 일부 사용자의 눈이 피사계 심도 밖에 떨어져 흐릿한 이미지가 발생할 수 있습니다.
MIPI 4레인 고속 인터페이스: 대규모 데이터의 저지연 전송CMOS 카메라 모듈은 HBM 폐쇄 루프 보이스 코일 모터(VCM)을 통합하고 CN3927E 드라이버 칩으로 제어되며, 10cm에서 무한대까지의 자동 초점 범위를 지원합니다. 장점은 다음과 같습니다:
폐쇄 루프 제어: 개방 루프 모터와 달리 폐쇄 루프 모터는 홀 센서를 사용하여 실시간 렌즈 위치 피드백을 제공하여 더 빠르고 정확한 초점을 가능하게 합니다. 이는 빠른 안구 운동(예: 도약 및 추적)을 캡처하는 데 중요합니다.
동적 안정성: 게임 또는 몰입형 경험 중에 VR 헤드셋이 움직일 때 폐쇄 루프 모터는 초점을 지속적으로 미세 조정하여 눈을 선명하게 유지합니다.
최소 초점 거리 10cm: VR 헤드셋 내부의 카메라와 눈 사이의 짧은 작업 거리에 완벽하게 일치합니다.
아이 트래킹 애플리케이션에서 초점 속도는 시스템이
시선 이동을 캡처할 수 있는지 여부를 직접 결정합니다. HBM 폐쇄 루프 모터의 밀리초 응답은 모든 프레임을 사용할 수 있도록 보장합니다.
광학 시스템: 낮은 왜곡 및 균일한 전체 프레임 해상도
아이 트래킹 알고리즘은 각막 반사와 동공 중심의 상대적 위치를 기반으로 시선 방향을 계산합니다. 이미지에 왜곡이 있으면 눈의 모양이 왜곡되고 반사점 위치가 이동하며 계산 결과에 체계적인 오류가 발생합니다.이 모듈의 광학 시스템은 특별히 최적화되었습니다:초점 거리: 3.95mm로 1/2.7인치 센서에서 약
78.1도 시야각을 제공합니다. 이 시야각은 눈의 정상적인 회전 운동 범위를 충분히 커버합니다.
대형 조리개 F1.8: 충분한 빛을 받아들여 VR 헤드셋 내부의 비교적 어두운 환경에서도 높은 셔터 속도를 유지하여 모션 블러를 줄입니다.왜곡
<1%: 1% 미만으로 엄격하게 제어되어 정확한 눈 형상을 보장하고 정밀한 시선 계산 입력에 사용됩니다.
중심과 가장자리 간의 해상도 차이가 특별히 최적화되었습니다. 표준 렌즈는 종종 중심이 선명하고 가장자리가 흐릿하지만, 아이 트래킹에서는 눈이 프레임의 어느 위치에나 나타날 수 있습니다(특히 옆을 볼 때 가장자리). 균일한 전체 프레임 이미징은 시선 방향에 관계없이 추적 알고리즘이 선명한 특징을 얻도록 보장합니다.
MIPI 4레인 고속 인터페이스: 대규모 데이터의 저지연 전송24MP 해상도 이미지의 데이터 양은 엄청납니다. 표준 인터페이스를 사용하면 단일 압축되지 않은 프레임을 전송하는 데 수백 밀리초가 걸릴 수 있으며, 이는 실시간 아이 트래킹 요구 사항(일반적으로 60fps 이상 요구)을 충족하지 못합니다.이 24MP 카메라 모듈은
MIPI 4레인 고속 인터페이스
를 사용하며, 각 레인은 1.5Gbps 이상의 속도를 제공하여 총 대역폭이 6Gbps 이상입니다. 이는 다음을 의미합니다:
24MP 전체 해상도 비디오 스트림의 원활한 전송(적절한 프레임 속도 제어 포함)으로 실시간 추적을 위한 대역폭 요구 사항을 충족합니다.
강력한 차동 신호 간섭 방지 기능으로 VR 헤드셋 내부의 복잡한 전자기 환경(디스플레이 드라이버, 무선 모듈 등과 같은 노이즈 소스 포함)에 적합합니다.
신뢰성: 소비자 웨어러블 장치에 맞춤 제작VR 헤드셋은 낙하, 진동 및 온도 변화에 노출되는 일상 소비자 전자 제품입니다. 이 모듈은 구조적 최적화를 특징으로 합니다:
COB 패키지(Chip on Board): 베어 칩이 회로 기판에 직접 장착되어 모듈 두께를 줄이고 충격 저항을 개선합니다.
제어 명령 전송의 신뢰성을 보장하여 시스템 통합을 단순화합니다.애플리케이션 시나리오: VR/AR에서 다학제 연구까지
1. VR/AR 헤드셋 아이 트래킹: VR 헤드셋에 통합되어 시선 렌더링(GPU 부하 감소) 및 눈 기반 상호 작용(예: 보기만으로 메뉴 항목 선택)에 사용됩니다.
2. 심리학 및 인지 과학 연구: 실험실에서 주의 메커니즘, 독서 행동, 의사 결정 과정 등을 연구하기 위한 고정밀 아이 트래킹.
3. 의료: 조기 자폐증 선별(비정상적인 시선 패턴), 신경 질환 진단(안구 운동 장애) 및 뇌 손상 재활 평가에 사용됩니다.
4. 소매 및 마케팅: 선반에 있는 소비자의 시선 궤적을 분석하여 제품 배치 및 포장 디자인을 최적화합니다.
5. 교육 및 훈련: 학습자의 주의력 분포를 추적하여 교육 자료의 효과를 평가합니다.
가상 쇼룸 또는 관광 홍보 영상의 시각적 핫스팟을 분석하여 콘텐츠 디자인을 최적화합니다.아이 트래커를 위한 신뢰할 수 있는 "시각 코어" 구축아이 트래킹 기술의 핵심 가치는 "시각적 주의력을 드러내는 것"에 있습니다. 그리고 이 모든 것의 시작점은 24MP 초고해상도, HBM 폐쇄 루프 자동 초점,
<1% 낮은 왜곡, 균일한 전체 프레임 해상도 및 MIPI 고속 인터페이스