시선 추적 장치는 사용자의 전방 방향으로 향하도록 위치하여 전방 영상을 생성하는 전방 카메라, 사용자의 눈을 향하도록 위치하여 눈 영상을 생성하는 눈 카메라, 미리 지정된 명령어에 따라 눈 영상을 참조하여 사용자의 시선을 추적하고, 사용자의 시선에 상응하는 전방 영상 상의 오브젝트를 포인팅하는 프로세서 및 명령어를 저장하는 메모리를 포함하되, 명령어는 사용자가 미리 지정된 사각형의 꼭지점을 응시하는 경우의 눈 영상으로부터 제1동공 좌표를 추출하는 단계, 미리 지정된 변환식에 따라 제1 동공 좌표에 상응하는 전방 영상의 좌표를 산출하는 단계, 전방 영상의 좌표와 꼭지점의 좌표인 기준 좌표 간의 오차를 산출하는 단계, 오차가 감소하도록 변환식을
보정하여 보정 변환식을 생성하는 단계, 눈 영상으로부터 제2 동공 좌표를 추출하는 단계 및 보정 변환식에 따라 제2 동공 좌표에 상응하는 전방 영상의 좌표를 산출하는 단계, 전방 영상의 좌표에 상응하는 객체를 포인팅하는 단계를 포함한다.