AI 면접 아이트래킹 완전 해설: 비디오 면접에서 실제로 무엇을 분석하는가

요약: AI 면접 아이트래킹은 HireVue가 시선 패턴을 포함한 얼굴 단서로 지원자를 채점한다고 주장하면서 주목받기 시작했습니다. 2021년 3월, HireVue는 내부 연구 결과 얼굴 분석이 직무 성과 예측에 0.25%밖에 기여하지 못한다는 사실이 밝혀지자 조용히 해당 기능을 폐기했습니다. 지금도 남아 있는—그리고 여전히 중요한—것은 카메라를 향한 기본적인 시선 정렬입니다. 이 가이드에서는 2026년 현재 AI 비디오 면접이 실제로 무엇을 분석하는지, 어떤 우려가 현실이고 어떤 것이 과장된 것인지, 그리고 실제로 차이를 만드는 카메라 설정 조정 방법을 설명합니다.

---

AI 면접 아이트래킹을 개척한 회사가 그 기능을 스스로 없앴습니다.

2021년 3월, HireVue—시선 패턴을 포함한 58가지 행동 지표로 지원자의 얼굴을 스캔하던 플랫폼—는 얼굴 분석 기능을 중단한다고 발표했습니다. 이유는 자체 내부 연구에서 얼굴 표정 데이터가 직무 성과 예측에 0.25% 미만의 기여밖에 하지 못한다는 것이 밝혀졌기 때문입니다. 수년간 지원자들에게 불안을 안겨준 기능치고는 놀랍도록 작은 수치입니다.

대부분의 경우 더 이상 측정하지 않는 AI를 위해 시선 행동을 최적화하는 데 시간을 쏟기 전에, 이 사실을 먼저 알고 가야 합니다. 그러나 '대부분'이 '전부'는 아니며, 2026년 비디오 면접 AI 분석의 현실은 "AI가 당신의 눈 깜빡임까지 감시한다"는 공포나 "다 괜찮다"는 안심 중 어느 쪽보다 훨씬 복잡합니다.

---

AI 면접 아이트래킹이란 무엇인가

AI 면접 아이트래킹이란 비디오 면접 플랫폼에 내장된 컴퓨터 비전 시스템을 말합니다. 지원자의 시선이 어디를 향하는지, 카메라를 향한 시선을 얼마나 유지하는지, 그리고 답변 중 시선 이동 패턴을 추적합니다.

HireVue 같은 벤더들의 원래 주장은 시선 행동—카메라 직시 유지, 어려운 질문에 답할 때 시선을 돌리지 않는 것, 과도한 눈 깜빡임 피하기—이 자신감, 정직함, 적극성 같은 특성과 상관관계가 있다는 것이었습니다. 이 시스템들은 영상을 프레임 단위로 분석해 시선 지표를 음성 패턴, 어휘 선택, 목소리 톤과 함께 광범위한 행동 채점 모델에 입력했습니다.

이론상으로는: 카메라를 직접 바라보고, 안정적인 시선을 유지하며, 시선 회피를 최소화한 지원자가 자동 스크리닝에서 높은 점수를 받는 구조였습니다.

실제로는: 이 배경이 되는 과학적 근거는 항상 취약했으며, 학습 데이터 기준선과 다른 자연스러운 시선 패턴을 가진 지원자들이 실질적인 불이익을 받았습니다.

---

HireVue 아이트래킹 폐기라는 전환점

HireVue의 2021년 얼굴 분석 폐기 결정은 이 분야에서 가장 중요한 사건입니다—그리고 "HireVue 면접 합격 비법" 기사들이 가장 다루지 않는 사실이기도 합니다.

경과: EPIC(전자개인정보정보센터)는 2019년 HireVue를 FTC에 제소하며 얼굴 분석 시스템에 과학적 검증이 부족하고 편향 위험이 있다고 주장했습니다. HireVue는 이 주장을 반박했지만 독립적인 감사를 의뢰했습니다. O'Neil Risk Consulting이 실시한 감사에서 얼굴 분석 구성 요소의 예측 가치가 미미하다는 결과가 나왔습니다. HireVue는 2021년 3월 이 기능을 중단했고, Fortune의 보도에 따르면 이후 언어와 음성 기능만으로 지원자를 채점하게 되었습니다.

즉, 오늘날 HireVue 면접을 본다면 얼굴 표정과 아이트래킹은 채점되지 않습니다. 시스템은 당신의 말과 목소리를 분석합니다. 이는 또한 "HireVue 면접 중 카메라와 80% 아이컨택을 유지하라"는 광범위하게 퍼진 조언이 더 이상 그 형태로 존재하지 않는 기능을 대상으로 한다는 것을 의미합니다.

HireVue가 여전히 모니터링하는 것—화면 녹화, 탭 전환 등—에 대해서는 HireVue 면접에서 무엇을 볼 수 있는가 가이드를 참고하세요.

---

AI 면접 얼굴 분석이 현재도 실제로 측정하는 것

HireVue의 방침 전환이 비디오 면접 기술 전반에서 얼굴 분석이 사라졌음을 의미하지는 않습니다. 다른 여러 플랫폼이 계속 사용하고 있으며, 그 활용 방식은 다양합니다.

일부 플랫폼이 현재도 분석하는 것:

• 감정 평가 점수화—얼굴 행동 코딩 시스템(FACS) 데이터로 훈련된 모델을 사용해 표정을 긍정·중립·부정으로 분류
• 참여도 지표—머리 움직임, 프레임 내 얼굴의 존재/부재, 대략적인 시선 방향(화면을 보고 있는지 딴 곳을 보는지)
• 프레젠테이션 에너지—표정 변화와 음성 에너지를 결합해 "열정" 점수를 추정하는 시스템

어떤 플랫폼도 신뢰할 수 있게 측정할 수 없는 것:

• 시선 패턴의 배후 의도. 왼쪽을 보는 것이 속임수를 나타낸다고 볼 수 없습니다—대중심리학 바디 랭귀지 가이드가 뭐라 주장하든.
• 문화적 시선 규범. 아이컨택 행동은 문화에 따라 크게 다릅니다—미국 면접 맥락에서 자신감 있는 적극성으로 읽히는 것이 다른 맥락에서는 공격적이거나 무례하게 보일 수 있습니다.
• 개인 차이. 자폐 스펙트럼 장애가 있는 지원자, 시각 장애가 있는 지원자, ADHD 약을 복용 중인 지원자 모두 능력과 무관한 비전형적인 시선 패턴을 가지고 있습니다.

2025년 arXiv(2505.12114)에 발표된 동료 심사 연구는 GAN 생성 반사실적 영상을 활용해 AI 면접 채점 시스템이 동일한 성과에 대해 여성, 고령 지원자, 아프리카계 미국인 지원자를 낮게 평가함을 입증했으며, 얼굴 특징 분석이 그 원인 중 하나였습니다. 편향은 가상의 이야기가 아닙니다.

AceRound AI는 얼굴 분석을 실행하는 대신 실제로 무엇을 말하고 어떻게 답변을 구성하는지에 초점을 맞춥니다—이 도구는 외모 채점이 아닌 답변 품질 코칭을 중심으로 설계되었습니다.

---

핵심 포인트: 한국 AI 면접의 시선 고정률 문제

한국 취업 준비생이라면 반드시 알아야 할 사실이 있습니다. 사람인의 AI 스크리닝 도구와 일부 국내 AI 면접 플랫폼은 시선 고정률을 명시적으로 채점 항목으로 포함하고 있습니다. 국내 기업 HR 담당자 설문조사에서 시선 회피는 면접에서 두 번째로 많이 감점을 받는 행동으로 나타났습니다—잡코리아, 인크루트 등의 플랫폼을 통한 취업 준비 자료에서도 이 점이 강조됩니다.

이것이 HireVue의 방침 전환과 더욱 흥미롭게 대비됩니다. HireVue는 국제적으로 시선 채점을 폐기했지만, 삼성·카카오·네이버 같은 국내 대기업이나 외국계 기업에 지원하는 한국 취업 준비생들은 여전히 플랫폼에 따라 이중적인 현실을 마주칩니다.

• 국내 플랫폼 (사람인 AI 면접): 시선 고정률 명시적 측정
• 글로벌 플랫폼 (HireVue): 얼굴 분석 폐기, 언어·음성만 채점

결론: 어떤 플랫폼으로 면접을 보는지 미리 확인하는 것이 중요합니다.

---

2026년 비디오 면접 아이컨택 AI 현황

폐기된 HireVue 기능은 별개로, 현실적인 질문이 있습니다: AI가 시선을 채점하지 않는다면, 왜 많은 지원자들이 시선 때문에 면접을 망쳤다고 느낄까요?

답은 알고리즘이 아닌 사람 검토자에게 있습니다.

대부분의 AI 비디오 면접 플랫폼은 자동 스크리닝을 첫 번째 필터로 사용한 후, 기준을 통과한 지원자를 녹화 영상을 보는 사람 검토자—채용 담당자, 리크루터, 인사 직원—에게 넘깁니다. 이들은 알고리즘적 측정이 아닌, 평범한 인간의 사회적 인지로 아이컨택에 기반한 인상을 형성합니다.

오늘날 존재하는 비디오 면접 아이컨택 AI 도구는 일반적으로 두 범주로 나뉩니다:

시선 교정 소프트웨어 (Nvidia RTX Eye Contact, Zoom Appearance Studio, Apple Center Stage): AI를 사용해 메모를 읽거나 다른 화면 영역을 볼 때도 면접관을 직접 바라보는 것처럼 보이도록 실시간으로 시선을 합성적으로 수정합니다. 지원자와 경험 많은 면접관 모두 점점 더 많이 사용하고 있습니다. 삼성, 카카오, 네이버뿐 아니라 외국계 기업 면접을 준비하는 한국 취업 준비생들 사이에서도 이 도구들에 대한 관심이 높아지고 있습니다.

AI 면접 코칭 도구: 연습 면접을 분석하고 시선 방향을 포함한 피드백을 제공하는 플랫폼입니다. AceRound 같은 도구는 일반적으로 질문을 제시하고 연습 답변을 녹화한 후, 중요한 순간에 시선을 다른 곳으로 향했는지 보여줍니다. 이것은 진정으로 유용한 피드백입니다—라이브 면접 중 AI가 시선을 채점해서가 아니라, 시선 회피가 사람 검토자가 알아차리는 실제 대화 신호이기 때문입니다.

---

시선 감지와 공정성 문제

면접 맥락에서의 시선 감지는 HireVue의 특정 구현을 넘어서는 문서화된 공정성 문제를 안고 있습니다.

앞서 언급했듯이 사람인의 AI 스크리닝 도구 같은 한국 AI 면접 플랫폼에서는 시선 고정률이 명시적으로 채점됩니다. 신경발달이 비전형적인 지원자, 불안 장애가 있는 지원자, 지속적인 직접 시선이 부적절하다고 여겨지는 문화권 출신 지원자—이들은 해당 직무를 수행하는 능력과 무관한 알고리즘적 불이익에 직면합니다.

공통점: 시선 최적화 조언은 서양의, 신경전형적이며 고맥락적인 대화 규범에 맞춰진 좁은 행동 템플릿으로 지원자를 유도하는 경향이 있으며, 자연스럽게 그 템플릿 밖에 있는 모든 사람을 능력과 무관하게 불이익에 빠뜨립니다.

가장 현실적인 입장: 어차피 측정하지 않을 가능성이 높은 특정 알고리즘이 아닌, 사람 검토자에게 좋은 인상을 줄 수 있는 자연스럽고 적극적인 시선을 위해 최적화하는 것입니다.

---

실제로 효과가 있는 아이컨택 팁

위의 모든 내용을 고려했을 때, 비디오 면접에서 아이컨택과 관련해 실제로 중요한 것들을 정리합니다.

카메라 위치가 시선 행동보다 더 중요합니다. 노트북 카메라가 눈 높이보다 아래에 있다면—데스크 위에 노트북을 올려놓은 대부분의 사람이 그렇습니다—자연스럽게 화면을 내려다보게 되고, 이것은 사람 검토자에게 시선 회피로 읽힙니다. 카메라가 눈 높이에 오도록 노트북이나 외부 모니터를 높이세요. 이 하나의 조정만으로 행동 변화 없이 가장 흔한 시선 문제가 해결됩니다.

중요한 순간에는 자신의 얼굴이 아닌 카메라 렌즈를 보세요. 대부분의 화상 통화 인터페이스는 작은 썸네일에 자신의 얼굴을 표시합니다. 화상 통화가 익숙하지 않은 사람들은 카메라 대신 자신을 보는 습관이 있습니다. 카메라 렌즈는 중요한 포인트를 전달할 때—특히 답변의 시작과 끝—시선을 향해야 할 곳입니다. 답변 중간에 면접 소프트웨어에서 면접관의 얼굴을 보는 것은 괜찮습니다.

응시하지 마세요. 눈을 깜빡이지 않고 카메라 렌즈를 고정적으로 응시하면 부자연스럽고 강한 인상을 줍니다. 정상적인 대화적 시선에는 "생각하기 위해" 잠깐 시선을 돌리는 것이 포함됩니다—이것은 신경학적으로 정상이며 사회적으로 기대됩니다. 문제는 과도한 시선 회피이지, 시선 회피 자체가 아닙니다.

조명은 시선만큼 중요합니다. 역광이 있다면(뒤에 창문이 있으면) 얼굴에 그림자가 생기고 눈 부위가 불분명해집니다. 정면을 향한 부드러운 조명(링 라이트, 앞쪽 자연 창문 빛)은 얼굴—눈을 포함해—을 선명하고 잘 보이게 합니다. 잘 보이고 밝게 비춰진 얼굴은 사람과 알고리즘 모두에게 더 좋은 인상을 줍니다.

메모를 사용한다면 배치 방법. AI 면접 코파일럿을 사용하거나 면접 중 메모를 읽는다면, 텍스트를 카메라 가능한 한 가까이—이상적으로는 화면 상단, 카메라 바로 아래의 좁은 세로 열에—배치하세요. 카메라에서 메모로의 시선 이탈이 최소화되고, 짧은 시선 이동은 거의 알아차리기 어렵게 됩니다.

---

자주 묻는 질문

눈 움직임 추적은 지원자의 진실성을 감지하는 데 얼마나 정확한가요?

채용 결정에 사용할 만큼 정확하지 않습니다—그래서 HireVue는 내부 검증에서 직무 성과 예측 기여도가 0.25% 미만임이 밝혀진 후 이 기능을 폐기했습니다. 영상을 보는 사람 검토자도 "기만적 시선"을 "문화적 시선 규범," "불안 시선," "ADHD 시선"과 신뢰할 수 있게 구별할 수 없습니다—이 모두가 완전히 다른 원인에서 비롯된 유사한 행동 패턴을 보입니다.

아이트래킹은 지원자가 면접 중 대본을 읽는지 감지할 수 있나요?

경우에 따라 가능합니다—카메라에서 멀리 떨어진 두 번째 모니터나 문서에서 읽고 있다면, 시선 방향이 면접관과 대화하는 것과 명백히 일치하지 않게 됩니다. 이것은 특수한 아이트래킹 소프트웨어가 없어도 녹화 영상을 보는 사람 검토자가 감지할 수 있습니다. 해결책: 메모를 별도 화면이 아니라 카메라 바로 아래나 옆에 배치하세요.

안경을 쓰거나 조명이 어두울 때 아이트래킹이 제대로 작동하나요?

제대로 작동하지 않습니다. 안경은 시선 추적 알고리즘을 혼란스럽게 하는 반사를 만들고, 낮은 조명은 얼굴 랜드마크 감지 정확도를 크게 떨어뜨립니다. 카메라를 향하려는 근본적인 의도가 동일해도 시선 기반 채점이 일관성 없는 결과를 내는 이유 중 하나가 이것입니다—환경적 요인이 너무 많은 분산을 만들어냅니다.

면접 중 AI 프롬프트를 읽으면서 아이컨택을 유지하려면 어떻게 해야 하나요?

카메라 렌즈 바로 아래에 배치한 텔레프롬프터 방식의 창을 사용하세요. 여러 AI 면접 코칭 도구와 텔레프롬프터 앱이 이 레이아웃을 지원합니다. 핵심은 텍스트에서 카메라까지의 거리를 최대한 줄이는 것입니다—머리 전체를 기울이지 않고 짧은 아래 방향 시선으로 읽을 수 있는 크기의 폰트로, 화면 상단에 좁은 세로 열의 텍스트.

HireVue는 화면을 녹화하나요?

HireVue는 카메라와 오디오를 녹화합니다. 화면 녹화 기능은 특정 고용주 설정에 따라 다르지만, 표준 HireVue 비디오 면접은 비디오와 오디오만 캡처합니다—화면 내용은 캡처하지 않습니다. 다양한 면접 모드에서 HireVue가 캡처하는 내용의 자세한 설명은 HireVue에서 무엇을 볼 수 있는가 가이드에서 확인할 수 있습니다.

눈 움직임 추적은 특정 지원자에게 편향되거나 불공평할 수 있나요?

그렇습니다—동료 심사 연구에서 문서화되었습니다. 2025년 arXiv 연구에서 AI 면접 채점 시스템이 동일한 성과에 대해 여성, 고령 지원자, 아프리카계 미국인 지원자를 낮게 평가함이 밝혀졌습니다. 신경발달이 비전형적인 지원자와 다른 아이컨택 규범을 가진 문화권 지원자들도 유사한 알고리즘적 불이익에 직면합니다. 이것이 HireVue 자체 감사가 해당 기능 폐기로 이어진 이유 중 하나이며, 여러 법적 관할권의 규제 당국이 AI 채용 도구에 대한 알고리즘 편향 감사를 요구하기 시작한 이유입니다.

---

저자 · Alex Chen. 커리어 컨설턴트, 전직 테크 기업 리크루터. 채용 측에서 5년간 경험을 쌓은 후 지원자를 돕는 쪽으로 전환했습니다. 교과서적인 조언이 아닌 실제 면접 역학에 대해 씁니다.