← 블로그로
오디오2026년 5월 4일업데이트 2026년 5월9분 읽기

AI 음성 복제 전화 사기: 작동 방식과 자신을 보호하는 방법

S

SUS IT

AI 음성 복제가 이제 가족과 기업을 노리는 전화 사기에 사용되고 있습니다. 공격이 어떻게 이루어지는지, 경고 신호는 무엇인지, 그리고 자신을 보호하기 위한 구체적인 방법을 알아봅니다.

2026년 초, FBI는 AI 음성 복제 사기가 미국에서 가장 빠르게 증가하는 사기 유형 중 하나가 되었다고 경고하는 공식 발표를 내놓았습니다. 단 3초 분량의 음성만으로도 누군가의 목소리를 그대로 복제해 실시간으로 그 사람인 것처럼 통화를 할 수 있게 해 주는 기술이, 이론적인 위험에서 범죄자들의 주류 인프라로 자리 잡은 것입니다. 이런 공격이 어떻게 이루어지는지 이해하는 것이 자신과 가족을 지키기 위한 첫걸음입니다.

음성 복제는 어떻게 작동하는가

최신 AI 음성 복제 모델은 매우 적은 양의 음성 샘플만으로도 설득력 있는 복제본을 만들어낼 수 있습니다. 초창기 모델은 몇 시간 분량의 학습용 음성이 필요했지만, 오늘날 온라인에서 무료로 구할 수 있는 주요 도구들은 단 3~10초 분량의 샘플만으로도 그럴듯한 복제본을 만들어냅니다. 이 샘플은 어디서든 얻을 수 있습니다. 음성 메시지, 유튜브 영상, 틱톡, 팟캐스트 출연분, 녹음된 통화 등이 모두 재료가 될 수 있습니다. 이렇게 만들어진 복제 음성은 실시간으로 사용될 수 있어, 범죄자가 자연스러운 응답으로 복제된 목소리로 실제 대화를 이어갈 수 있습니다.

품질은 편차가 있습니다. 독특한 목소리(강한 억양, 특이한 음색)를 가진 사람의 복제본은 평범한 음성 특징을 가진 사람의 복제본보다 다소 설득력이 떨어집니다. 하지만 이 맥락에서 "다소 설득력이 떨어진다"는 것도 여전히, 속임수를 예상하지 못한 가족을 속이기에는 충분할 정도로 설득력이 있다는 뜻입니다. 특히 대화가 긴박함과 감정적 스트레스를 유발하도록 설계되어 있을 때는 더욱 그렇습니다.

가족 응급상황 사기

가장 흔한 AI 음성 복제 사기는 예측 가능한 패턴을 따릅니다. 조부모나 부모 같은 가족 구성원이 모르는 번호로 전화를 받습니다. 발신자의 목소리는 자녀나 손주와 똑같이 들립니다. "가족"은 곤경에 처해 있습니다. 교통사고를 당했거나, 구치소에 갇혀 있거나, 보석금이 급히 필요하다고 합니다. 곧이어 대개 변호사, 경찰관, 보석보증인을 사칭하는 두 번째 인물이 전화를 넘겨받아 돈을 어떻게 보낼지 설명합니다. 계좌이체, 기프트카드, 암호화폐 등입니다. 상황의 긴박함과 "가족"의 설득력 있는 목소리가 결합되면서 피해자는 확인해 볼 생각을 하기도 전에 이미 요구에 응하게 됩니다.

이 사기는 압도적으로 효과적입니다. 2025년 FTC 데이터에 따르면 피해자는 건당 평균 11,000달러를 잃었습니다. 많은 피해자가 신고하기를 부끄러워하기 때문에 실제 피해 규모는 더 클 가능성이 높습니다. 이 사기가 통하는 이유는 인간의 가장 강력한 본능인 가족 보호 본능을 정확히 겨냥하고, 신뢰하는 목소리를 이용해 비판적 사고를 순간적으로 무력화시키기 때문입니다.

기업 대상 음성 사기

AI 음성 복제는 기업 대상 사기에도 사용됩니다. 가장 흔한 형태는 "CEO 사기" 전화입니다. 회사의 재무팀이 CEO 목소리로 걸려온 전화를 받는데, 새 거래처나 파트너에게 급히 계좌이체를 승인해 달라는 내용입니다. 발신자 표시는 종종 CEO의 이름이나 그럴듯한 회사 번호로 조작되어 있습니다. "지금 회의 중이라 오늘 업무 마감 전까지 처리해야 한다"는 식의 긴박함을 강조하는 표현은 수신자가 잠시 멈춰서 확인해 보는 것을 단념시킵니다.

기업 대상 음성 사기는 대개, 대기업만큼 재무 통제가 엄격하지는 않으면서도 거래 규모는 상당한 중견 기업을 노립니다. 문서화된 사례들을 보면 개별 사건의 피해액이 5만 달러에서 250만 달러에 이릅니다. 소비자 대상 사기와 달리 기업 대상 사기는 회사들이 보안 침해 사실을 공개적으로 밝히기를 꺼리기 때문에 신고되지 않는 경우가 많습니다.

화상 통화에서의 실시간 복제

새롭게 등장하고 있는 특히 우려스러운 변형은 화상 통화에서 실시간 음성 및 얼굴 복제를 사용하는 방식입니다. 범죄 조직은 이 기법을 이용해 화상 채용 면접에서 임원을 사칭하여 회사가 가상의 인물을 채용하도록 유도해 왔습니다. 2025년 FBI는 원격 근무 지원자가 실시간 AI 얼굴 및 음성 대체 기술을 이용해 다른 사람 행세를 한 사례가 상당수 있었다고 보고했습니다. 이 중에는 신원을 도용당한 실존 인물인 경우도 있었고, 가상으로 합성한 인물인 경우도 있었습니다. 일단 채용되면 이들은 회사 시스템, 접근 권한, 민감한 데이터에 접근할 수 있었습니다.

음성 복제 전화의 경고 신호

음성 복제 사기 전화에서는 몇 가지 패턴이 반복해서 나타납니다. 극도의 긴박함: 진짜 응급상황이라면 확인할 시간적 여유가 있기 마련입니다. 정말로 곤경에 처한 가족은 다시 전화를 걸 수 있지만, 사기꾼은 어떤 지연도 강하게 거부합니다. 비정상적인 결제 수단 요구: 합법적인 법률, 의료, 정부 기관 중 기프트카드, 암호화폐, 낯선 계좌로의 계좌이체를 요구하는 곳은 없습니다. 확인에 대한 저항: 사기꾼은 전화를 끊고 알려진 번호로 다시 걸어보는 것을 강하게 만류합니다. "전화기가 고장 났다", "그 사람이 지금 전화를 받을 수 없다", "시간이 촉박하다" 같은 그럴듯한 이유를 대면서 말입니다. 감정 고조: 사기꾼은 피해자를 성찰적인 상태가 아니라 반응적인 상태로 계속 붙잡아두기 위해 의도적으로 감정 강도를 높입니다.

목소리 자체의 품질도 때로는 단서가 될 수 있습니다. 다음을 잘 들어보세요. 특정 음(특히 치찰음이나 마찰음)에서 나타나는 미묘하게 로봇 같은 음색, 비정상적으로 일정한 에너지와 속도(복제된 목소리는 스트레스 상황에서 실제 음성이 보이는 자연스러운 변화가 없습니다), 복제 시스템이 응답을 계산하는 동안 순간적으로 나타나는 오디오 아티팩트, 그리고 자연스러운 대화보다 약간 더 긴 응답 지연 등입니다.

가족 안전 암호

가족 응급상황 음성 사기에 대한 가장 효과적인 방어책은 가족 안전 암호를 정해두는 것입니다. 이는 어떤 대화에서든 가족 구성원이 진짜 가족과 통화하고 있는지 확인하기 위해 요청할 수 있는 암호입니다. 이 암호는 기억하기 쉽지만 공개된 정보로는 추측할 수 없어야 하고, 직계 가족만 알고 있어야 하며, 디지털 형태로는 절대 기록하지 않아야 하고, 문자나 이메일이 아니라 직접 얼굴을 보고 나눈 대화에서 정해야 합니다. 실제 응급상황이라면 진짜 가족은 그 암호를 알고 있을 것입니다. 복제된 목소리를 쓰는 사기꾼은 알지 못합니다.

기업을 위한 기술적 보호 장치

기업의 경우 가장 효과적인 보호책은 기술적인 것이 아니라 절차적인 것입니다. 다중 승인은 일정 금액 이상의 금융 거래에 대해 누가 요청했든 관계없이 두 번째 승인을 요구하는 것입니다. 콜백 검증은 전화로 들어온 금융 요청을, 걸려온 번호가 아니라 회사 기록에 있는 알려진 번호로 요청자에게 다시 전화를 걸어 확인하는 것입니다. 채널 분리 확인은 이메일, 시그널, 대면 등 별도의 채널을 통해 요청을 확인한 후 조치를 취하는 것입니다. 이런 절차는 번거롭지만 효과가 있습니다. 불편한 진실은, 대부분의 기업 음성 사기가 성공하는 이유가 회사들이 시간에 쫓기는 상황에서 자체 재무 통제 절차를 지키지 않기 때문이라는 것입니다.

표적이 되었다면 어떻게 해야 할까

음성 복제 사기 전화로 의심되는 전화를 받았다면, 즉시 전화를 끊고 아무것도 지불하지 마세요. 알려진, 검증된 번호로 해당 가족이나 동료에게 직접 전화를 걸어 무사한지 확인하세요. FBI 인터넷범죄신고센터(IC3, ic3.gov), FTC(reportfraud.ftc.gov), 그리고 관할 경찰서에 신고하세요. 이미 돈을 보냈다면 즉시 은행이나 결제 플랫폼에 연락하세요. 특히 계좌이체의 경우, 신고가 빠를수록 회수 가능성이 높습니다. 기프트카드 거래는 되돌리기가 더 어렵지만, 즉시 기프트카드 회사에 신고하면 가장 좋은 기회를 잡을 수 있습니다.

탐지의 관점에서

SUS IT의 오디오 분석을 포함한 AI 음성 복제 탐지 도구는 실제 사람의 발화에는 존재하지만 AI 합성으로는 완벽하게 재현되지 않는 스펙트럼 특성, 미세 타이밍 패턴, 생리적 지표를 분석해 복제된 음성을 식별할 수 있습니다. 이런 도구는 실시간 통화보다 녹음된 음성에서 더 잘 작동하기 때문에, 의심스러운 음성 메시지 확인, 사기 발생 후 오디오 증거 분석, 자동 모니터링 시스템에서 녹음된 업무 통화 스크리닝 등에 가장 유용합니다. 실시간 통화 분석은 활발히 개발되고 있는 분야로, 2026년 들어 일부 통신사 차원의 제품이 등장하기 시작했습니다.

더 큰 그림

AI 음성 복제 사기는 누군가의 음성이나 영상만 있으면 그 사람이 무슨 말이든 한 것처럼 만들 수 있는 세상을 미리 보여주는 사례입니다. 이에 대한 대응은 기술적인 것뿐 아니라 문화적인 것이어야 합니다. 확인하는 습관을 기르고, 가족과 기업 차원의 절차를 마련하고, 이제는 위험으로 널리 인식되는 이메일 피싱을 대하듯 오디오·영상 증거도 같은 수준의 회의적인 태도로 대해야 합니다. 복제를 가능하게 하는 기술은 사라지지 않습니다. 이에 대한 방어책을 마련하는 일은 오늘부터 시작해야 하는 과제입니다.

관련 글

SUS IT 무료 체험

가입하고 파일·링크를 1회 무료로 AI 분석하세요.

무료로 시작