검증 · 읽는 데 약 6분
AI 요약·번역, 그대로 믿기 전에 확인할 점
긴 안내문을 줄이거나 외국어 글을 옮길 때 AI를 쓰면 시간을 아낄 수 있어요. 하지만 AI가 만든 요약과 번역은 원문과 다를 수 있어요. 결과를 그대로 믿기 전에 무엇을 어떻게 확인하면 되는지 정리했어요.
AI 요약·번역이 틀리는 세 가지 방식
첫째는 빠뜨리기예요. '단, 65세 이상만'처럼 중요한 조건이나 예외가 요약에서 빠질 수 있어요. 둘째는 바꾸기예요. '효과가 없었다'가 '효과가 있었다'로 뒤집힐 수도 있고, 조심스러운 표현이 단정하는 말로 바뀌기도 해요.
셋째는 지어내기예요. 원문에 없는 숫자나 문장을 그럴듯하게 덧붙이는 거예요. AI가 사실이 아닌 내용을 사실처럼 만들어 내는 현상을 흔히 '환각'이라고 불러요. 문장이 매끄러우면 틀린 곳을 알아채기가 더 어려워요.
이런 일이 생기는 까닭이 있어요. AI는 원문을 그대로 오려 붙이지 않고, 원문을 바탕으로 문장을 새로 만들어 내요. 이 과정에서 원문에 없던 말이 섞이거나 중요한 말이 빠질 수 있어요.
조사와 연구에서 확인된 문제
2025년 10월 유럽방송연맹(EBU)이 주관한 국제 조사 결과가 나왔어요. 18개 나라 공영방송 22곳의 기자들이 AI 챗봇 4종이 뉴스 질문에 내놓은 답변 3,000여 건을 평가했어요. 그 결과 답변의 45%에서 중요한 문제가 하나 이상 나왔어요.
자세히 보면 답변의 31%는 출처 표시에 심각한 문제가 있었어요. 출처를 빠뜨리거나, 내용과 맞지 않는 출처를 달거나, 출처를 틀리게 적은 경우예요. 20%에는 지어낸 내용이나 오래된 정보 같은 큰 정확성 문제가 있었어요.
같은 해 발표된 한 연구는 AI 모델(AI 챗봇의 바탕이 되는 프로그램) 10종이 만든 과학 연구 요약 4,900건을 원문과 비교했어요. 대부분의 모델이 원문보다 결론을 더 넓게 일반화했어요. 일반화란 일부에서 확인된 결과를 모두에게 해당하는 것처럼 넓혀 말하는 거예요. '이 연구에 참여한 사람들에게 효과가 있었다'를 '이 방법은 효과가 있다'로 바꾸는 식이에요.
사람이 쓴 과학 요약과 비교해 보니, AI 요약에 이런 넓은 일반화가 들어갈 가능성이 5배 가까이 높았어요. 정확하게 요약하라고 따로 요청해도 대부분의 모델이 넓게 일반화했어요. 부탁하는 말을 잘 쓰는 것만으로는 부족하다는 뜻이에요. 결과를 원문과 맞춰 보는 습관이 필요해요.
요약을 맡길 때 이렇게 부탁하세요
부탁하는 말을 조금 바꾸면 나중에 확인하기가 훨씬 쉬워져요. 결과가 완벽해지지는 않지만, 틀린 곳을 찾기 좋은 모양으로 받을 수 있어요. 다만 부탁대로 했다는 AI의 말도 틀릴 수 있으니 마지막 확인은 사람이 해야 해요.
요약을 부탁할 때 아래 문장 가운데 필요한 것을 골라 끝에 덧붙여 보세요. 한두 개만 넣어도 결과를 확인하기가 한결 쉬워져요.
- '숫자, 날짜, 이름은 원문 그대로 옮겨 줘.'
- '조건과 예외는 따로 모아서 보여 줘.'
- '원문에 없는 내용은 넣지 말고, 확실하지 않은 부분은 표시해 줘.'
- '각 문장이 원문 몇 번째 문단에서 나왔는지 함께 적어 줘.'
요약을 확인하는 방법
요약은 원문을 대신하는 글이 아니라 원문으로 가는 길잡이라고 생각하세요. 요약에서 중요한 문장을 고른 뒤, 원문 어디에 그 말이 있는지 찾아 나란히 놓고 봐요.
숫자는 한 글자만 달라도 뜻이 크게 바뀌어요. '하루 2번'이 '이틀에 1번'으로 바뀌면 전혀 다른 안내가 돼요. 숫자가 나오는 문장은 빠짐없이 원문과 맞춰 보세요.
틀린 곳을 찾으면 그 부분을 짚어 다시 요약해 달라고 하세요. 고친 결과도 같은 방법으로 한 번 더 확인하면 돼요. 원문과 맞춰 볼 때는 아래 다섯 가지를 차례로 살펴보세요.
- 숫자·날짜·금액·이름이 원문과 같은지
- '않다·없다·못 한다' 같은 부정 표현이 그대로 남았는지
- '단, 다만, ~인 경우에만' 같은 조건과 예외가 빠지지 않았는지
- 원문에 없는 내용이 덧붙지 않았는지
- 출처 링크를 직접 열었을 때 정말 그 내용이 있는지
번역을 확인하는 방법
번역은 짧게 나눠서 맡기세요. 긴 글을 한 번에 넣으면 어느 문장이 빠졌는지 알아채기 어려워요. 문단별로 번역하면 원문과 나란히 놓고 보기 쉬워요. 번역이 끝나면 원문과 문단 수가 같은지부터 세어 보세요.
번역된 글을 다시 원래 언어로 번역해 보는 '되돌려 번역하기'도 도움이 돼요. 뜻이 크게 달라진 곳을 찾는 데 쓸모가 있어요. 하지만 두 번 다 같은 실수를 할 수 있어서 이것만으로 정확하다고 볼 수는 없어요.
숫자와 단위, 날짜 순서는 따로 확인하세요. 나라마다 날짜를 쓰는 순서가 달라 '3/4'가 3월 4일인지 4월 3일인지 헷갈릴 수 있어요. 사람 이름과 약 이름 같은 고유한 이름도 원문 그대로 옮겨졌는지 보세요.
말투도 살펴보세요. 외국인 이웃이나 거래처에 보낼 글이라면 '정중한 말투로 번역해 줘'라고 조건을 붙이세요. 우리말의 높임 표현은 다른 언어로 옮기면서 사라지거나 지나치게 딱딱해질 수 있어요.
이럴 때는 AI 결과만으로 판단하지 마세요
약 먹는 법, 진료 안내, 계약서, 행정 서류, 돈이 오가는 안내문은 작은 오역(잘못된 번역) 하나가 큰 손해로 이어질 수 있어요. 이런 글은 AI 결과를 참고만 하고 의사·약사, 담당 기관, 전문 번역가에게 확인하세요.
최신 뉴스도 조심하세요. AI는 오래된 정보를 지금 일처럼 말할 수 있어요. 언론사의 원래 기사나 기관의 공식 발표를 직접 찾아보는 것이 가장 확실해요.
급하게 AI 번역으로 대화해야 할 때는 짧고 쉬운 문장으로 바꿔서 번역하세요. 상대에게 '번역 앱으로 옮긴 글이라 틀릴 수 있어요'라고 먼저 밝혀 두면 오해를 줄일 수 있어요.
오늘부터 해 볼 것
- 요약 속 숫자·날짜·금액·이름을 원문과 하나씩 맞춰 봐요.
- '않다·없다' 같은 부정 표현과 '단, 다만' 같은 조건이 남아 있는지 봐요.
- 원문에 없는 내용이 덧붙었는지 확인해요.
- 출처 링크는 직접 열어 그 내용이 정말 있는지 봐요.
- 번역은 문단별로 나눠 맡기고, 뜻이 이상한 곳은 되돌려 번역해 봐요.
- 건강·돈·계약·행정 서류는 전문가나 담당 기관에 확인해요.
읽은 내용을 글링코에게 가르쳐 줄까요?3분 수업을 풀면 글링코가 배우고 자라요.
「AI의 거짓말 잡기」 수업 풀기이 글에 나온 용어
자주 묻는 질문
요약만 읽고 원문은 안 봐도 될까요?
가볍게 훑어볼 글이라면 요약으로 충분할 때가 많아요. 하지만 그 내용으로 무언가를 결정해야 한다면 핵심 부분만이라도 원문을 확인하세요. 특히 조건과 예외가 담긴 문장은 원문으로 읽어 보는 것이 안전해요.
번역 앱 두 개의 결과가 같으면 믿어도 되나요?
결과가 같으면 큰 오역일 가능성은 줄지만, 둘 다 같은 실수를 할 수도 있어요. 반대로 결과가 서로 다르다면 그 부분이 바로 확인할 곳이에요. 중요한 문서는 사람 전문가에게 확인받는 것이 안전해요.
AI가 출처를 달아 주면 믿어도 되나요?
출처가 붙어 있다는 것만으로는 부족해요. 앞에서 본 국제 조사에서도 답변의 31%에서 출처 표시에 심각한 문제가 있었어요. 링크를 직접 열어 그 페이지에 정말 같은 내용이 있는지, 언제 쓴 글인지 확인하세요.
