AI가 지어낸 참고문헌, 가짜인지 어떻게 가려내죠

AI에게 참고 문헌을 달라고 했더니 저자 이름, 논문 제목, 발행 연도까지 그럴듯하게 나왔는데, 찾아보니 세상에 없는 논문이었다. 탐구 보고서를 쓰는 고2 사이에서 한 번쯤 돌고 도는 이야기예요. 웃어넘기기 쉽지만, 이 장면 안에 요즘 탐구 보고서가 평가받는 방식이 다 들어 있어요.

보고서의 내용은 이제 누구나 그럴듯하게 만들 수 있어요. 그래서 선생님과 대학이 눈여겨보는 곳이 옮겨 갔어요. 이 내용을 어디서 가져왔는지, 그리고 그게 맞는지 어떻게 확인했는지. 출처와 검증 과정이 곧 그 학생의 탐구 능력이 된 거예요.

그럴듯함과 정확함은 다른 말이에요

AI가 내놓는 문장은 대부분 자연스러워요. 문법도 맞고 논리도 매끄러워서 읽다 보면 믿고 싶어져요. 그런데 자연스러운 것과 사실인 것은 별개예요. 수돗물의 거품이 왜 생기는지 물으면 AI는 공기, 수압, 물속 물질 같은 설명을 술술 늘어놓겠지만, 그중 어떤 게 내가 사는 동네 수돗물에 해당하는지는 알려 주지 않아요.

그래서 탐구 보고서에서 진짜 일은 AI의 답을 받은 다음부터 시작돼요. 이 설명이 어디에 근거한 건지, 교과서나 공신력 있는 기관의 자료와 맞는지, 내가 직접 관찰하거나 측정한 것과 어긋나지 않는지 확인하는 과정이요. 이 과정을 거친 보고서와 안 거친 보고서는 겉으로 비슷해 보여도 무게가 완전히 달라요.

출처는 꼬리표가 아니라 근거의 지도예요

많은 학생이 참고 문헌을 보고서 맨 끝에 형식적으로 붙여요. 어디서 봤는지 대충 기억나는 사이트 몇 개를 적어 넣고 끝내죠. 그런데 출처는 원래 읽는 사람이 내 주장을 따라가 볼 수 있게 해 주는 지도예요. 이 문장은 어디서 왔고, 저 수치는 어느 자료에서 나왔는지 본문과 연결돼 있어야 의미가 있어요.

좋은 출처에는 순서도 있어요. 교과서와 교육 기관 자료, 정부나 공공기관의 통계, 학술 자료처럼 누가 언제 만들었는지 확인할 수 있는 자료가 먼저예요. 블로그나 커뮤니티 글은 아이디어를 얻는 데는 쓸 수 있어도 근거로 삼기엔 약하고요. AI의 답은 그 자체로 출처가 될 수 없어요. AI가 말한 내용의 원래 근거를 찾아가는 게 학생의 몫이에요.

검증 과정은 보고서 안에 보이게 써야 해요

검증을 했는데 보고서에 안 쓰면 선생님은 모르세요. 그래서 검증 과정을 아예 보고서의 한 부분으로 만드는 게 좋아요. 'AI 설명에서 이 부분이 교과서와 달라 두 자료를 비교했다', '처음 찾은 수치가 자료마다 달라 공공기관 통계를 기준으로 삼았다' 같은 문장이 들어가는 자리를 따로 마련하는 거죠.

검증하다가 틀린 걸 발견했다면 그건 숨길 일이 아니라 자랑할 일이에요. 앞에서 말한 존재하지 않는 논문을 직접 찾아보다가 확인했다면, 그 경험을 보고서에 적어 두세요. 정보를 그대로 믿지 않고 끝까지 확인하는 태도는 대학이 학업역량에서 가장 반가워하는 모습 중 하나예요.

면접까지 생각하면 이 부분은 더 중요해져요. 보고서 내용을 두고 "이 수치는 어디서 확인했어요?"라는 질문을 받았을 때, 출처와 확인 과정을 자기 말로 설명할 수 있는 학생은 당황하지 않아요. 반대로 AI가 정리해 준 내용을 그대로 옮긴 학생은 그 질문 하나에 말문이 막히곤 하죠.

직접 해 본 한 가지가 열 줄 설명보다 강해요

검증 방법 중 가장 힘이 센 건 직접 해 보는 거예요. 분자 구조를 다루는 화학 보고서라면 모형을 직접 만들어 보거나 간단한 실험으로 확인하고, 사회 현상을 다루는 보고서라면 작은 설문이라도 직접 해 보는 거죠. 결과가 AI의 설명과 같으면 근거가 단단해지고, 다르면 그 차이가 새 질문이 돼요.

물론 모든 걸 직접 확인할 수는 없어요. 그래도 보고서 하나에 직접 확인한 지점이 하나라도 있으면 읽는 사람의 신뢰가 확 달라져요. 남이 정리한 지식을 옮긴 보고서와, 작게라도 자기 손으로 확인한 보고서는 세특에 적히는 문장부터 다르거든요.

직접 확인하기 어렵다면 자료 두 개를 맞대 보는 것도 방법이에요. 같은 현상을 다룬 교과서 설명과 공공기관 자료를 나란히 놓고, 숫자나 설명이 서로 맞는지 보는 거죠. 서로 다르다면 왜 다른지, 기준 연도가 다른지 조사 방법이 다른지 따져 보는 것만으로도 훌륭한 검증이 돼요.

지금 쓰고 있는 보고서에 한 칸만 더하세요

이미 쓰고 있는 보고서가 있다면 처음부터 다시 쓸 필요는 없어요. 본문에 들어간 중요한 주장 세 개만 골라서, 각각 어디서 왔는지 옆에 적어 보세요. 그중 AI가 말해 준 걸 그대로 옮긴 게 있다면 그 근거를 한 번 찾아가 보고요.

그렇게 확인한 내용을 '검증 과정'이라는 짧은 단락으로 보고서 끝에 붙이는 것, 오늘 할 일은 그거 하나면 충분해요.