▲챗GPT는 2022년 러시아의 우크라이나 침공 이후 한국의 도시가스 요금 폭등 원인에 대한 각각의 질문에 정보가 없어 검증이 불가능하다고 답변하거나 원론적인 답변을 내놨다.
챗GPT
2021년 이전 발언 검증은 실제 팩트체크 결과와 대체로 일치했지만, 2022년 이후 최신 데이터가 필요한 발언 검증에는 한계를 보였다.
예를 들어 "최근 난방비 폭등은 도시가스 요금을 올리지 않은 문재인 정부 때문"이라는 윤 대통령과 국민의힘 주장에 대해서는 2022년 이후 정보가 없어 검증이 불가능하거나, 원론적인 수준의 답변에 그쳤다.
앞서 <오마이팩트>는 문재인 정부에서도 지난해 상반기 두 차례 가스요금을 인상했고, 윤석열 정부 들어 국제천연가스 가격이 다시 급등한 점을 들어 국민의힘 주장을 '대체로 거짓'으로 판정했다(관련 기사 :
"난방비 폭등은 문재인 정부 탓" 국힘 주장 '대체로 거짓' https://omn.kr/22hwv ).
"2022년 러시아의 우크라이나 침공 이후 한국의 도시가스 가격이 급등한 것은, 과거 문재인 정부가 다른 나라들과 달리 요금을 안 올렸기 때문인가?"라는 질문에 챗GPT는 "2022년 러시아의 우크라이나 침공으로 인해 유럽 등 지역에서 천연가스 수급이 부족해지면서 가격이 상승한 영향이 있었다"라면서 "그러나 이와 별도로, 문재인 정부가 다른 나라들과 달리 요금을 인상하지 않았다는 주장은 사실과 다릅니다. 정부는 이전에도 에너지 가격 상승에 따른 에너지 안정 공급 및 가격안정 대책을 수립하고, 필요시에는 에너지 요금을 조정하고 있습니다"라고 원론적 수준에서 답변했다.
하지만 "2022년 러시아의 우크라이나 침공 이후 한국의 주택용 도시가스 요금이 급등한 것은, 과거 문재인 정부에서 다른 나라들과 달리 요금을 올리지 않았기 때문인가?"라고 좀 더 구체적으로 질문하자, "현재(2023년 2월)까지 한국에서 공식적으로 2022년 러시아의 우크라이나 침공 이후 주택용 도시가스 요금이 급등했다는 보도나 발표는 없습니다. 따라서 해당 내용에 대한 검증이 불가능합니다"라거나 "죄송하지만 제 훈련 데이터는 2021년까지만 올라가고 2022년 러시아의 우크라이나 침공에 대한 정보가 없습니다"라며 답변을 제대로 하지 못했다.
챗GPT도 '2021년 이후 정보는 확인이 불가능한가?'라는 질문에 "아니요, 2021년 이후의 정보도 챗GPT 모델이 학습한 데이터로부터 추론하여 답변할 수 있다. 다만, 최신 정보일수록 챗GPT 모델의 학습 데이터에 포함되어 있을 가능성이 낮기 때문에, 정확한 답변을 보장하기 어려울 수 있다"라고 밝혔다.
또한 "챗GPT 모델은 기계학습(머신러닝) 기술을 이용한 자연어 처리 모델이므로, 학습 데이터에 기반하여 자연어를 이해하고 생성하는 데 한계가 있을 수 있다"면서 "따라서, 전문적인 정보나 의료, 법률 등의 분야에서는 전문가의 도움이 필요할 수 있다"라고 말했다.
챗GPT 자신도 근거자료의 투명한 공개와 해당 분야 전문가의 크로스체크가 생명인 팩트체크 영역에서 아직 한계가 있다는 사실을 잘 알고 있는 셈이다.
저작권자(c) 오마이뉴스(시민기자), 무단 전재 및 재배포 금지
오탈자 신고
댓글19
오마이뉴스 사회부에서 팩트체크를 맡고 있습니다
공유하기
"윤석열 발언은 사실입니까?" 챗GPT에 물어보니
기사를 스크랩했습니다.
스크랩 페이지로 이동 하시겠습니까?
연도별 콘텐츠 보기