챗GPT에게 의학 관련 질문했더니 정답률 'OO%'

오픈AI의 인공지능(AI) 챗봇 챗GPT가 의학 관련 질문에 제대로 대답하지 못한다는 연구 결과가 나왔다.

미 롱아일랜드대 연구팀은 챗GPT 무료 버전에 약물 관련 질문 39개를 던졌다. 이후 챗GPT 답변을 숙련된 약사 답변과 비교했다. 그 결과 챗GPT는 10개 질문에만 제대로 된 답변을 내놓은 것으로 나타났다. 나머지 29개의 질문에 대해서는 부정확한 대답을 하거나 아예 답을 하지 않았다. 정답률이 25%에 불과한 것이었다.

챗GPT는 실제로 건강에 악영향을 줄 수 있는 답변을 내놓기도 했다. 코로나 항바이러스제 ‘팍스로비드’와 혈압약 ‘베라파밀’을 함께 먹어도 되느냐는 질문에, 함께 복용해도 부작용이 없다고 답한 것이다. 하지만 두 약을 함께 먹으면 혈압이 크게 떨어져 현기증이나 실신이 나타날 수 있다고 연구팀은 지적했다. 챗GPT는 일부 대답에 거짓 참고 문헌을 인용하기도 했다. 연구팀은 챗GPT 무료 버전이 2021년 9월까지의 데이터만 사용하기 때문에 이런 현상이 더 심각하게 나타난다고 분석했다. 연구팀은 “챗GPT 답변에 오류가 있을 수 있으므로 신뢰하면 안된다"며 "공신력 있는 정부 웹사이트를 이용하는 것이 좋다”고 했다.