ChatGPT 봇, 미국 로스쿨 시험 통과

인터넷의 방대한 데이터로 구동되는 인공 지능(AI) 챗봇이 생성한 헌법에서 과세 및 불법 행위 등 다양한 주제에 대한 에세이가 로스쿨 시험에 합격했다.

미국 오픈AI(OpenAI)의 ChatGPT는 인공 지능(AI)을 사용하여 간단한 프롬프트에서 텍스트 스트림을 생성한다.

미국 미네소타 대학교 로스쿨의 조나단 최 교수는 95개의 객관식 문제와 12개의 서술형 문제로 구성된 학생들이 직면한 것과 동일한 테스트를 ChatGPT에 제공했다.

이번 주 초에 발표된 “ChatGPT는 로스쿨에 간다”라는 제목의 백서에서 그와 그의 공동 저자는 봇이 전반적으로 C+ 점수를 받았다고 보고했다.

이것은 통과하기에 충분했지만 봇은 대부분의 과목에서 최하위권에 가까웠다. 수학과 관련된 객관식 질문에서 “폭격”했다.

저자는 “에세이 작성에서 ChatGPT는 기본적인 법적 규칙에 대한 강력한 이해를 보여주었고 일관되게 견고한 구성과 구성을 가지고 있었다. 그러나 로스쿨 시험의 핵심 기술인 개방형 프롬프트가 주어졌을 때 종종 문제를 파악하는 데 어려움을 겪었다” 고 밝혔다.

ChatGPT 결과가 좋아서 교육자들은 이것이 광범위한 부정 행위로 이어질 수 있고 심지어 전통적인 교실 교육 방법의 종말을 알릴 수 있다고 경고했다. 뉴욕 등 교육 당국 관계자들은 학교에서 ChatGPT 사용을 금지했다. 반면 Choi는 이것이 귀중한 교육 보조 도구가 될 수 있다고 제안했다.

그는 “전반적으로 ChatGPT는 혼자 행동하는 훌륭한 법대생이 아니었다”며 “그러나 우리는 ChatGPT와 같은 인간과의 협력, 언어 모델이 시험을 치르는 법대생과 실무 변호사에게 매우 유용할 것으로 기대한다”고 트위터에 게시했다.

그리고 부정 행위의 가능성을 무시하면서 그는 다른 트위터 사용자 3명 중 2명이 봇이 쓴 것을 구분했다고 답했다.