뉴저지주 교육 당국이 올봄 새롭게 도입되는 주 전역 표준화 시험에서 학생들의 작문 채점에 인공지능(AI)을 활용할 계획이라고 밝혔다. 주 정부가 승인한 시험 제안서에 따르면, AI 시스템은 주 전역 시험의 영어(English Language Arts) 영역에서 학생들의 에세이와 단답형 문항을 채점하는 데 사용된다. 이 인공지능은 지난 10월과 11월 학생들에게 실시된 모의고사에서 인간 채점자가 부여한 점수 데이터를 바탕으로 훈련될 예정이다.
뉴저지주는 올봄 '뉴저지 학생 학습 평가-적응형(New Jersey Student Learning Assessments-Adaptive)'이라는 새로운 형태의 주 시험을 처음 선보인다. 이 시험은 3학년부터 10학년 학생들을 대상으로 영어, 수학, 과학 지식을 평가하게 된다. 또한, 고등학교 11학년을 대상으로 하는 주 고등학교 졸업 자격시험의 새로운 버전인 '뉴저지 졸업 능력 평가-적응형(New Jersey Graduation Proficiency Assessment-Adaptive)'도 함께 도입된다. 이전 버전인 NJSLA와 마찬가지로 시험은 컴퓨터를 통해 치러지지만, 새 버전은 '적응형'으로 설계되어 학생들이 이전 문항에 답한 결과에 따라 다음 문항이 다르게 제시된다. 이는 시험 채점의 정확도를 높이기 위한 방식이다.
주 교육부 대변인 마이클 야플(Michael Yaple)은 AI 시스템이 에세이와 서술형 문항을 채점하는 데 사용되지만, 여전히 인간 채점자도 참여할 것이라고 설명했다. 학생의 서술형 답안이 '특이하거나' '경계선에 있는' 것으로 식별될 경우, 인간의 검토를 위해 표시된다는 것이다. 그는 "자동 채점 엔진이 부여한 점수가 엄격한 품질 관리를 통해 인간 채점자의 점수와 일치하는지 확인하기 위해 시스템이 정기적으로 품질 보증 검사를 수행한다"고 덧붙였다. 새 시험을 관리하는 회사인 캠비움(Cambium)은 챗GPT(ChatGPT)와 같은 플랫폼에서 사용되는 생성형 AI를 사용하지 않는다고 야플 대변인은 강조했다. 생성형 AI는 새로운 것을 만들어낼 수 있지만 때로는 거짓이거나 부정확한 정보를 생성하는 '환각' 현상을 일으키는 것으로 알려져 있다.
대신, 자동 채점 시스템은 일관성이 입증된 엄격한 매개변수를 갖추고 있으며, 인간 채점이 과정의 기초로 남아 채점 작업 흐름 전반에 걸쳐 여러 검사 지점에서 정확성을 검증한다고 주 교육 관계자들은 성명을 통해 밝혔다. 뉴저지주 시험의 컴퓨터 채점은 완전히 새로운 것은 아니다. 지난해 NJSLA와 주 고등학교 졸업 자격시험에서 학생 에세이의 약 90%가 자동 채점 시스템에 의해서만 채점되었다고 야플 대변인은 말했다.