Turnitin의 AI 탐지기: 더 높음

기사가 5개 남았습니다.무료 계정에 가입하거나 로그인하세요.

회사의 최고 제품 책임자인 Annie Chechitelli에 따르면 Turnitin의 AI 쓰기 감지 도구는 회사가 원래 주장한 것보다 오탐률이 더 높습니다. Turnitin은 이 제품이 4월에 출시되었을 때 오탐률이 1% 미만이라고 홍보했습니다. 이제 회사는 새로운 문서 수준의 오탐률을 공개하지 않았습니다.

Chechitelli는 "우리는 우리의 연구 결과와 진행 상황을 교육계에 투명하게 공개하려는 전략을 확고히 유지하고 있습니다"라고 썼습니다. Turnitin은 회사가 실험실에서 수행한 테스트와 사용자가 실제 세계에서 경험한 경험 사이의 차이 때문에 불일치가 발생한다고 생각합니다.

성명서에 따르면 Turnitin의 AI 탐지 도구는 글이 기계에 의해 작성되었을 확률이 20% 미만이라고 보고할 때 오탐 발생률이 더 높다고 밝혔습니다. 이제 회사는 그러한 결과에 대해 의문을 제기하는 메시지와 함께 별표를 추가할 것입니다.

Turnitin의 AI 탐지 도구는 문서 수준과 문장 수준에서 각각 하나씩 두 가지 통계를 생성합니다. Chechitelli에 따르면 문장 수준의 위양성 비율은 약 4%입니다.

그러나 이 도구는 AI가 생성한 산문과 인간이 작성한 산문을 혼합하는 텍스트에 특히 문제가 있는 것으로 보입니다. 예를 들어, 성명서에 따르면 거짓양성(사람이 작성한) 문장의 절반 이상(54%)이 AI가 작성한 문장 바로 옆에 위치한다고 합니다. 거짓 긍정 문장의 1/4 이상(26%)은 AI가 작성한 문장에서 두 문장 떨어진 곳에 위치합니다.

회사는 앞으로 몇 달 안에 더 많은 실험과 테스트를 진행할 계획입니다.

Chechitelli는 "[대규모 언어 모델]과 AI 글쓰기가 계속 발전함에 따라 지속적인 개선의 일환으로 측정 기준이 변경될 수 있습니다."라고 썼습니다. "우리는 교육 커뮤니티로서 우리가 미지의 영역에 있다는 것을 알고 있습니다."

교육기관에서 학생들이 가능한 최고의 졸업 후 결과를 얻을 수 있도록 지도하는 데 더 중점을 두면서 진로 서비스

Kartik Chandra는 2023년 졸업생들에게 메시지를 전합니다. 이제 그 어느 때보다 여러분의 말이 중요합니다.

이 기술은 성공에 필요한 기술을 개발하는 데 있어 불리한 상황에 있는 학생들을 도울 것을 약속합니다.

AI 정보와 핫 테이크의 홍수로부터 벗어나고자 하는 학자들이 여름 워크숍을 시작합니다.