Did the Pope use AI to write about the dangers of AI?

개요

교황 레오 14세의 최신 회칙 'Magnifica Humanitas'의 일부가 인공지능(AI)에 의해 작성되었을 가능성이 제기되었습니다.

주요 내용

* Linch Zhang의 분석과 AI 탐지기 Pangram에 따르면, 'Magnifica Humanitas'의 특정 문단은 40%에서 100%까지 AI가 작성한 것으로 나타났습니다.
* AI 생성 글쓰기에서 자주 나타나는 특징, 예를 들어 이전 교황 회칙보다 "genuinely"라는 단어를 더 많이 사용하는 경향이 관찰되었습니다. Anthropic의 Claude 모델이 생성한 글에서 이런 경향이 나타납니다.
* Pangram을 통해 문서의 첫 번째 장의 62%가 AI 생성으로 플래그 지정되었으며, The Verge가 약 2,000단어를 분석한 결과 46%가 AI 작성으로 추정되었습니다.
* 반면, 일부 문단은 Pangram에서 "본질적으로 0% AI"로 표시되었고, 이전 4번의 교황 회칙 첫 20개 문단과 교황 레오의 연설 전사본은 100% 인간 작성으로 평가되었습니다.
* AI 탐지는 완벽하지 않으며, 다른 AI 탐지기는 다른 결과를 보일 수 있고, 일치하는 결과라도 정확성을 보장하지는 않습니다. 그러나 Pangram은 AI 연구자들 사이에서 일반적으로 존중받고 있으며, 2025년 3월 기준 인간 작성물을 AI 생성으로 보고하는 오탐율이 약 10,000분의 1로 추정되었습니다.
* 교황 회칙은 교황이 발표하는 긴 서한으로, 당대의 중요한 도덕적, 사회적 도전을 다루는 가르침을 전달하기 위한 것입니다. 이번 회칙은 교황 레오의 첫 회칙이며, AI에 초점을 맞춘 첫 번째 회칙으로 Christopher Olah와 함께 발표되었습니다.

시사점

AI 탐지 도구의 한계에도 불구하고, 'Magnifica Humanitas'의 일부 내용이 AI에 의해 작성되었을 가능성은 AI가 공식 문서 작성에 미치는 영향과 윤리적 고려 사항에 대한 중요한 질문을 던집니다.