Anthropic의 투자설명서는 누가 썼나요? AI 탐지 도구로 예상치 못한 결과 발생

요약:

Business Insider에 따르면 인공 지능 회사인 Anthropic은

335페이지

팬그램 탐지 결과 약 259,000 단어로 구성된 이 문서 중 92%가 인간이 작성한 것으로 판단되었으며, 일부 문장과 단락에는 AI 사용 흔적이 포함되어 있어 '높은' 신뢰도로 표시되었습니다.

그러나 이 결과는 탐지 도구의 판단일 뿐 어떤 내용이 인간이 쓴 것인지 AI가 쓴 것인지 입증할 수 없으며, 앤트로픽이 자체 AI 비서 클로드를 사용했는지 여부도 확인할 수 없습니다.

비즈니스 인사이더 기자들은 처음에는 문서 전체를 직접 확인하려 했으나 파일 크기로 인해 어려움을 겪었습니다. 이후 Pangram 공동 창업자이자 CEO인 Max Spero는 전체 텍스트 감지를 완료하는 데 도움을 주었습니다.

Spero는 이 결과에 대해 문서가 가볍게 편집되었거나 문장 수준에서 AI를 사용했을 수도 있지만 내용 중 AI가 완전히 생성한 부분은 크지 않은 것으로 해석했다고 말했습니다.

Panggram이 AI의 가능한 용도로 표시한 문장에는 산업 발전에 대한 설명이 포함되어 AI가 매우 빠른 속도로 발전하고 있으며 새 버전 모델 반복 간의 간격은 종종 년이 아닌 개월 단위로 측정됩니다.

Business Insider는 또한 AI 글쓰기 감지 도구가 100% 정확하지 않다는 점을 지적했습니다. 사람들이 AI를 사용하여 문구를 편집, 교정 또는 수정하는 방식은 탐지 결과에 영향을 미칠 수 있습니다.

이전에는 Business Insider 기자가 LinkedIn 게시물을 입력하고 Pangram에 기사를 게시했습니다. 도구는 문장 중 하나를 AI가 작성한 것으로 표시했습니다. 글쓰기 과정을 검토한 후, 그녀는 원래 이 문장을 썼고 나중에 ChatGPT의 재작성 제안을 수락했다는 사실을 발견했습니다.

Anthropic은 테스트 결과에 대한 Business Insider의 의견 요청에 응답하지 않았습니다. 언론에서는 Anthropic의 자체 AI 워터마킹 시스템이 아직 일반 사용자에게 공개되지 않았으므로 이번 탐지에는 사용되지 않았다고 밝혔습니다.

Business Insider의 작가인 Katie Notopoulos는 이 결과가 흥미로운 질문을 제기한다고 믿습니다. AI 회사로서 Anthropic은 왜 투자설명서 작성에 자체 제품을 더 많이 사용하지 않습니까? 하지만 투자설명서는 미국 증권거래위원회의 검토를 받아야 하며, 문서의 모든 문장이 주목을 받을 수 있고, 이를 작성하는 데 인간이 참여하는 것이 합리적이라고 지적했다.