AI Content Detector は、サードパーティの調査によって最も正確であることが引き続き確認されています。 |
ケーススタディ
Copyleaks API
剽窃検出
精度、分析の深さ、ワークフローの効率
米国宇宙協会 (NSS) は、1994 年からジェラルド K. オニール宇宙居住コンテストを毎年開催しています。学生には、プロジェクトが自由に浮遊する恒久的な宇宙居住コンセプトに焦点を当てなければならないこと以外、いかなる要件も与えられていません。毎年、世界中から 12 年生までの何千人もの学生がコンテストに参加しますが、ほとんどの提出物はエッセイ形式であり、過去には 200 ページに及ぶものもありました。審査プロセスの一環として、各提出物に盗作がないか審査されます。このプロセスは手動で実行され、多くの場合、数週間から数か月かかります。
NSS は、特に盗作検出部分について、審査プロセスを迅速化し、効率を高めるためのソリューションを模索し始めました。ソリューションを見つけるために重要な考慮事項は、コンテストで使用される賞管理ソフトウェアである Award Force とシームレスに連携できる API 統合を備えたプラットフォームでした。もう 1 つの懸念は、効果的かつ徹底的なレポート、文書化、および大量のコンテンツとデータ処理を処理する機能でした。
2018 年、NSS は Copyleaks プラットフォームとの連携を開始し、API 統合を利用してコンテストの提出物内の潜在的な盗作を検出しました。 Awards Force によるスキャンごとに容疑者スコアが生成されるため、審査員は盗作の可能性について、より迅速かつより多くの情報に基づいた判断を下すことができます。その結果、処理時間が数週間から 1 か月から数日に短縮されました。
マシュー・J・レヴィン、NSS ジェラルド K. オニール宇宙居住コンテスト ディレクター
NSS は、容疑者スコアが 0% であれば、それは自動パスであるとみなし始めました。 5% 以上の場合、通常は自動的に失敗します。 0 ~ 5% の値については、スキャンごとに生成される Copyleaks 類似性レポートを使用した詳細な分析によるさらなる調査が必要でした。すべてのレポートには、スキャンされた文書内で見つかった類似テキストをより詳細に分析する類似性スコア (前述の疑わしいスコアとは異なる方法で計算されます) が含まれています。これらの報告書の内訳により、裁判官は文章を並べて比較し、内容が盗用されたかどうかを判断することができます。
NSS は Copyleaks リポジトリも利用しています。これにより、スキャンされたすべての提出物を安全なプライベート データベースに保存し、今後のスキャンで比較して、出場者が過去の受賞作品を盗用していないことを確認できます。
Copyleaks の導入以来、NSS はコンテストの提出物内の盗作をより迅速かつ正確に検出できるようになりました。たとえば、2023 年には、4,567 件の提出物のうち、1,894 件が盗用として失格となり、タスクが手動で実行されたときと比べて大幅に増加しました。
NSS はまた、ChatGPT などのチャットボットから AI で生成されたコンテンツが、ジェラルド K. オニール宇宙決済コンテストとその提出物にどのような影響を与えるかを検討しており、審査プロセスの新たに実装された部分として Copyleaks AI コンテンツ ディテクタの利用を検討しています。