Estudo de caso
API de vazamentos
Detecção de plágio
Precisão, profundidade de análise e eficiência do fluxo de trabalho
A Sociedade Espacial Nacional (NSS) sedia o Concurso Anual de Assentamento Espacial Gerard K. O'Neill desde 1994. Os alunos não recebem nenhum requisito além de que o projeto deve se concentrar em um conceito de assentamento espacial permanente e flutuante. Todos os anos, milhares de estudantes em todo o mundo, desde o 12º ano, participam no concurso, sendo a maioria das submissões em forma de ensaio, tendo alguns nos últimos anos atingido até 200 páginas. Como parte do processo de avaliação, cada submissão é analisada quanto a plágio, um processo que foi realizado manualmente, muitas vezes demorando semanas a meses.
A NSS começou a buscar uma solução para agilizar o processo de julgamento e aumentar a eficiência, principalmente na parte de detecção de plágio. Uma consideração importante para encontrar uma solução foi uma plataforma com integração de API que pudesse funcionar perfeitamente com o Award Force, o software de gerenciamento de prêmios usado no concurso. Outra preocupação era a elaboração de relatórios eficazes e completos, a documentação e a capacidade de lidar com grandes quantidades de conteúdo e processamento de dados.
Em 2018, a NSS começou a trabalhar com a plataforma Copyleaks, utilizando a integração da API para detectar possível plágio nas inscrições do concurso. Cada varredura no Awards Force gera uma pontuação de suspeito, permitindo que os jurados tomem decisões mais rápidas e informadas sobre possível plágio. Como resultado, o tempo de processamento foi reduzido de semanas ou um mês para questão de dias.
Mateus J. Levine, Diretor do Concurso de Assentamento Espacial NSS Gerard K. O'Neill
O NSS começou a considerar que se a pontuação do suspeito fosse 0%, era uma aprovação automática; se fosse 5% ou superior, normalmente era uma falha automática. Qualquer coisa entre 0-5% exigiu uma investigação mais aprofundada por meio de uma análise mais profunda usando o Relatório de Similaridade Copyleaks, gerado a cada varredura. Dentro de cada relatório há uma Pontuação de Similaridade (calculada de forma diferente da Pontuação de Suspeito mencionada anteriormente) que analisa mais profundamente o texto semelhante encontrado em um documento digitalizado. Esses detalhamentos do relatório permitem que os juízes comparem o texto lado a lado e determinem se o conteúdo foi plagiado.
O NSS também utiliza o Repositório Copyleaks, que permite armazenar todos os envios digitalizados em um banco de dados privado e seguro que pode ser usado em verificações futuras para comparação, para garantir que nenhum concorrente tenha plagiado envios vencedores anteriores.
Desde o início do Copyleaks, o NSS tem sido capaz de detectar plágio com muito mais rapidez e precisão nos envios de concursos. Por exemplo, em 2023, de 4.567 envios, 1.894 foram desqualificados por plágio, um aumento significativo desde quando a tarefa era realizada manualmente.
A NSS também está considerando como o conteúdo gerado por IA de chatbots como o ChatGPT afetará o Concurso de Liquidação Espacial Gerard K. O'Neill e suas inscrições e está explorando a utilização do Copyleaks AI Content Detector como uma parte recém-implementada do processo de julgamento.