Pesquisador cria detector de textos de IA que promete 98% de acerto
Ele também define a "forma do slop", série de critérios que permitem identificar a autoria por IA
O pesquisador Jochen Madler criou o "SlopShape", um detector de inteligência artificial com 98% de precisão que identifica tanto produções automatizadas quanto paráfrases humanas de conteúdos gerados por máquinas. Para superar as falhas das ferramentas atuais, o sistema analisa a estrutura textual e a organização das ideias por meio de um questionário com mais de 200 perguntas, avaliando pontos como a ordem dos argumentos e a apresentação de teses e fontes para emitir um veredito confiável.
O fato de estarmos cercados por textos escritos por uma IA já não surpreende ninguém. Nós, que queremos ler textos escritos por pessoas, passamos o dia inteiro com o radar ligado, procurando indícios para verificar se estamos lendo algo escrito por um humano ou por um robô. Mas, para além da questão da preferência, há áreas como a educação em que são necessárias boas ferramentas para detectar textos escritos por IA.
Só que muitas das ferramentas disponíveis ainda são bastante falhas, classificando textos humanos como "feitos por IA" e vice-versa. Um pesquisador chamado Jochen Madler se cansou disso e idealizou um sistema que não apenas diz se um texto foi escrito por IA ou não, mas também se foi escrito por um humano que simplesmente se dedicou a parafrasear o resultado fornecido pela IA. Segundo ele, a taxa de acertos fica próxima de 98%.
O estudo se intitula "SlopShape" e, nele, Madler explica que o sistema analisou uma série de textos que o modelo nunca havia visto e alcançou os já mencionados 98% de sucesso ao classificar se haviam sido escritos por uma IA ou por um humano do início ao fim.
Segundo o pesquisador, o sistema não lê o texto e emite um veredito. Em vez disso, um modelo de linguagem responde a um questionário com mais de 200 perguntas sobre a estrutura de cada publicação. Especificamente, analisa a ordem em que as ideias são apresentadas, se o artigo antecipa sua estrutura, observa onde a tese aparece, como as fontes são apresentadas, a orientação prática do ...
Matérias relacionadas
Galaxy Tab S12 chega ao Brasil por R$ 10.499; Ultra custa R$ 11.999
OpenVPN: o que é e como configurá-lo para usar com seu serviço VPN
Comentários
Os comentários são de responsabilidade exclusiva de seus autores e não representam a opinião deste site. Se achar algo que viole os termos de uso, denuncie.