Assista tambem nas redes
Assistir no YouTubeAssistir no TikTokAssistir no TIKTOKAssistir no Instagram StoriesO professor Dr. Jason Gibson, da Alcorn State University, no Mississippi, ganhou destaque nas redes sociais após reprová-los em uma avaliação devido ao uso de inteligência artificial (IA). Em uma série de vídeos no TikTok, ele compartilhou como elaborou uma estratégia para identificar os alunos que recorreram a ferramentas de IA.
Os estudantes foram encarregados de escrever uma redação sobre a Revolução Industrial. No enunciado, Gibson incluiu uma frase oculta, escrita em letras brancas sobre um fundo branco, que instruía os alunos a mencionar a palavra “Madagascar” em um contexto sem sentido. Aqueles que apenas leram o comando na tela não conseguiram visualizar a frase, enquanto os que copiaram o texto para colá-lo em plataformas como o ChatGPT acabaram incluindo a instrução oculta.
Como resultado, as redações apresentaram frases absurdas como: "Madagascar flutua de lado durante a tarde" e "A bicicleta roxa de Madagascar sussurra para o teto". Gibson comentou que ficou evidente que os alunos não revisaram suas respostas.
A técnica utilizada por Gibson reflete o conceito de prompt injection, em que informações enganosas são empregadas para manipular assistentes de IA. Essa abordagem pode forçar esses sistemas a realizar ações impróprias ou ignorar medidas de segurança. Em 2022, pesquisadores descobriram vulnerabilidades em grandes modelos de linguagem e alertaram o setor sobre os perigos da injeção de comandos, o que fez com que a técnica se tornasse uma preocupação crescente na cibersegurança.
Deixe seu e-mail abaixo para garantir acesso a tutoriais exclusivos, novos conteúdos do projeto e nossos lançamentos em primeira mão.