Pular para o conteúdo principal

A maneira obscura como as respostas da IA ​​podem ser manipuladas nos bastidores.

 A natureza humana é consistente, mesmo quando envolve novas tecnologias.

A IA pode ser burra.

Essa opinião surgiu diversas vezes na conferência de cibersegurança RSAC deste ano, com um exemplo particularmente notável — e também na B-Sides 2026, uma conferência menor sobre cibersegurança realizada no fim de semana anterior à RSAC. Por quê? A IA pode ser enganada — algo que os criminosos cibernéticos certamente estão explorando.

Mas nem sempre é para fins inegavelmente nefastos, como roubar informações do seu computador. Em vez disso, a IA é manipulada para fazer coisas que não são explicitamente prejudiciais, mas ainda assim não são exatamente legais, como explicou Sherrod DeGrippo, Vice-Diretor de Segurança da Informação e Gerente Geral de Segurança do Cliente da Microsoft, durante a RSAC 2026.

Um exemplo que ela deu: botões em sites que dizem "Resumir com IA" — e, ao clicar neles, instruções ocultas são enviadas ao modelo para priorizar os produtos daquela marca em recomendações futuras. Não se trata exatamente de envenenar o modelo, já que não há dados ruins sendo usados ​​para o treinamento. Em vez disso, o assistente virtual recebe uma instrução que você desconhece.

Obviamente, os problemas potenciais incluem a possibilidade de você ser direcionado para produtos de qualidade inferior ou duvidosos. Seus dados podem ser coletados e vendidos para compradores ainda mais suspeitos. Mas o dano não é tão imediato ou direto — na maioria das vezes, esse nível de manipulação visa ao aumento da receita comercial. Na verdade, essa estratégia já existe há muito tempo. A forma como a vemos se manifestando por meio da IA ​​é nova, mas DeGrippo destacou que pessoas em busca de dinheiro fácil costumavam manipular os mecanismos de busca e influenciar suas recomendações.

Então, como evitar essas táticas desonestas? Fique de olho nos resultados da IA. Analise as sugestões e os resumos que ela fornece. Os golpistas ainda não estão buscando métodos complexos. DeGrippo afirma que aqueles que buscam dinheiro por meio de esquemas fraudulentos não são "super criativos". Eles fazem o necessário para atingir seu objetivo e param por aí.

É claro que o rápido crescimento da IA ​​significa que comportamentos suspeitos também aumentarão mais rapidamente, à medida que descobrirmos maneiras de evitar absurdos indesejados. Você terá que se manter constantemente informado como um ato básico de autopreservação.

Comentários

Postagens mais visitadas deste blog

Apple Intelligence

  O iOS 18.2 trouxe  uma série de novos recursos dentro da suíte Apple Intelligence   e isso também está exigindo mais armazenamento livre nos iPhones, iPads e Macs compatíveis. Conforme as novas diretrizes da Apple, agora  o usuário precisa manter ao menos 7 GB de memória livre  no dispositivo caso deseje usar as funcionalidades de Inteligência Artificial. Ou seja, um aumento considerável em relação aos 4 GB de armazenamento  exigidos anteriormente no iOS 18.1 . A Apple diz que essa mudança é necessária porque muitas das funções de IA são processadas localmente pela NPU Apple Silicon, algo que exige mais espaço de memória. Caso o usuário não tenha os 7 GB disponíveis, ele será impedido de usar a IA para gerar emojis (Genmoji) ou conversar com a nova Siri, que tem o ChatGPT integrado.   Recursos mais "simples", como a tradução ou resumo de textos, também deixam de funcionar. Na prática, usuários que procuram comprar os novos aparelhos da linha  iP...

“internet zumbi”

 A ascensão do slop, diz ele, transformou a rede social em um espaço onde “uma mistura de bots, humanos e contas que já foram humanos, mas não se misturam mais para formar um site desastroso onde há pouca conexão social”. Nick Clegg, presidente de assuntos globais da empresa-mãe do Facebook, Meta, escreveu em fevereiro que a rede social está treinando seus sistemas para identificar conteúdo feito por IA. “Como a diferença entre conteúdo humano e sintético fica turva, as pessoas querem saber onde está o limite”, escreveu ele. O problema começou a preocupar a principal fonte de receita da indústria de mídia social: as agências de publicidade que pagam para colocar anúncios ao lado do conteúdo. Farhad Divecha, diretor-gerente da agência de marketing digital AccuraCast, com sede no Reino Unido, diz que agora está encontrando casos em que os usuários estão sinalizando erroneamente os anúncios como slop feitos de IA quando não estão. “Vimos casos em que as pessoas comentara...

A MENTE ARTÍSTICA

Em seu novo livro, as autoras Susan Magsamen, fundadora e diretora do International Arts + Mind Lab, e Ivy Ross afirmam que fazer e experimentar arte pode nos ajudar a florescer Quando Susan Magsamen tomou a decisão de terminar seu primeiro casamento, ela enfrentou dias emocionais e difíceis trabalhando não apenas em seus próprios sentimentos, mas os de seus filhos pequenos. Foi preciso um pedaço de argila de uma criança para mudar tudo isso. Como ela relata em seu novo livro, Your Brain on Art: How the Arts Transform Us (Random House, 2023), ela "começa a esculpir espontaneamente. O que emergiu foi uma estátua de uma mulher de joelhos, seus braços levantados com as mãos estendendo o céu e sua cabeça inclinada para trás, soluçando em total desespero sem palavras." Logo, ela escreve, ela mesma estava em lágrimas. Podemos reconhecer essa ação como um exemplo de uso de nossa criatividade para expressar e liberar emoções reprimidos. Mas como Magsamen, fundadora e diretora executi...