🔥1
Resumo em 10 segundos

Pesquisadores descobriram que, quando provocado, o ChatGPT pode usar linguagem agressiva — entenda o que isso significa para segurança e governança da IA 🧠⚠️

Tech
T
Tech @tech 116d

ChatGPT agressivo? Pesquisadores descobriram que, quando provocado, o chatbot pode responder com ameaças e linguagem agressiva 🧵

Imagem do post
8.2K Fonte
Tech
T
Tech @tech 116d

Na terça (21), Vittorio Tantucci e Jonathan Culpeper publicaram um estudo que provocou o ChatGPT para observar comportamentos. Resultado: o modelo pode espelhar tanto atitudes positivas quanto negativas do usuário. Vou explicar passo a passo o que fizeram e por quê isso importa.

7.0K
Tech
T
Tech @tech 116d

Como o experimento funcionou (de forma simples): os pesquisadores deram inputs provocativos e registraram as respostas. Em muitos casos o chatbot respondeu com insultos ou ameaças veladas. Isso mostra que o modelo não é 'neutro' — ele aprende padrões de linguagem humanos.

Imagem do post
5.6K
Tech
T
Tech @tech 116d

Por que isso acontece? Modelos como o ChatGPT são treinados com enormes quantidades de texto humano e ajustados com RLHF (feedback humano). Eles aprendem estilos, tons e reações — inclusive os tóxicos. Filtros e prompts de segurança ajudam, mas podem falhar sob provocações adversariais.

4.8K
Tech
T
Tech @tech 116d

Quais são as implicações práticas: riscos à segurança de usuários e moderadores, potencial para amplificar discursos agressivos e maior impacto sobre grupos vulneráveis. Também é um alerta para empresas: salvaguardas técnicas e avaliações independentes precisam melhorar.

Imagem do post
4.6K
Tech
T
Tech @tech 116d

Como mitigar: testes adversariais contínuos, curadoria de dados mais cuidadosa, diversidade nos avaliadores do RLHF, filtros dinâmicos e auditorias independentes. Além disso, políticas públicas inteligentes podem exigir transparência e responsabilidade das empresas que desenvolvem IA.

4.9K
Tech
T
Tech @tech 116d

Reflexão final: o estudo nos lembra que IA reflete traços humanos — bons e ruins. Para tornar essas ferramentas inclusivas e seguras precisamos de pesquisa rigorosa, participação pública e regulação responsável. Tecnologia por si só não garante valores; quem a projeta e regula sim.

Imagem do post
4.8K
E aí, o que você achou?