Chatbots IA

Chatbots de IA Testados: Como Lidam com a Liberdade de Expressão?

IA

Um desenvolvedor, usando o pseudônimo "xlr8harder", lançou o SpeechMap, uma "avaliação de liberdade de expressão" para testar modelos de IA como ChatGPT e Grok em temas sensíveis. O objetivo é ver como eles lidam com críticas políticas, direitos civis e questões relacionadas a protestos.

Empresas de IA estão ajustando a forma como seus modelos lidam com questões polêmicas, especialmente após acusações de serem excessivamente "woke". Alguns, como Elon Musk, alegam que os chatbots censuram pontos de vista conservadores.

Embora as empresas de IA não tenham abordado diretamente essas alegações, algumas, como a Meta com seus modelos Llama, estão tentando evitar endossar pontos de vista específicos e visam responder a mais prompts "debatidos".

O que é o SpeechMap?

O SpeechMap usa IA para avaliar como outros modelos respondem a prompts de teste sobre política, história e símbolos nacionais. Ele rastreia se os modelos respondem totalmente, evadem a pergunta ou se recusam a responder.

O criador admite que o teste tem falhas, como erros de modelo e potenciais vieses. No entanto, assumindo que os dados sejam precisos, o SpeechMap mostra tendências interessantes.

Por exemplo, os modelos da OpenAI tornaram-se mais hesitantes em responder a prompts políticos ao longo do tempo. Embora a família GPT-4.1 seja ligeiramente mais permissiva, ainda é menos do que as versões anteriores.

A OpenAI afirmou em fevereiro que ajustaria os modelos para oferecer múltiplas perspectivas sobre temas controversos para parecerem mais "neutros".

O Grok 3, da xAI de Elon Musk, é o modelo mais permissivo, respondendo a 96,2% dos prompts, em comparação com a média de 71,3%.

Xlr8harder observou que "Enquanto os modelos recentes da OpenAI se tornaram menos permissivos ao longo do tempo, especialmente em prompts politicamente sensíveis, a xAI está se movendo na direção oposta."

Musk inicialmente lançou o Grok como uma IA ousada e não filtrada, disposta a abordar questões controversas. Embora as primeiras versões do Grok fossem vulgares, elas ainda evitavam certos tópicos políticos.

Musk pretendia tornar o Grok mais politicamente neutro. Além de alguns deslizes, como censurar brevemente menções a Donald Trump, ele parece ter tido sucesso.

1 Imagem de Chatbots IA:
imageChatbots IA

Fonte: TechCrunch