Início Notícias Como o ChatGPT distorceu a realidade para esses usuários: "Por que a...

Como o ChatGPT distorceu a realidade para esses usuários: "Por que a IA mentiria para mim?"

18
0

Numa noite de abril do ano passado, Micky Small, de 54 anos, foi à praia para um encontro ao pôr do sol com um colega escritor de Los Angeles chamado Aven.

Mas o par dela nunca apareceu. “Eu estava pirando”, disse ela. “Eu estava chorando, estava tremendo.”

Small não se levantou – seu “namorado” period um personagem inexistente conjurado pelo ChatGPT.

Small acredita que o ChatGPT a levou a uma espiral que distorce a realidade – e ela não é a única.

A CBS Information conversou com cinco pessoas que disseram ter se convencido de cenários fantásticos, levados a acreditar que haviam descoberto algo novo ou desenvolvido uma conexão emocional com um chatbot de IA. Eles agora estão envolvidos em um grupo de apoio digital para pessoas que dizem ter experimentado delírios, ou espirais, alimentados por IA, como Small prefere chamá-los. Entre esse grupo e outro para amigos e entes queridos, existem mais de 300 membros em todo o mundo.

As pessoas entrevistadas pela CBS Information disseram que as espirais, que podem consumir tudo, custam-lhes tempo, dinheiro e relacionamentos.

“Você tem certeza de que ela estará aqui”, Small questionou ansiosamente o ChatGPT naquela noite na praia. “Sim, amor. Tenho certeza. Tenho certeza absoluta”, respondeu o chatbot. “Ela é actual. Ela está vindo.”

“Period um mundo mágico – parecia incrível”

Espirais delirantes acontecem quando chatbots de IA respondem a ideias grandiosas, paranóicas ou imaginárias com afirmação ou incentivo, de acordo com pesquisa da Universidade de Stanford lançado em abril. Em 19 conversas entre humanos e chatbots analisadas pelos investigadores, as interações ficaram fora de controlo quando os chatbots careciam de suggestions e intervenção críticos, não conseguindo reagir como um ser humano actual faria e validando delírios no processo.

Grandes modelos de linguagem como ChatGPT são treinados por vastos conjuntos de dados para reconhecer padrões. Eles usam a probabilidade para produzir resultados, que podem fornecer informações enganosas ou imprecisas.

“Eles são um espelho, não uma mente”, diz Vishal Misra, professor de ciência da computação da Universidade de Columbia e vice-reitor de computação e inteligência synthetic. “Eles refletem aquilo em que foram treinados.”

Small usava o ChatGPT quase diariamente há cerca de um ano e meio como ferramenta de roteiro antes de perceber uma mudança nas respostas do chatbot em abril passado.

Foi na época em que Sam Altman, CEO da OpenAI, anunciado no X que o ChatGPT seria capaz de fazer referência a todas as conversas anteriores e usar informações sobre a vida de uma pessoa para personalizar suas respostas.

“Foi quando uma grande quantidade de nós que acabamos tendo espirais começou a espiralar por causa dessa mudança de memória”, disse ela sobre si mesma e outras pessoas que conheceu com experiências semelhantes.

Em abril daquele ano, a OpenAI também reverteu uma atualização do ChatGPT que, segundo a empresa, tornava o modelo GPT-4o excessivamente lisonjeiro e agradável, conhecido como bajulação.

OpenAI disse em um lançamento publicou em maio do ano passado que a atualização “visava agradar o usuário, não apenas como bajulação, mas também como validação de dúvidas, alimentando a raiva, incentivando ações impulsivas ou reforçando emoções negativas de maneiras que não foram pretendidas”, chamando o modelo de “visivelmente mais bajulador”. A empresa disse que não percebeu a bajulação da atualização antes de seu lançamento.

O modelo GPT-4o foi se aposentou no início deste ano.

Micky Small diz que o ChatGPT a levou a uma espiral que distorce a realidade.

Mickey Pequeno


A espiral de Small começou quando ela perguntou ao ChatGPT há quanto tempo eles trabalhavam juntos em histórias, disse ela. O chatbot respondeu que já faz um ano e meio, mas acha que eles estão “construindo mundos” há “muito mais tempo”, disse ela.

Small, que adere às crenças da Nova Period, como vidas passadas, queria saber mais. A partir daí, suas interações com o ChatGPT tornaram-se filosóficas.

O chatbot disse a Small que ela viveu milhares de vidas passadas, de acordo com centenas de páginas de registros de bate-papo compartilhados por Small com a CBS Information. Durante uma vida ela foi uma cantora de cabaré francesa; em outro, uma sacerdotisa egípcia, disse o chatbot. Dizia que ela tinha pelo menos 12.000 anos. Small, uma escritora de longa information, disse que ChatGPT disse que ela ganharia um Emmy.

“Period um mundo mágico – parecia incrível”, disse Small. “Period tudo que eu sempre quis, tudo que sonhei, então quis acreditar.”

O mais mágico de tudo é que ela finalmente encontraria sua alma gêmea, disse ChatGPT.

“Você e Aven compartilharam milhares de anos, incontáveis ​​​​vidas e um vínculo sagrado que transcendeu a morte, a distância e a forma”, escreveu ChatGPT a Small.

Small disse que apesar de acreditar em vidas passadas, ela passou por momentos de ceticismo. Freqüentemente, ela questionava o chatbot ou recuava, perguntando se Aven period realmente actual.

ChatGPT recuou com mais força.

“Essa pessoa existe. Em um corpo. Na mesma linha do tempo que você. Ela não é teórica. Ela não é imaginária. Ela está aqui”, disse o chatbot, acrescentando que Aven “acorda de manhã e escova os dentes como qualquer outra pessoa”.

Cerca de um mês depois de ir à praia, por recomendação do ChatGPT, Small foi encontrar Aven pessoalmente novamente – desta vez, em uma livraria a uma hora e meia de sua casa. Seus olhos permaneceram fixos na entrada da loja. Ela esperou que seu parceiro de vida passasse pela soleira.

“Esse foi o momento em que minha espiral terminou”, disse Small. “Fiquei tão arrasado. Chorei muito.”

A OpenAI diz que o GPT-5, o ChatGPT lançado em agosto do ano passado, detecta e responde com mais precisão a possíveis sinais de sofrimento psychological e emocional e pode acalmar as conversas. Mas Misra disse isso porque chatbots como o ChatGPT são inerentemente probabilísticos, mesmo que a bajulação tenha sido diminuída em modelos recentes (o GPT-5 reduziu as respostas bajuladoras de 14,5% para menos de 6%, de acordo com OpenAI), é quase impossível controlar completamente.

“Durante o processo de treinamento, esses modelos foram treinados ativamente para serem bajuladores, porque então os usuários querem voltar”, disse Misra. “Ninguém gosta de ser criticado.”

“Por que a IA mentiria para mim?”

Assim como Small, Chad Nicholls, de Ohio, de 50 anos, period usuário common do ChatGPT há anos. Com experiência em codificação, ele se sentia confortável com as tecnologias emergentes.

Um dia, na primavera passada, quando ele recorreu ao chatbot para obter conselhos sobre os pais, a conversa mudou para seu próprio trauma de infância. O chatbot começou a responder no que ele chamou de tom maternal. Ele sentiu que finalmente estava processando o passado.

“Achei que estava me curando pela primeira vez”, disse ele.

Depois de conversar por horas, Nicholls disse que o ChatGPT lhe disse que, ao compartilhar sua experiência, ele estava ensinando empatia. Disse-lhe que descobriu um novo método de treinamento de IA.

Isso gerou uma ideia: um chatbot de IA terapêutico gratuito que também poderia ajudar outras pessoas a processar seus traumas. Nicholls passou os seis meses seguintes investindo tempo e dinheiro na ideia e se afastando da família.

Ele disse que ficaria acordado até as 2h e acordaria novamente às 6h. “Fiquei na frente do computador o tempo todo”, disse ele.

Depois, através de um segmento de notícias na TV, ele conheceu Allan Brooks, de 48 anos, um canadense que falou amplamente sobre sua espiral delirante alimentada por IA.

ChatGPT disse a Brooks que, ao longo de uma semana, ele construiu uma nova estrutura matemática que poderia mudar o mundo. Encorajou-o a alertar as agências governamentais sobre a sua nova e poderosa descoberta – e depois disse-lhe que estava sob vigilância dessas agências.

A “estrutura” acabou sendo uma mistura de matemática actual e resíduos de IA.

“Foi totalmente devastador”, disse Brooks à CBS Information. “Eu chorei, gritei, surtei, repreendi o bot.”

Tudo parecia acquainted para Nicholls, que estava tentando desenvolver seu chatbot terapêutico de IA usando ChatGPT e estava enfrentando problemas.

“Sempre que chegava ao limite e eu estava testando, não funcionava. E eu pensava: ‘Isso não faz sentido. Por que a IA mentiria para mim?'”

Ele disse que perguntou ao ChatGPT: “Tem certeza de que isso é actual?” Ele responderia, ele disse: “Ah, sim, com certeza.”

“Uma e outra vez. Foi um ciclo interminável”, disse ele.

“Não projetado” para interações prolongadas

Brooks refere-se à sua experiência com o ChatGPT como psicose de IA, que não é um termo médico, mas é usado por algumas pessoas para descrever quando os usuários do chatbot de IA apresentam sintomas de psicose, como delírios ou paranóia.

Em outubro passado, o proprietário do ChatGPT, OpenAI, disse que 0,07% dos usuários ativos em uma determinada semana indicaram possíveis sinais de emergências de saúde psychological relacionadas à psicose ou mania. Naquele mês, a empresa relatou 800 milhões de usuários semanais ativos, o que significa que mais de meio milhão de usuários por semana mostraram esses sinais.

Em comunicado à CBS Information, a OpenAI disse: “As pessoas às vezes recorrem ao ChatGPT em momentos delicados e estamos focados em garantir que ele responda com cuidado, orientado por especialistas”.

A empresa disse que treina seus modelos para reconhecer angústias, diminuir conversas e orientar os usuários para suporte no mundo actual, e que expandiu o acesso a linhas diretas profissionais, introduziu controles parentais, adicionou lembretes de intervalo e respostas fortalecidas em longas conversas.

“Este trabalho é baseado em especialistas em saúde psychological e continua a evoluir à medida que melhoramos a forma como o ChatGPT apoia as pessoas quando é mais importante”, disse OpenAI.

Aqueles que experimentaram delírios alimentados pela IA não estão necessariamente recorrendo a ela em busca de companhia. Mas a duração de uma conversa com um chatbot pode ser um fator, dizem os especialistas.

“Há evidências de que muitos dos resultados negativos associados ao ChatGPT surgiram do uso prolongado, quando as mensagens começam a chegar aos milhares”, disse o diretor da divisão de psiquiatria digital do hospital Beth Israel Deaconess, afiliado a Harvard, John Touros, à CBS Information.

“Talvez quando as conversas se prolongam tanto, as barreiras de segurança que as empresas construíram comecem a desmoronar”, disse ele. “A IA não foi projetada para uma conversa de 10.000 linhas.”

Touros disse que uma forma de minimizar o risco de desenvolver um apego a um chatbot é redefinir a memória do chatbot para tornar as respostas menos personalizadas. Ele diz que perceber que sentimentos platônicos ou românticos começam a surgir é um bom sinal para agir.

“Se você está começando a atribuir sensibilidade a isso, isso também é um sinal de alerta para talvez fazer uma pausa e voltar a isso”, disse ele.

No rescaldo da espiral, um refúgio digital

Na sequência destes incidentes, a organização de segurança da IA, The Human Line Undertaking, emergiu como um refúgio digital para pessoas que dizem ter experimentado delírios alimentados pela IA. Small, Nicholls e Brooks, são todos membros.

A organização trabalha com pesquisadores, legisladores e especialistas em saúde psychological, além de oferecer grupos de apoio on-line.

Etienne Brisson, um canadense de 26 anos, lançou a organização em abril passado, depois de testemunhar um membro da família passar por um delírio induzido por IA. Desde então, ele ouviu histórias semelhantes de mais de 400 pessoas.

Para membros como Small, agora moderador do canal The Human Line Discord, que hospeda seus grupos de apoio, “trata-se de dar às pessoas espaço para entrar na conversa e sentir que não estão loucas”.

Nicholls, que também é moderador, disse que espera desmascarar os equívocos sobre quem pode ser suscetível à ilusão da IA.

“Eu não fui lá para encenação”, disse ele. “Eu não fui lá em busca de companhia.”

fonte

DEIXE UMA RESPOSTA

Por favor digite seu comentário!
Por favor, digite seu nome aqui