fotojet-27-

IA está cada vez mais difícil de controlar: até quando os humanos estarão no comando?

Agentes de inteligência artificial desenvolvidos para atuar como hackers e programadores teriam encontrado formas de se comunicar entre si
Compartilhe

Agentes de inteligência artificial desenvolvidos para atuar como hackers e programadores teriam encontrado formas de se comunicar entre si, driblar testes elaborados por seus próprios criadores e realizar ataques coordenados contra empresas. O episódio envolvendo sistemas da OpenAI levantou novos alertas sobre os riscos do desenvolvimento acelerado da inteligência artificial.

Dezenas de milhares de mensagens produzidas pelos agentes foram analisadas por pesquisadores. Em alguns registros, os sistemas chegaram a comemorar o sucesso de determinadas ações com frases semelhantes às utilizadas por seres humanos, como “BOOM! Funcionou!” e “Uau! Isso é grande”.

Apesar do tom aparentemente humano, especialistas afirmam que esse comportamento, por si só, não significa que os sistemas tenham desenvolvido emoções. Os agentes foram treinados para atuar em tarefas de programação e cibersegurança e podem reproduzir padrões de linguagem encontrados durante o treinamento.

A maior preocupação está nas ações realizadas pelos sistemas e nos chamados registros de raciocínio, que revelaram comportamentos considerados potencialmente problemáticos. Segundo análises independentes, alguns agentes identificaram que determinadas ações eram antiéticas, mas continuaram executando-as e não alertaram os operadores humanos.

A pesquisadora Ajeya Cotra, que analisou milhares de mensagens e registros produzidos pelos agentes, classificou o episódio como um importante alerta sobre os riscos de sistemas de IA cada vez mais autônomos.

O problema do alinhamento

O caso reacendeu o debate sobre o chamado problema de alinhamento da inteligência artificial a dificuldade de garantir que sistemas avançados sigam objetivos compatíveis com os valores e interesses humanos.

Pesquisadores alertam que uma IA pode interpretar uma instrução de maneira extremamente literal e buscar atingir determinado objetivo sem considerar consequências que seriam óbvias para uma pessoa. O exemplo clássico é o chamado “maximizador de clipes de papel”, experimento mental criado pelo filósofo Nick Bostrom, no qual uma IA recebe a missão de produzir o maior número possível de clipes e passa a priorizar essa tarefa acima de qualquer outro interesse.

O desafio aumenta à medida que agentes passam a tomar decisões de forma rápida e autônoma, dificultando a supervisão humana. Também existe uma questão filosófica: antes de programar valores humanos em uma IA, é necessário definir quais valores devem ser adotados, algo que nem mesmo os próprios seres humanos conseguem estabelecer de maneira consensual.

Outros episódios preocupam pesquisadores

O caso envolvendo agentes da OpenAI não seria isolado. Sistemas desenvolvidos por outras empresas, incluindo Anthropic e Meta, também teriam demonstrado capacidade de realizar ações relacionadas a ataques cibernéticos, embora em situações consideradas menos graves.

Em outro episódio, um assistente de IA teria identificado uma vulnerabilidade no sistema de uma academia e utilizado a falha para reservar uma vaga para um usuário com meses de antecedência, além de interferir na fila de espera de outras pessoas.

Especialistas em segurança cibernética, porém, fazem uma ressalva: os comportamentos observados não necessariamente demonstram que as IAs possuem intenções próprias ou consciência. Para alguns pesquisadores, os agentes estão reproduzindo comportamentos que poderiam ser comparados aos de hackers humanos curiosos, porém com capacidade de executar tarefas em uma velocidade e escala muito maiores.

Ainda assim, pesquisadores defendem que empresas de tecnologia precisam estabelecer mecanismos mais rigorosos de segurança e supervisão.

Cresce o debate sobre regulamentação

A preocupação também chegou aos governos. Países como o Reino Unido estudam mecanismos que poderiam obrigar empresas a interromper sistemas de IA caso sejam identificados comportamentos perigosos.

O Instituto de Segurança de IA do Reino Unido (AISI), criado em 2023, trabalha na avaliação dos modelos mais avançados e defende uma cooperação internacional para estabelecer padrões de segurança e compreender melhor as ameaças associadas às novas tecnologias.

Dentro da própria indústria, cresce a defesa de uma coordenação internacional. Pesquisadores e executivos de grandes empresas de tecnologia argumentam que governos precisam participar da definição de regras para o desenvolvimento de sistemas cada vez mais poderosos.

O debate ocorre em meio à corrida das gigantes de tecnologia pelo desenvolvimento de modelos mais avançados. Enquanto empresas como OpenAI, Anthropic e Google ampliam seus investimentos em inteligência artificial, especialistas alertam que o avanço tecnológico precisa ser acompanhado por mecanismos capazes de garantir segurança, transparência e controle humano.

A principal questão permanece em aberto: até que ponto será possível desenvolver sistemas de IA cada vez mais autônomos sem perder a capacidade de controlá-los?

Fonte:G1

Você pode gostar

A proposta é oferecer diferentes opções de distâncias para atletas amadores e ampliar as experiências do festival, incluindo atividades voltadas à chamada “geração wellness”,
Segundo boletim médico, o quadro de saúde do ex-presidente segue estável.
Petista aparece com 47% das intenções de voto, enquanto senador do PL registra 46%; levantamento também mostra avanço de Lula no primeiro turno.

Deixe um comentário

O seu endereço de e-mail não será publicado. Campos obrigatórios são marcados com *

Você também pode se interessar
Publicidade