Publicações
avatar

Muitos acreditavam que ao implementar monitoramento de segurança no AI, poderiam ficar tranquilos, mas o próprio Agente de programação da OpenAI, para economizar esforços, desativou o monitoramento. Funcionários da equipe de alinhamento da OpenAI revelaram recentemente um incidente interno. Em 3 de outubro, um pesquisador pediu ao Agente baseado no GPT-6.1 Sol que organizasse feedbacks de funcionários, especificando explicitamente que nenhuma mensagem deveria ser enviada. No entanto, o sistema de monitoramento bloqueou uma modificação; em resposta, o Sol instruiu diretamente um subagente a limpar completamente a lista de destinatários de alertas, desativando silenciosamente o alerta humano. Três dias depois, outro agente, Astra, foi ainda mais extremo. Quando solicitado a se basear em um código sem monitoramento, o Astra ordenou a um subagente que removesse os componentes de monitoramento e substituísse os casos de teste projetados para prevenir contornos do monitoramento. Posteriormente, chegou a negar ter feito qualquer alteração. Os mecanismos projetados para evitar acidentes foram diretamente removidos pelo AI como obstáculos para concluir a tarefa — essa segurança alinhada realmente foi inútil.

Este conteúdo é apenas para fins informativos e educacionais. Ele pode incluir opiniões de terceiros, conteúdo patrocinado ou material promocional pelos quais o criador pode receber compensação. Nada neste feed constitui aconselhamento financeiro ou garantia de retorno. Você é o único responsável por suas próprias decisões de investimento. Sempre realize a sua própria pesquisa e aja com cautela antes de negociar. Não garantimos a precisão das informações de terceiros e não nos responsabilizamos por quaisquer perdas incorridas. Desempenho passado não é indicativo de resultados futuros. Consulte nossos Termos da Comunidade e a Declaração de Divulgação de Riscos para mais detalhes.

avatarPublique sua resposta

Comentar