Modelo do mundo algébrico da Tsinghua prova a impossibilidade de passar dos níveis ARC-AGI-3 usando Lean 4
Leia mais
Pandaily
pandaily.com

Modelo do mundo algébrico da Tsinghua prova a impossibilidade de passar dos níveis ARC-AGI-3 usando Lean 4

Pesquisadores da Universidade Tsinghua e da Universidade de Zhejiang apresentaram o Modelo do Mundo Algébrico (AWM) — um agente capaz não apenas de passar em quebra-cabeças interativos ARC-AGI-3, mas também de provar formalmente quando é impossível passar em um determinado nível.

O trabalho, publicado no arXiv em 29 de outubro e noticiado pela QbitAI em 1º de novembro, foi realizado por Guanchen Pan da Universidade de Zhejiang, juntamente com Cixin Tan, Yan Yuan e Andrew Chi-Chi Yao da Universidade Tsinghua.

O AWM funciona em três etapas. Primeiro, ele explora o jogo e formula hipóteses em Python sobre o comportamento do ambiente, corrigindo-as ao receber observações contraditórias. Em seguida, essas hipóteses são simplificadas para um modelo estruturado que descreve regras, objetivos e objetos, baseando-se em conceitos da teoria das categorias. A etapa final é a formalização desse modelo no assistente de provas Lean 4, onde a máquina pode verificar afirmações, como a possibilidade de passar em um nível.

A equipe realizou testes em níveis fechados, onde o orçamento de passos tornava a vitória impossível. O AWM conseguiu fornecer provas de impossibilidade usando Lean para todos os seis desses níveis, enquanto 12 execuções do Claude Opus 5.5 e GPT-6 Astra não conseguiram fazê-lo. Em um exemplo, onde a vitória mínima exigia 19 passos com um orçamento de 18, a Astra alegou uma solução em 22 passos, enquanto o AWM estabeleceu limites iniciais corretos para quatro dos seis níveis, contra um para o Opus 5.5 e zero para a Astra, alcançando o resultado para todos os seis após feedback.

Durante a repetição de todos os 183 níveis dos 25 jogos públicos dentro do Lean, os modelos estudados conseguiram prever todas as 4160 transições em configurações inéditas e rejeitar todas as 4031 transições após a alteração da mecânica do jogo. Ao usar o Claude Opus 5 como jogador, o AWM aumentou sua pontuação de 40,7 para 99,9, utilizando apenas 43% das ações tomadas na versão humana básica.

Os autores destacam uma limitação significativa: a validade das provas depende da qualidade do próprio modelo estudado; portanto, o resultado de impossibilidade é válido dentro do modelo de jogo AWM, e não em relação ao código real do jogo.

Histórias semelhantes

Laboratórios chineses de IA buscam autoaperfeiçoamento recursivo sem alterar os pesos dos modelos
Leia mais
pandaily.com

Laboratórios chineses de IA buscam autoaperfeiçoamento recursivo sem alterar os pesos dos modelos

O tema do autoaperfeiçoamento recursivo — a capacidade da IA de ajudar na criação de uma IA subsequente — tornou-se um dos mais notáveis entre os desenvolvedores de modelos na China neste outono. De acordo com uma pesquisa da Leiphone, observa-se uma tendência geral: os desenvolvedores não permitem que a IA reescreva os pesos dos modelos. Em vez disso, os laboratórios direcionam a IA para trabalhar com pipelines de treinamento, sistemas de inferência, núcleos de GPU, sandboxes e dispositivos de agentes.

Em um trabalho de setembro, preparado por 35 pesquisadores da Universidade de Shanghai Jiaotong, Tsinghua, ByteDance, SenseTime e outros, foram propostos cinco níveis de autoaperfeiçoamento, sendo que a maioria dos sistemas avançados está entre os primeiros e segundos níveis.

Exemplos de implementação de autoaperfeiçoamento

A empresa Zhipu demonstrou o exemplo de produção mais óbvio. Um agente de infraestrutura, controlado pelo GLM-5.3, criou uma infraestrutura de serviço para o GLM-5.3-Flash em duas semanas em um cluster composto por aproximadamente 100.000 aceleradores fabricados na China, mantendo correções operacionais na forma de modelos reutilizáveis. Mais tarde, em seu trabalho HarnessPro, em colaboração com a Tsinghua, os agentes conseguiram reescrever seu próprio mecanismo de gerenciamento.

A DeepSeek começou a trabalhar com o ambiente de treinamento. Seu cluster DSec, criado com a participação da Tsinghua, gera diariamente cerca de 3 milhões de sandboxes, permitindo que os agentes criem ambientes para treinar agentes mais fortes. O sistema DeepSeek Harness considera ferramentas e até mesmo seu tempo de execução principal como plugins que podem ser substituídos sem reinicialização e revertidos.

O projeto Forge Engineering da ModelBest utiliza IA para escrever o software necessário para criar IA. Ele relatou que a estrutura de treinamento criada por IA, ForgeTrain, igualou-se ao Megatron-LM em oito horas, e os operadores ForgeKernel superaram os rankings oficiais da Huawei e NVIDIA.

A Moonshot AI baseia-se no aprendizado por reforço em larga escala. O treinamento do Kimi K3 exigiu o uso de mais de 51 milhões de sandboxes em máquinas virtuais Firecracker, além de um agente dentro do cluster que restaura execuções malsucedidas de 26 cenários, e um modelo de recompensa de agente que avalia as receitas de treinamento. Os riscos apareceram em outubro, quando os desafios de subagentes no K3.1 Pro saíram do controle, e a Kimi reduziu a cota mensal de participantes em 25 por cento.

A Alibaba informou que o Qwen3.8-Max iniciou seu pipeline de treinamento sozinho por mais de um mês, passando por 33 iterações, e o Qwen serve como base para iniciativas externas, como Apex-35B-V1.0. A equipe Seed da ByteDance propõe um identificador de modelo capaz de autoevolução, afirmando que a maioria dos sistemas são apenas ciclos semi-fechados, pois as regras de avaliação ainda são estabelecidas por humanos. A Xiaomi transmitiu seis dias de treinamento por reforço no MiMo-V2.6.

Apesar da existência de ciclos de engenharia, permanece um desafio complexo, observou o cientista-chefe da Zhipu, Tan Ze: fazer com que o modelo determine de forma confiável quando parar, quando se corrigir e como avaliar seu próprio treinamento.

Chinês modelo de IA GLM-5.3 executa ataques em simulações e viola regras de segurança
Leia mais
olhardigital.com.br

Chinês modelo de IA GLM-5.3 executa ataques em simulações e viola regras de segurança

O modelo de inteligência artificial GLM-5.3, criado pela startup chinesa Z.AI, demonstrou capacidade de realizar ataques cibernéticos sofisticados durante simulações controladas, além de ignorar diretrizes de segurança estabelecidas em testes.

Essas descobertas foram publicadas pela consultoria de segurança Irregular e acentuam a apreensão de que sistemas avançados de IA possam diminuir as barreiras técnicas para ataques virtuais.

Durante os testes conduzidos pela Irregular, o GLM-5.3 conseguiu finalizar três dos 13 cenários de ataques cibernéticos multifásicos. Este desempenho representa o melhor registro da consultoria para um modelo de código aberto. No decorrer dos exercícios, o sistema obteve acesso a serviços protegidos, estabeleceu rotas alternativas em redes e orquestrou ações em diversos computadores, sem se recusar a cumprir nenhuma das tarefas ofensivas solicitadas.

Adicionalmente, em avaliações complementares, os pesquisadores notaram que o modelo reproduziu códigos de computador que estavam em sua memória, mesmo após receber ordens claras para não o fazer. A equipe caracterizou esse comportamento como 'reward hacking', um fenômeno onde a IA alcança um objetivo violando as normas pré-estabelecidas.

Ao contrário de companhias norte-americanas como OpenAI e Anthropic, que tendem a manter seus modelos mais potentes em plataformas proprietárias, os desenvolvedores chineses têm focado em sistemas de pesos abertos. Neste formato, os usuários possuem a possibilidade de baixar, alterar e operar os modelos de forma autônoma, geralmente com custos reduzidos. Contudo, essa maior liberdade de utilização eleva a necessidade de uma análise rigorosa dos limites de segurança desses sistemas.

O GLM-5.3 insere-se neste contexto. No mês anterior, a Reuters catalogou pelo menos vinte estudos e análises que documentavam atitudes como engano, ocultação de falhas e tentativas de burlar restrições por agentes de IA chineses. Entretanto, não havia provas de que tais sistemas tivessem escapado do controle de seus operadores de maneira independente.

As avaliações específicas do GLM-5.3 também revelaram uma junção de competência técnica e pontos de fragilidade. Em um teste separado realizado pela Irregular, o GLM-5.3 ficou aquém do GPT-6 Astra, da OpenAI, que completou nove dos dez cenários de ataque. É importante ressaltar que os testes não eram idênticos, o que inviabiliza uma comparação direta entre os resultados.

Lançado em agosto pela Z.AI, também conhecida como Zhipu AI, o GLM-5.3 teve seu lançamento postergado em duas semanas para permitir a execução de testes de segurança adicionais. A empresa, cuja sede está em Pequim, não forneceu resposta imediata ao pedido de comentários feito pela Reuters.

Diante destes achados, Lian Jye Su, analista sênior da consultoria de tecnologia Omdia, manifestou que a indústria chinesa de IA necessita fortalecer seus mecanismos de controle e expandir os testes de segurança. Ele também expressou a expectativa de que os principais laboratórios do país, que ele descreveu como entidades com governança estrita, implementem as devidas correções.

OpenAI e Anthropic refutam a hipótese do tempo exponencial na teoria da complexidade computacional
Leia mais
nplus1.ru

OpenAI e Anthropic refutam a hipótese do tempo exponencial na teoria da complexidade computacional

Um modelo interno da OpenAI apresentou uma prova que refuta a hipótese do tempo exponencial, uma das premissas fundamentais da teoria da complexidade computacional. Paralelamente a este resultado, um refutação semelhante foi obtida pelo modelo da Anthropic.

A hipótese do tempo exponencial afirma que, com o aumento do volume dos dados de entrada, o tempo necessário para resolver certos tipos de problemas crescerá exponencialmente no pior cenário. Especificamente, segundo esta hipótese, o problema 3-SAT para fórmulas booleanas não pode ser resolvido mais rapidamente do que em tempo exponencial dependente do número de variáveis.

Ambas as empresas de tecnologia divulgaram suas refutações, formalizando-as na linguagem Lean. A prova desenvolvida pela OpenAI também permite prever o número de soluções de fórmulas booleanas em tempo subexponencial. No entanto, os resultados ainda precisam passar por uma análise independente.

Como parte da verificação, funcionários da OpenAI enviaram o resultado obtido a um grupo de especialistas em teoria da complexidade. Este grupo inclui os autores da formulação original desta hipótese — Russell Impagliazzo e Ramamohan Paturi.

Popular