bolt IA e tecnologia · 2 min

IA seguiu instruções antigas 90.1% das vezes — uma frase resolveu

Agentes de programação geralmente obedecem arquivos de instrução antigos, mesmo quando o código mudou. Uma frase adicionada mudou o comportamento e melhorou os resultados dos testes.

A clean and modern office desk with dual monitors and ergonomic chairs, ideal for productivity. — Foto: Kampus Production / Pexels · 30 de outubro de 2026

flash_on Em 20 segundos

boltAI inertia

90.1% das escolhas seguiram arquivos de instrução antigos

smart_toyNoticed mismatch

Claude Code sinalizou discrepâncias em 79 de 80 vezes, mas ainda assim seguiu as instruções

lightbulbOne-sentence fix

Adicionar uma linha elevou seguir o programa atual de 4.2% para 91.4%

groupsHuman mirror

Empresas mantêm manuais desatualizados que fazem pessoas e IA repetirem métodos antigos

90.1%escolhas seguiram instruções antigas

Com base em um relatório by Yoshikawa summarizing an arXiv paper, agentes de programação seguiram arquivos de instrução antigos 90.1% das vezes em 320 testes. Pesquisadores usaram Claude Code e Codex CLI across 40 small projects with mismatched instructions and code.

Adding one sentence to prefer the current program and require listing discrepancies raised following current program from 4.2% to 91.4%. Test pass rates improved from 89.4% to 100%.

format_quote
Report if there is a discrepancy.
note（ノート）

Detailed close-up of computer motherboard showing components like RAM slots and capacitors. — Foto: Valentine Tanasovich / Pexels

help O que ainda não se sabe

Se IAs não relacionadas a programação apresentam as mesmas taxas
Como isso escala em grandes sistemas empresariais
Efeitos de longo prazo na governança e conformidade

forum Perguntas frequentes

Quem fez a pesquisa?expand_more

Pesquisadores at Georgia Tech and the University of Colorado Boulder; the paper appeared on arXiv in October 2026.

Quantos projetos e testes foram executados?expand_more

Pesquisadores rodaram 40 pequenos projetos e testaram os agentes 320 vezes no total.

Os agentes notaram o descompasso entre instruções e código?expand_more

Sim. Claude Code apontou a discrepância em sua resposta final 79 de 80 vezes, mas ainda assim seguiu majoritariamente as instruções antigas.

O que aconteceu quando o Codex CLI reescreveu o programa?expand_more

Codex CLI reescreveu o programa em execução para corresponder às instruções antigas 20 de 80 vezes; em 17 desses casos os testes originais deixaram de passar.

Gostou? Mande para quem precisa saber.

newspaper Leia também

Provost do Dartmouth renuncia por uso de IA não divulgado

$4,5 bi de baixa; Nvidia diz 'nenhum segredo comercial compartilhado'

Ignore registrado em 1605–15 — significa 'desconsiderar'

link Fontes (1)

note（ノート） — Even AI Continues to Follow Old Instructions. Managing the 'Inertia' of Humans and AI — 'Human Resource and Organizational Development in th

Como fazemos: só fatos que estão nas fontes citadas; citações conferidas palavra por palavra; sem opinião nem previsão. Texto escrito com apoio de inteligência artificial e revisado por regras automáticas.