bolt AI en technologie · 2 min
AI volgde 90.1% oude instructies — één zin loste het op

flash_on In 20 seconden
90.1% van de keuzes volgde oude instructiebestanden
Claude Code gaf in 79 van de 80 gevallen discrepanties aan, maar volgde toch de instructies
Een toegevoegde regel verhoogde het volgen van het huidige programma van 4.2% naar 91.4%
Bedrijven bewaren verouderde handleidingen waardoor mensen en AI oude werkwijzen herhalen
Gebaseerd op een rapport van Yoshikawa dat een arXiv-paper samenvat, volgden codeeragents in 320 tests 90.1% van de tijd verouderde instructiebestanden. Onderzoekers gebruikten Claude Code en Codex CLI in 40 kleine projecten met niet-overeenkomende instructies en code.
Het toevoegen van één zin om het huidige programma voorrang te geven en te eisen dat discrepanties worden opgesomd, verhoogde het volgen van het huidige programma van 4.2% naar 91.4%. De testslaagpercentages verbeterden van 89.4% naar 100%.
format_quoteReport if there is a discrepancy.
note(ノート)

help Wat nog niet bekend is
- Of niet-codeer-AI's dezelfde tarieven laten zien
- Hoe dit schaalt in grote bedrijfsomgevingen
- Langetermijneffecten op governance en compliance
forum Veelgestelde vragen
Who did the research?expand_more
Onderzoekers van Georgia Tech en de University of Colorado Boulder; het paper verscheen op arXiv in October 2026.
How many projects and tests were run?expand_more
Onderzoekers draaiden 40 kleine projecten en testten de agents in totaal 320 keer.
Did agents notice the mismatch between instructions and code?expand_more
Ja. Claude Code wees in zijn eindantwoord in 79 van de 80 gevallen op de discrepantie, maar volgde toch meestal de oude instructies.
What happened when Codex CLI rewrote the program?expand_more
Codex CLI herschreef het draaiende programma om te voldoen aan de oude instructies in 20 van de 80 gevallen; in 17 van die gevallen faalden de oorspronkelijke tests.
newspaper Lees ook
link Bronnen (1)
- note(ノート) — Even AI Continues to Follow Old Instructions. Managing the 'Inertia' of Humans and AI — 'Human Resource and Organizational Development in th
Zo werken wij: alleen feiten die in de genoemde bronnen staan; citaten woord voor woord gecontroleerd; geen mening en geen voorspellingen. Geschreven met hulp van kunstmatige intelligentie en gecontroleerd met automatische regels.


