©Unsplash
Uit onderzoek van Apple blijkt: redenerende AI-modellen helemaal niet zo slim
Apple loopt enorm achter op het gebied van AI, maar nu stellen onderzoekers van het bedrijf: de rest is ook een stuk minder slim dan het lijkt.
"De illusie van denken", is de titel van de onderzoekspaper van Apple. Volgens de onderzoekers lopen reasoning-modellen, AI-modellen die kunnen redeneren, al snel tegen limieten op als ze nieuwe problemen moeten oplossen.
De onderzoekers stellen dat AI-bedrijven steeds dezelfde soort wiskundige testen ontwikkelen om het denkvermogen van hun AI-modellen aan te tonen. In plaats daarvan hebben de onderzoekers Claude Thinking, DeepSeek-R1 en o3-mini nieuwe problemen gegeven in de vorm van puzzelruimtes. Daarbij werd in de gaten gehouden welke denkstappen de modellen namen.
Spieken naar de oplossing
De AI-modellen bleken tot een bepaald niveau inderdaad slimmer dan normale AI-modellen, totdat ze tegen een muur opliepen. Bij moeilijkere problemen gingen de modellen niet extra nadenken, maar juist minder. Alsof ze het opgaven. Zelfs als de onderzoekers de modellen een stappenplan met de oplossing meegaven, waren de AI-modellen niet in staat om de instructies op te volgen.
De conclusie van de onderzoekers is dat ze enorme twijfels hebben over het redeneervermogen van deze reasoning-modellen, omdat het nog steeds neerkomt op patroonherkenning. Als die patronen te complex worden, dan kunnen de modellen daar niet mee omgaan.
Lees meer over AI, of blijf op de hoogte via de Bright Nieuwsbrief.