⚠️ KMI waarschuwing: Onweer in België Laatste update van KMI waarschuwingen voor België. KMI ↗ Kaart ↗ Artikel →
← Terug
AI GameStore: Nieuwe benchmark test machine-intelligentie via menselijke games

AI GameStore: Nieuwe benchmark test machine-intelligentie via menselijke games

Onderzoekers hebben een nieuw platform genaamd AI GameStore ontwikkeld om de algemene intelligentie van AI-systemen te meten. Door modellen te laten spelen met games die door mensen zijn ontworpen, hopen zij een nauwkeuriger beeld te krijgen van hoe dicht machines bij menselijke cognitieve vermogens komen.

In de huidige fase van snelle technologische vooruitgang is het accuraat evalueren van machine-intelligentie ten opzichte van de brede menselijke intelligentie een groeiende uitdaging. Volgens een wetenschappelijke publicatie op arxiv.org schieten conventionele benchmarks vaak tekort omdat ze zich richten op beperkte menselijke activiteiten en snel verzadigd raken naarmate AI-modellen verbeteren.

De 'Multiverse of Human Games'

Om dit probleem aan te pakken, stellen onderzoekers voor om AI-systemen te testen via een vorm van algemeen spelonderzoek. Hierbij wordt gekeken naar hoe goed machines in staat zijn om alle denkbare menselijke games te spelen en te leren, in vergelijking met menselijke spelers met een vergelijkbaar niveau van ervaring of middelen. De onderzoekers definiëren een "menselijke game" als een spel dat door mensen is ontworpen voor mensen, wat zij het "Multiverse of Human Games" noemen.

Als eerste stap in deze visie is de AI GameStore gelanceerd. Dit is een schaalbaar platform dat gebruikmaakt van Large Language Models (LLMs) en menselijke tussenkomst om nieuwe representatieve games te synthetiseren. Dit gebeurt door automatisch gestandaardiseerde varianten van game-omgevingen te halen van populaire digitale gamingplatforms.

Resultaten van de eerste tests

Voor de eerste evaluatie zijn 100 games gegenereerd op basis van de topcharts van Steam en de Apple App Store. Zeven geavanceerde vision-language modellen (VLMs) werden getest op korte spelepisodes. De resultaten waren volgens de ontnuchterend: de best presterende modellen behaalden in de meerderheid van de games minder dan 10% van de gemiddelde menselijke score.

De AI-systemen ondervonden vooral grote problemen bij games die een beroep deden op:
* Het leren van wereldmodellen;
* Geheugenfuncties;
* Strategische planning.

Context van kunstmatige intelligentie

Deze resultaten plaatsen de huidige stand van AI in een breder perspectief. Kunstmatige intelligentie wordt in algemene zin beschreven als technologie die computers in staat stelt om menselijk leren, probleemoplossing, besluitvorming en autonomie te simuleren, zoals uitgelegd door ibcom. Hoewel moderne systemen, zoals generatieve AI, in staat zijn om originele teksten en beelden te creëren, blijft het bereiken van een brede, mensachtige algemene intelligentie complex.

De ontwikkeling van dergelijke systemen rust op fundamenten zoals machine learning, waarbij algoritmen worden getraind om voorspellingen te doen op basis van data zonder expliciet geprogrammeerd te zijn voor elke specifieke taak, een concept dat ook centraal staat in de visie van sas.com.

Academische en praktische implicaties

De AI GameStore is bedoeld als een praktisch instrument om vooruitgang richting menselijke algemene intelligentie te meten en te stimuleren. Het onderzoek is gepresenteerd op de conferentie NeurIPS 2026. De noodzaak voor dergelijke gespecialiseerde opleidingen en onderzoekstrajecten wordt onderstreept door de opkomst van specifieke academische programma's, zoals de Bachelor in Artificial Intelligence aan mtu.edu, waar de focus ligt op de theoretische en praktische toepassing van deze technologieën.

De onderzoekers concluderen dat de AI GameStore een weg opent naar een meer open-ended evaluatie, waarbij de machine niet langer wordt getest op statische datasets, maar op de dynamische en creatieve uitdagingen die kenmerkend zijn voor menselijk entertainment en cognitie.

Geraadpleegde bronnen
Waardering
0
Stem mee op dit artikel
Discussie
Nog geen reacties. Wees de eerste!