DeepMind leert mini-robots voetballen
Google-dochter DeepMind gebruikt kunstmatige intelligentie om robots te trainen voor een één-op-één voetbalwedstrijd. Bij de training moeten de onderzoekers de grappige tweevoeters ook duwen.
Het bedrijf DeepMind, gespecialiseerd in kunstmatige intelligentie, leert kleine robots met elk 20 gewrichten hoe ze moeten voetballen. Een team van onderzoekers onderzoekt in meer detail of het mogelijk is om geavanceerde en veilige bewegingsvaardigheden te ontwikkelen op een kosteneffectieve manier met behulp van deep reinforcement learning. En of deze vaardigheden gecombineerd kunnen worden tot complexe gedragsstrategieën in dynamische omgevingen.
De robots werden getraind voor een vereenvoudigde één-op-één voetbalwedstrijd. In de eerste video's laten de onderzoekers de huidige stand van het spel zien. De resultaten zijn vermakelijke, soms ogenschijnlijk vervelende scènes - zoals deze duwtraining:
Eerst oefende het team individuele vaardigheden in isolatie in een simulatie voordat de robot zelf het echte veld op mocht, aanvankelijk alleen. De training omvatte zaken als snel herstellen na een val, lopen, draaien, trappen en meer. Stabiele en efficiënte overgangen tussen individuele acties werden ook getraind.
De robots in de volgende video zijn al getraind en doen één tegen één mee. Naast de bewegingen hebben ze ook complex gedrag geleerd. Ze hebben een basiskennis van strategie en kunnen ook anticiperen op balbewegingen. Hierdoor kunnen ze schoten van tegenstanders blokkeren. De gedragstraining vond ook plaats in een simulatie voordat de software naar de robots werd overgebracht.
De AI-training, samen met kleine hardware-aanpassingen, heeft er naar verluidt voor gezorgd dat de robots veiliger en effectiever bewegen in vergelijking met de basisprogrammering, zonder dat dit ten koste gaat van de dynamiek en wendbaarheid. Dankzij de AI-training hebben ze naar verluidt 63 procent minder tijd nodig om op te staan, rennen ze 156 procent sneller en schoppen ze de bal 24 procent sneller.
DeepMind is tevreden met de voorlopige resultaten. Uit hun analyse blijkt dat het gebruik van deep reinforcement learning voor robottraining een veelbelovende aanpak is. Het team wil verder gaan en met name onderzoeken wat de robots kunnen leren van hun camerabeeld en of het mogelijk is om verschillende aspecten van het spel beter te voorspellen.
Coverafbeelding: Screenshot YouTube video / OP3 Soccer Team, DeepMind
De dagelijkse kus van de muze stimuleert mijn creativiteit. Als ze me vergeet, probeer ik mijn creativiteit terug te winnen door te dromen, zodat het leven mijn dromen niet verslindt.