Semantic Keypoint Representations for Robotic Manipulation

Promovendus/a
Lips, Thomas
Faculteit
Faculteit Ingenieurswetenschappen en Architectuur
Vakgroep
Vakgroep Elektronica en Informatiesystemen
Curriculum
Master of Computer Science Engineering, Universiteit Gent, 2021
Academische graad
Doctor in de ingenieurswetenschappen: computerwetenschappen
Taal proefschrift
Engels
Vertaling titel
Semantische keypoints als omgevingsbeschrijving voor robotmanipulatie
Promotor(en)
prof. Francis wyffels, vakgroep Elektronica en Informatiesystemen - dr. ir. Andreas Verleysen, vakgroep Elektronica en Informatiesystemen
Examencommissie
voorzitter prof. Patrick De Baets (decaan) - prof. Tony Belpaeme, vakgroep Elektronica en Informatiesystemen - prof. Renaud Detry, KU Leuven - prof. Danica Kragic Jensfelt, KTH Royal Institute of Technology (Zweden) - prof. Hiep Luong, vakgroep Telecommunicatie en Informatieverwerking - promotor prof. Francis wyffels, vakgroep Elektronica en Informatiesystemen - promotor dr. ir. Andreas Verleysen, vakgroep Elektronica en Informatiesystemen

Korte beschrijving

Robotarmen worden vandaag vooral ingezet in fabrieken, waar de omgeving zorgvuldig is afgestemd op de robot. Willen we robots ook manipulatietaken laten uitvoeren in zorginstellingen of woningen, dan moeten ze met veel meer variatie kunnen omgaan. Elk huis is immers uniek. Robotici vertrouwen hiervoor steeds vaker op machine learning, maar dat vereist doorgaans grote hoeveelheden trainingsdata. In dit proefschrift onderzoek ik hoe robots manipulatietaken met minder data kunnen leren door gebruik te maken van *semantische keypoints*: specifieke punten op objecten, zoals de neus van een schoen of het handvat van een koffietas. Deze punten vatten op een compacte en gestructureerde manier de relevante toestand van de omgeving samen, en helpen zo robots om te gaan met de variatie in hun omgeving. Ik onderzoek hoe robots zulke keypoints kunnen leren herkennen via synthetische beelden uit computersimulaties, zodat er minder echte data manueel verzameld en gelabeld moet worden. Daarnaast onderzoek ik of recente vooruitgang in beeldgeneratie de manuele inspanning voor het bouwen van zulke simulaties verder kan verminderen. Tot slot onderzoek ik hoe robots deze keypoints kunnen gebruiken om imitation learning - het leren welke acties ze moeten ondernemen op basis van menselijke demonstraties - efficiënter te maken.

Praktisch

Datum
Vrijdag 19 juni 2026, 17:30
Locatie
auditorium 1, iGent (eerste verdieping), Technologiepark Zwijnaarde 126, 9052 Zwijnaarde
Livestream
Volg online

Meer info

Contact
doctoraat.ea@ugent.be