Een hand volgen zonder camera's en zonder sensoren aan het lichaam. Dat lukt nu met mmHand, een nieuw systeem dat de positie van een menselijke hand vaststelt met nauwkeurigheid op pixelniveau. Het enige wat het systeem nodig heeft, is één commercieel verkrijgbaar mmWave-apparaat: een radar die werkt met millimetergolven.
Waarom geen camera's?
Het lokaliseren van handen is een belangrijk onderdeel binnen computer vision, met uiteenlopende praktische toepassingen. Maar de bestaande methoden hebben serieuze nadelen. Camera's roepen privacyvragen op, en wearables die je moet dragen, beperken het comfort. Die factoren vormen een barrière voor breder gebruik, aldus een publicatie op arxiv.org.
mmHand is daar het antwoord op: een privacy-bewust en 'device-free' alternatief. Het systeem werkt uitsluitend met radarsignalen en legt geen beelden vast. Zo kan de positie van de hand in een specifiek coördinatensysteem worden bepaald — zonder dat de privacy van de gebruiker in het gedrang komt.
Van ruwe radardata naar een scherp beeld
Radardata is ruw en complex. Om die om te zetten in bruikbare locatiegegevens, bouwden de onderzoekers verschillende technische innovaties in. De kern daarvan is de 'mmImage'-generatietool. Die filtert ruimtelijke informatie uit de radarstromen en vertaalt die naar een nieuw 2D-beeldformaat.
Daarbovenop kwam een framework met een nieuwe methode voor pixelruimte-labeling en kwaliteitsbeoordeling van de mmWave-data. Zoals beschreven in de documentatie op researchgate.net, gebruikt het systeem een cross-modaal model dat ruimtelijke kenmerken versterkt. Het resultaat: mmHand lokaliseert de hand zeer accuraat binnen het U-V pixel-coördinatensysteem van de radar.
Getest en peer-reviewed
De methode is uitgebreid gevalideerd. Twaalf proefpersonen werden getest in drie verschillende scenario's, en de resultaten zijn geanalyseerd via vier verschillende metrieken. Die tests bevestigen dat de aanpak succesvol is voor nauwkeurige handlokalisatie. De volledige technische details staan in het onderzoekspaper.
Het werk is peer-reviewed en officieel gepubliceerd in ieee.org (volume 12, nummer 12), met publicatiedatum 15 juni 2025.
Achter het project zit een team van experts: Xiaoyu Zhang, Zhengxiong Li, Chenhan Xu, Luchuan Song, Huining Li, Hongfei Xue, Yingxiao Wu en Wenyao Xu. Hun onderzoek situeert zich op het snijvlak van patroonherkenning en computer vision, met als doel de kloof te dichten tussen complexe ruwe radarsignalen en nauwkeurige ruimtelijke weergaven.
🧠 Even simpel uitgelegd
mmWave-radar is een soort onzichtbare flitslichtinstallatie: het apparaat stuurt elektromagnetische golven uit (millimetergolven) die tegen je hand botsen en terugkaatsen. Uit die teruggekaatste golven berekent de radar waar de hand zich bevindt — net zoals een vleermuis met geluid 'ziet'. Het grote verschil met een camera: een radar maakt geen beelden van je gezicht, huis of lichaam. Het registreert alleen waar iets is, niet hoe het eruitziet. Daarom is deze technologie privacyvriendelijker dan camera's, terwijl ze toch even precies kan bepalen waar je hand zich bevindt — tot op pixelniveau.