Étape 5: Combinant la main suivi de réseau neuronal basé à reconnaissance de la main
Il s’agit de la dernière étape.
Pour reconnaître la pose de la main, le système doit détecter la position de ma main.
Par conséquent, j’ai implémenté la main système de suivi qui peut effectuer les opérations suivantes :
- Soustraire l’image d’arrière-plan
- Détecter la position 3D à l’aide de la bibliothèque de motion tracking, NITE (cette bibliothèque ne peut pas détecter une pose de main)
- Extraire chaque région de couleur par l’intermédiaire de traitement d’image
- Utilisez le capteur Xtion PRO LIVE (voir photo)
En combinant le système de suivi de l’ensemble du réseau neuronal à l’écoute,
Manipit, un système de suivi de mouvement de main est maintenant terminée.
Comment ça marche ? Voir la vidéo.
CG les mains à l’écran sont synchronisés avec mes mains réels!
Même si je suis saisissant, Manipit peut reconnaître ma pose de main.
Je pense que ce point est la grande différence de produits existants et de la recherche.