Voici deux vidéos de
présentation du mini drone réalisé à
l'ESIEA dans le cadre du challenge
mini drones DGA , il s'agit du « faucon
noir ». Pour le moment le drone n'est pas autonome, la
vidéo illustre « juste » les capacités
de stabilisation ainsi que la transmission de vidéo en
directe. La première est une démonstration en vol
(commentaire par Laurent enseignant et chef d'orchestre du projet).
Voici une vidéo du projet de 4A (PAIR) un PC commandé du bout des doigts ... (grâce à une wiimote et un logiciel d'analyse que nous avons crée).
un pc au bout des doigts from Hubert Wassner on Vimeo.
Le projet « My
VJ is a dancer » pour lequel nous avons fournis notre
système de reconnaissance de gestes a été
présent au « Flash
Festival ». Voici deux vidéos où deux
personnes font « en live » un mix d'extraits et
de collages de vidéos simplement en « dansant ».
Il s'agit en fait d'une douzaine de « gestes »
ou plutôt de mouvements de danse simplifiés qui
déclenchent les séquences d'animation.
Voici un
projet en cours de développement par des étudiants de
l'école des Gobelins
d'Annecy (école d'art et de conception/réalisation
multimédia). Il s'agit d'un jeux vidéo de VJing.
Le VJ est à la vidéo ce que le DJ est au son. Le titre du
jeux est « my VJ is a dancer », tout simplement
parce que les commandes du jeux se font via des mouvements (captés par une wiimote), et donc
mixer des vidéos se fait en dansant. C'est donc tout
naturellement qu'ils sont venus nous voir pour la partie
reconnaissance de gestes. Nous sommes donc en cours d'adaptation de
notre
technologie de reconnaissance de geste (qui fonctionne sous
linux) pour la faire fonctionner sous windows (et même plus
particulièrement en « Flash »). Nous
espérons être prêt pour le « Flash
Festival » où les étudiants auront un
stand ...
NEWS ... Information datant d'hier soir (via SMS) : ça y est ça marche pleinement avec 11 gestes différents !! (plus que je n'en ai jamais vu fonctionner dans un jeux Wii officiel ). Heureusement car le "Flash Festival" commence Demain...
Vous avez déjà pu voir les progrès de l'équipe travaillant sur l'eye-tracking... (cliquez ici pour voir tous les billets sur l'eye-tracking)
Là c'est clairement le cran au-dessus, j'appellerai cela de l'"eye command"...
Regardez bien la vidéo et suivez le regard de Golden dans le médaillon en haut au centre de l'image.
Essayez de suivre son regard ainsi que la petite fenêtre noire avec un point blanc à l'intérieur... C'est en fait lui qui le déplace simplement avec le regard... Il est à noter qu'il y a une inversion de
type mirroir entre la vidéo dans le médaillon et le déplacement du pointeur (quand Golden regarde
à droite, le point va à gauche et inversement, c'est du à la manière de prendre la vidéo, c'est ici un détail...).
Ce n'est pas encore super précis, c'est un peu saccadé, mais je pense qu'on
pourra grandement arranger cela en utilisant un réseau de neurones à la place d'une "simple interpolation linéaire".
Très sincèrement c'est du très beau travail, je suis impatient qu'on puisse intégré un réseau de neurone, et
commencer à exploiter le logiciel dans de l'analyse de vidéo (analyse de regard sur une pub ou sur une page web),
clairement là il faut absolument continuer ce projet en projet "XL" de 5A...
Voici la derniere vidéo de démo du projet d'eye tracking, il y a de beaux progrès (voir ici la vidéo précédente):
la détectection sur une source peu lumineuse
Le tracking sur des yeux brun. C'est beaucoup plus dur car il y a du brun partout dans l'image alors que la démo précédente
etait faite sur des yeux bleu, plus facile à isoler.
cette version inclu aussi du "head tracking" c'est à dire une detection aussi de mouvements de la tête ce qui permet de mieux suivre les yeux car sachant où est la tête la recherche des yeux peut etre plus facilement contrainte (et donc faire moins d'erreur).
que l'ESIEA
existe et forme des ingénieurs ... Pour ma part ça fait
9 ans que j'y gravite : 5 ans en tant qu'étudiant , quelques
années dans divers labos, et maintenant 4 ans que j'y enseigne
... Si vous lisez ce blog il y a pas mal de chances pour que vous
aussi ayez un certain nombre d'années « d'expérience
ESIEA ». Ce vendredi (16 mai) c'est le c'est le gala des 50 ans! Ce sera l'occasion de se retrouver et évoquer chacun nos souvenirs ensemble autour d'un verre, et de refaire le monde en imaginant ce que pourrait être son avenir et le notre...
On pourrait appeler ce projet "Wii-help", l'objectif étant d'associer la technologie des réseaux neuronaux aux capteurs de la wiimote. Ainsi on peut faire un système de reconnaissance de gestes universel. Universel dans le sens : n'importe quel membre, n'importe quel geste. L'application visée étant de fournir un système de commande hyper adaptable, robuste et très peu couteux, dans le domaine du handicap.
Grâce au nombreux capteurs de la wiimote on peut enregistrer n'importe quel type de mouvements. Sur cette vidéo c'est le capteur infra-rouge qui est utilisée pour détecter le mouvement d'une pastille réflechissante collé sur le doigt de l'utilisateur (la source infra-rouge étant autour de la wiimote).
Grâce au réseau neuronal, le système est capable de reconnaitre n'importe quel geste : c'est l'utilisateur qui les définit et c'est l'ordinateur qui va apprendre à les reconnaître.
Il ne s'agit encore là que d'un petit test avec simplement 2 gestes : c'est la première fois que nous pouvons faire essayer notre prototype dans un cas "réel", et les résultats sont très encourageants.
Sur la premiere partie de la vidéo, l'utilisateur déclare les gestes qu'il veux faire reconnaitre et leur donne un nom (ici "oui","non")
le programme demande alors de faire ces gestes pour que le reseau de neuronne puisse les apprendre. Dans la deuxième partie de la vidéo vous voyez le système en cours d'utilisation : l'utilisateur fait son geste et l'ordinateur le reconnait.
Plein d'informations importantes au sujet de la fin des modules d'info' (INF2032), et de TP (LAB2414)... La dernière interro' de contrôle continu, votre appréciation du module, etc ...