À quoi sert SmartFace ?
SmartFace vous permet de contrôler vos sons et vos effets avec les expressions du visage :
-
En temps réel
-
Sans restrictions du type d'effets
-
Avec un grand nombre de contrôles simultanés possibles
-
De façon précise, rapide, naturelle et expressive.
-
En vous permettant de bouger sur scène
-
En vous laissant les mains libres pour jouer de votre instrument
-
En vous laissant les pieds libres pour vous déplacer
Comment ça marche ?
La SmartCam (ou une autre Webcam) filme le visage du musicien. Le logiciel d'intelligence artificielle SmartFace analyse alors en temps réel les images fournies et transforme les expressions du visage en contrôleurs (messages MIDI). Ces contrôleurs permettent alors de contrôler les modules de sons et d'effets du musicien. (Multi effets, synthétiseurs, logiciels, etc).
Est-ce précis, rapide et robuste ?
Toute notre attention a été portée pour vous offrir la plus grande précision, rapidité et robustesse possible. L'idée n'était pas que notre système ne soit qu'un simple gadget, qu'un simple "proof of concept". Le logiciel SmartFace couplé à la SmartCam répondra aux attentes des musiciens les plus exigeants.
Que puis-je piloter avec le logiciel ?
Tout appareil ou logiciel compatible avec la norme MIDI, avec une entre CV (Control Voltage) ou Exp (Expression) , typiquement des synthétiseurs, des multi-effets, des pédales d'effets, des logiciels.
Est-ce paramétrable ?
La transformation des expressions en contrôleurs est complètement paramétrable par le musicien.
-
Il est possible d'assigner les mouvements d'une partie du visage à un effet de son choix
-
Il est possible d'assigner différentes expressions générales du visage (préalablement enregistrées sous forme de "photos") à différents sons et d'effectuer un morphing entre ses différents sons en passant d'une expression à une autre.
Le logiciel SmartFace marchera-t-il avec ma webcam ?
Oui si celle-ci a des drivers DirectShow (presque toujours le cas).
Pourquoi la SmartCam est-elle mieux que les autres webcams ?
La caméra SmartCam est beaucoup plus rapide, offre une latence beaucoup plus faible et une reconnaissance plus robuste que n'importe quelle webcam USB.
-
Elle tourne à 500 frames par seconde, soit 20x plus que la plupart des webcams.
Ceci permet non seulement de diminuer la latence, mais aussi d'avoir un contrôle beaucoup plus fluide. -
Elle n'utilise pas de drivers Direct Show, mais d'autres types de drivers bien plus rapides et réactifs.
Ceci permet encore de réduire la latence. -
Elle filme en Infrarouges. Ceci permet une reconnaissance robuste même dans des environnements peu ou pas éclairés et qui n'est pas perturbée par les éclairages de scène.
-
Elle n'utilise pas de compression ou d’interpolations, utilisées dans les caméras couleurs.
-
La résolution réelle est nettement meilleure et permet un contrôle beaucoup plus fin et précis des effets.
-
Elle se fixe avec sa pince articulée à un instrument, synthé, ordinateur, etc...
Qu'apporte SmartFace par rapport à un contrôleur manuel ?
-
Il permet de contrôler simultanément et indépendamment plus de trois paramètres (déplacement vertical des sourcils, direction verticale des yeux, direction horizontale des yeux, fermeture des paupières, mouvement des narines, ouverture bouche verticale, ouverture bouche horizontale, rotation de la tête selon les 3 axes (x,y,z), position de la tête selon les trois axes (x,y,z),etc...).
-
Il permet de contrôler des sons/effets sans avoir à utiliser pour cela les mains. Il est donc utilisable par une plus grande proportion de musiciens, ayant déjà les mains accaparées par leur instrument.
Qu'apporte SmartFace par rapport à une pédale d'expression ?
-
Il permet de contrôler simultanément et indépendamment beaucoup plus qu'un seul paramètre.
-
Il permet de se déplacer sur scène
-
Il permet de contrôler les paramètres de façon beaucoup plus rapide et précise qu'avec les pieds.
Qu'apporte SmartFace par rapport à une talkbox ou un vocodeur ?
-
Il utilise tout le visage (et non pas uniquement la bouche)
-
Il permet de contrôler beaucoup plus de types d’effets, on n’est pas cantonné au seul effet de filtrage par des voyelles.
-
Il n'oblige pas le musicien à émettre un son qui risque de polluer ou couvrir le son de l'instrument
-
Il est insensible au bruit ambiant ou larsens
-
Il évite de mettre un tuyau ou un micro devant la bouche