SmartFace
[Brevet US9734809]
N'avez-vous jamais rêvé d'une troisième main pour contrôler vos effets ou les potentiomètres de vos synthétiseurs tout en jouant de votre instrument à deux mains ? Avec le logiciel SmartFace et votre webcam ou la caméra SmartCam, transformez la partie la plus expressive et émotionnelle de votre corps — votre visage — en un véritable contrôleur, devenant ainsi cette "troisième main". Ne laissez plus une simple sinusoïde moduler vos tremolos, phasers, flangers ou filtres, et redécouvrez le plaisir d’une expressivité totale en assignant des paramètres à votre bouche, votre sourire, vos yeux ou vos sourcils. Contrôlez plusieurs paramètres à la fois ou modulez vos effets avec la bouche, bien plus rapidement ou subtilement qu'avec le pied, tout en gardant vos mains sur votre instrument. Créez une connexion émotionnelle unique avec votre public et offrez-lui une expérience inédite en associant l'expression de votre visage à votre son. Enfin, soyez rassuré, le système est suffisamment précis pour éviter les grimaces et ne s'active que lorsque vous le décidez.
SmartCam
La SmartCam est la caméra idéale pour le logiciel SmartFace, conçue pour offrir une latence minimale, une grande robustesse et une précision optimale. Capturant plus de 500 images par seconde, elle garantit une latence inférieure à 5 ms, seuil en dessous duquel la latence devient imperceptible pour les musiciens professionnels. Grâce à son enregistrement dans le proche infrarouge, elle assure une reconnaissance précise des expressions faciales et permet une utilisation fiable du logiciel SmartFace, même en concert, quelles que soient les conditions d’éclairage. Un bras articulé discret, muni d'une pince avec des mâchoires en véritable caoutchouc, permet de positionner et fixer solidement la caméra sur une guitare, une basse ou un support de synthétiseur, sans risque d’endommager l’instrument.
SmartBrain
Le SmartBrain est le cerveau des produits Smart Audio Tools. C'est un module électronique au format pédale qui s'intègre parfaitement sur votre pedalboard ou votre stand de synthé. Il sert de plateforme pour les logiciels d'intelligence artificielle de Smart Audio Tools dédiés au live (SmartFace, BeatSync, SmartVinyl et Cloning Machine) et permet également d'utiliser vos plugins préférés en direct !
Il comprend :
-
un CPU et GPU Nvidia,
-
un hôte VST pour vos plugins.
-
un écran tactile de 8,9 pouces,
-
un mini pédalier 4 switches amovible, connecté en Bluetooth au SmartBrain,
-
des emplacements internes libres pour l'ajout de cartes éléctroniques, lui permetant d'être upgradé en SmartWah
-
des entrées/sorties audio faible latence jusqu'a 96 kHz :
2 audio In
2 audio Out -
une connectique complète pour contrôler vos effets externes : 1 entrée Expression/CV
5 sorties Expression/CV
3 sorties switch
1 entrée MIDI
3 sorties MIDI Out/Thru
4 ports USB (pour ajouter une carte son externe ou autre) -
un système de refroidissmeent complètement silencieux
SmartWah
[Brevet US9734809]
La SmartWah est la solution de contrôle des effets par le visage tout-en-un destinée aux guitaristes, bassistes et claviéristes. C'est un pack comprenant la SmartCam et une version spécifique du SmartBrain intégrant le logiciel SmartFace et une Wahwah analogique type Cry Baby, ainsi que des filtres passe-bas analogiques inspirés des mythiques filtres Moog et Oberheim (SEM). Elle permet également de contrôler tous vos effets externes compatibles grace à ses sorties (MIDI, Exp, CV, etc.) et une interface tactile intuitive.
Modulez la wahwah avec votre bouche, bien plus rapidement et subtilement qu’avec le pied, pour des effets saisissants. Créez des sons de synthé organiques avec un filtre passe-bas, où la fréquence de coupure est contrôlée par l'ouverture de la bouche et la résonance par le sourire, après une distorsion gérée par le froncement des sourcils. Ne laissez plus une simple sinusoïde moduler vos trémolos, phasers, flangers ou filtres : redécouvrez le plaisir d’une expressivité totale en assignant des paramètres à votre bouche, votre sourire, vos yeux ou vos sourcils, tout en conservant le contrôle complet de votre instrument à deux mains.
SmartFace Editor
SmartFace Editor est notre logiciel de suivi des expressions du visage à partir de vidéos, qui permet de transformer des vidéos d'acteurs en courbes d'expression faciale éditables pour animer des personnages en 2D ou 3D. Ces courbes d'expression sont ensuite exportables dans différents formats pour l'intégration dans votre logiciel d'animation.
Ce logiciel a servi à créer une base de données de haute qualité, spécialisée pour la contre-plongée et les images en proche infrarouge, ainsi qu'à l’entraînement et l'évaluation de modèles optimisés pour l'algorithme d'intelligence artificielle en temps réel de SmartFace, capable d'atteindre 500 images par seconde.
SmartFramework
SmartFramework est une bibliothèque basée sur Python et Qt, qui permet de créer rapidement des applications Python temps-réel, utilisant de l'IA et manipulant de l’audio, de la vidéo, et divers protocoles tels que MIDI, DMX et OSC. Elle permet de programmer de manière graphique des applications complètes, en glissant des briques sur une page blanche et en les connectant, à la manière de Max/MSP, LabVIEW ou d’autres environnements de programmation graphique. La différence réside dans le fait que ces assemblages sont compilés en code Python/Qt indépendant de l’outil de programmation graphique, comme s’ils avaient été écrits manuellement. Ces objets compilés peuvent ensuite être réutilisés directement depuis du code textuel ou via l’outil de programmation graphique en tant que nouvelles briques composites. Cette boîte à outils a servi à la création des logiciels SmartFace, SmartFace Editor, BeatSync, SmartVinyl, Cloning Machine et pour nos collaborations telles que Les Télépathes, Ondoscope et Zoryas de Claire Williams.
SerializeJSON
SerializeJSON est une bibliothèque Python pour la sérialisation et la désérialisation rapides, sécurisées et lisibles par l'homme des objets python en JSON, conçue comme une alternative directe à pickle. Serializejson est idéal pour la gestion de données à long terme, garantissant que les données restent accessibles et modifiables à travers les futures mises à jour et évolutions des logiciels.
Principaux avantages :
-
Prend en charge tous des objets compatibles avec pickle.
-
Sérialise efficacement les objects binaires en utilisant base64 et la compression Zstandard.
-
Fournit un JSON lisible par l'homme, éditable et versionnable.
-
Charge les données provenant de sources non fiables de manière sécurisée.
-
Format universel de fichier, éliminant le besoin de formats de fichiers rigides.