Compagnons et avatars en direct

Six personnages, deux façons de les animer

CYPAD embarque six personnages animés : Miso (chat), Nubo (robot), Pipa (pomme), Volt (dragon) et les avatars anime Ren et Aoi. Ils se choisissent dans le mode Stream et vivent dans leur propre fenêtre, ajoutée à OBS via une capture de fenêtre.

En mode Voix seule, la bouche bouge avec le volume du micro, avec filtre de bruit et lissage, et la caméra ne s’ouvre jamais. Le mode Caméra utilise le suivi facial local : orientation de la tête, regard, clignements, sourcils, bouche, sourire et lèvres pincées.

• Miso, Nubo, Pipa et Volt, modèles articulés
• Ren et Aoi, avatars anime aux proportions stylisées
• La fenêtre ne montre que le personnage, jamais le flux caméra

Le vrai flux OBS

La fenêtre s’appelle CYPAD Mascot et se capture comme une source de fenêtre, avec correspondance exacte du titre et sans capturer le curseur. Pour Twitch ou Kick, vous pouvez diffuser cette scène directement.

Le flux de capture de fenêtre est documenté avec CYPAD 1.1.30 et les avatars anime sont arrivés en 1.1.33 ; la version actuelle est la 1.1.36. CYPAD n’installe pas de caméra virtuelle propre : si une autre application demande une webcam, c’est la caméra virtuelle d’OBS qui fournit cette sortie, une fonction d’OBS.

Fond et présence à l’écran

Dans Stream → Apparence, vous pouvez choisir Fond noir, une fenêtre opaque qui fixe la position et retire l’étiquette d’édition, ou Caméra pour le suivi facial. L’échelle et le cadrage se règlent ensuite dans OBS, comme pour toute autre source.

• Fond noir pour une fenêtre propre et stable
• Transparence ou chroma selon la méthode de capture
• Le réglage système de mouvement réduit est respecté

La caméra reste sur votre PC

Le modèle MediaPipe Face Landmarker, son fichier de modèle et son WebAssembly sont inclus dans l’installateur. L’inférence tourne en local, dans un worker séparé. Aucun audio, aucune vidéo et aucune géométrie faciale ne sont enregistrés ni envoyés, et la caméra n’est autorisée que lorsque le compagnon est visible et réglé en mode caméra.

Si le visage disparaît plus de 350 ms, le personnage revient en douceur vers une pose neutre et la bouche suit le volume de la voix. Le mode voix n’ouvre jamais la caméra, et les installations anciennes avec démarrage automatique migrent vers ce mode.

Performance et limites assumées

Un seul frame en vol, caméra jusqu’à 30 fps et rendu via requestAnimationFrame, avec amortissement indépendant de la cadence de capture. La qualité dépend de l’éclairage, du cadrage et du matériel.

Pas de suivi des mains ni du corps entier, pas d’import de modèles VRM. Aucune promesse non plus de capturer chaque muscle ou les visèmes : le mode voix utilise l’amplitude et le mode caméra adapte les expressions compatibles au rig stylisé.

Vos propres images et PNG personnalisés

Si vous préférez vos propres dessins, les PNG personnalisés restent compatibles en mode voix avec deux états, sans suivi facial. En mode caméra, le compagnon articulé choisi est toujours utilisé.

Les compagnons et les avatars se configurent dans le mode Stream, qui fait partie de Pro avec OBS, les sons, les routines, les raccourcis globaux et le contrôle mobile.