L’attrait est évident : enregistrez où que vous soyez, et laissez le logiciel s’occuper de la pièce derrière vous. Pas de tissu, pas de pieds d’éclairage, pas de plis à repasser, pas de fond vert à éclairer uniformément pour qu’il se détoure sans ombres. À la place, un modèle examine chaque image et décide, pixel par pixel, quelles parties sont vous et quelles parties sont la pièce. Cette décision s’appelle un matte, et tout le reste — le bureau flouté, la couleur de marque bien propre, la photo d’un studio où vous n’avez jamais mis les pieds — n’est que du compositing bâti dessus. La façon honnête de penser le remplacement d’arrière-plan sans fond vert est celle-ci : le matte est une supposition. Une supposition rapide, bien entraînée, remarquablement bonne, mais une supposition. Un chroma key, lui, ne suppose rien : il retire une couleur que vous avez physiquement accrochée derrière vous. La segmentation infère une personne à partir de ce à quoi une personne ressemble d’habitude. Là où l’inférence est sûre, le résultat est indiscernable d’un plan détouré au fond vert. Là où elle ne l’est pas, vous obtenez les artefacts que tout le monde a vus et que personne n’aime : des cheveux qui disparaissent, des bords qui scintillent, une main qui perd brièvement ses doigts.
Il est utile de savoir où la supposition est forte, car le cas favorable couvre l’essentiel de la vraie vie. Une personne assise ou debout, raisonnablement immobile, cadrée à partir de la poitrine, éclairée un peu plus que la pièce, devant un arrière-plan qui reste à sa place — c’est le cas sur lequel ces modèles sont entraînés, et ils le réussissent. Les épaules et la ligne de la mâchoire tiennent proprement pendant des minutes entières. Les ennuis commencent exactement là où une silhouette humaine devient ambiguë. Les cheveux fins devant une pièce chargée sont l’échec classique, parce que les mèches isolées sont plus fines que ce que le modèle sait résoudre ; les boucles s’effondrent en un halo doux et les cheveux rebelles disparaissent tout simplement. Les lunettes peuvent le tromper deux fois : la monture est lue comme de la personne, et le morceau de cuisine visible à travers chaque verre est lu comme de la personne aussi — un petit rectangle de votre pièce survit donc devant vos yeux. Les mains rapides filent d’une image à l’autre plus vite que le matte ne peut suivre, si bien qu’un geste enthousiaste laisse un bref fantôme derrière lui. Rien de tout cela n’est le défaut d’une application en particulier. C’est la forme actuelle du problème lui-même.
Talk2Camera travaille à l’intérieur de cette forme au lieu de faire semblant qu’elle n’existe pas. L’application vous sépare de la pièce grâce à une segmentation de personne qui s’exécute sur l’appareil — sans fond vert, et sans qu’aucune séquence ne soit envoyée quelque part pour être traitée. Ce que vous faites de cette séparation vous appartient : flouter la pièce en gardant sa lumière, la remplacer par une couleur unie, ou y déposer la photo d’un endroit plus flatteur. Deux des couleurs proposées sont là pour une raison précise et peu glorieuse : le vert broadcast et le bleu broadcast. Si votre vidéo part vers un logiciel de montage qui fait du vrai chroma keying, vous pouvez lui livrer un sujet posé sur une couleur de détourage uniforme et le laisser tirer le matte avec des outils construits exactement pour ce travail. Autrement dit, l’application n’exige pas d’avoir le dernier mot sur votre arrière-plan. Elle se contente très bien d’être la première étape du pipeline de quelqu’un d’autre, et cette modestie vaut plus qu’un filtre supplémentaire.
Ce qui compte le plus, c’est ce qui se passe quand la supposition n’est pas assez bonne. Tout outil qui remplace des arrière-plans finit par rencontrer des images qu’il ne peut pas segmenter proprement : la lumière est trop plate, le mur trop proche de la couleur de votre veste, le mouvement trop rapide. La réponse courante dans l’industrie consiste à livrer le résultat quand même et à vous laisser découvrir les bords qui grouillent après la mise en ligne. Talk2Camera refuse ce réflexe discrètement malhonnête. Si l’appareil ne peut pas produire un matte propre, l’export se termine avec l’arrière-plan d’origine — et l’application vous le dit, clairement. Vous obtenez une vidéo finie et regardable, accompagnée d’un compte rendu simple de ce qui s’est passé, plutôt qu’un fichier silencieusement cassé. La règle paraît petite et ne l’est pas, car elle change ce qu’un export signifie. Vous pouvez faire confiance à un arrière-plan remplacé que vous n’avez pas vérifié image par image : le fait même qu’il ait été livré est le certificat que le matte a tenu.
Alors, quand faut-il encore accrocher le tissu ? Quand le bord est lui-même le produit. Un plan en pied, des cheveux qui bougent dans un courant d’air, des objets translucides, quelqu’un qui lève un verre d’eau — une couleur de détourage physique sous une lumière uniforme battra l’inférence sur ce genre de matière pendant encore un bon moment. Si vous compositez pour la diffusion, ou pour un client qui inspectera les bords en pleine résolution, détourez proprement et ne vous en excusez pas. Et si votre pièce peut offrir un mur nu et une lumière douce, considérez que le modeste flou est souvent plus beau que n’importe quel remplacement, parce qu’il garde la vraie lumière de votre visage cohérente avec la pièce derrière vous. C’est ce décalage — un visage éclairé par un après-midi gris flottant dans un studio virtuel éclatant — qui rend les remplacements subtilement faux même quand le matte est parfait. Pour le travail quotidien qui consiste à parler à une caméra depuis une pièce imparfaite, la segmentation suffit, et l’honnêteté sur le reste est ce qui la rend fiable plutôt que simplement impressionnante.