Uma sala bagunçada disputa a atenção com você, e costuma vencer: o espectador lê uma estante como lê um texto. O cinema e a fotografia de estúdio resolvem isso com óptica — uma lente grande em abertura ampla derrete o fundo em cor suave, porque só uma fatia estreita da cena está em foco. Um celular não consegue fazer isso de verdade. A lente é minúscula e a profundidade de campo, enorme: a planta, a porta e a roupa estão tão nítidas quanto o seu rosto. Se o fundo vai ficar suave, é o software que precisa suavizá-lo — o que significa descobrir, em cada quadro, quais pixels são você e quais são a sala. Essa decisão é o recurso inteiro, e vale entendê-la antes de confiar nela.
Quem decide é um modelo de segmentação de pessoas que roda no aparelho. Para cada quadro, ele estima, pixel a pixel, a probabilidade de aquele pixel pertencer a uma pessoa; o resultado é um matte — um estêncil com o seu formato. Tudo o que fica atrás do estêncil pode ser desfocado ou trocado; tudo o que fica dentro permanece intacto. Repare no que não é necessário: um fundo verde. O chroma key funciona por cor — pinte a parede de um verde uniforme e tudo o que é verde vira transparente — e por isso exige iluminação, distância e uma parede que você não tem. A segmentação funciona por forma e textura: o modelo aprendeu como pessoas aparecem diante de salas quaisquer. É por isso que funciona num quarto, e é por isso que os erros dele têm a cara que têm.
Os erros são previsíveis, e é justo conhecê-los antes. Cabelo é o caso mais difícil: um fio isolado é mais fino que um pixel, então a borda do matte no cabelo é sempre uma aproximação — boa à primeira vista, visível se você procurar. Pouca luz é o segundo: o ruído do sensor faz as bordas nadarem, e um modelo que não enxerga a fronteira não consegue cortar por ela. Movimento rápido, uma mão perto do rosto, uma segunda pessoa entrando pela metade no quadro — qualquer um deles pode fazer o estêncil tremer por alguns quadros. O que separa as ferramentas é o que acontece então. O Talk2Camera verifica se o aparelho produziu um matte limpo e, quando não consegue, a exportação termina com o fundo original e avisa você — um vídeo simples e honesto, em vez de uma borda cintilante descoberta depois de publicar.
O desfoque não é a única opção atrás do estêncil: você pode substituir o fundo por uma cor ou uma foto. Duas das cores existem para um trabalho específico — o verde e o azul broadcast. Se você pretende terminar o vídeo em outro lugar, exportar-se diante de um verde uniforme entrega ao keyer de um editor de mesa exatamente a parede que o chroma key sempre quis, e as ferramentas de borda dele fazem um trabalho mais fino do que um celular deveria prometer. Seja como for, uma coisa vale do começo ao fim: o efeito é aplicado na exportação e a gravação original nunca é tocada. Experimente o desfoque, troque por uma foto, mude de ideia e exporte uma cópia limpa — o take embaixo continua exatamente como foi gravado, e nenhum experimento custa nada a você.