VJing é a parte da noite de clube que ninguém nomeia mas que todo mundo sente: os visuais atrás da cabine que se sustentam ou desmoronam conforme o software acompanha ou não o tempo real. A Resolume acaba de fechar uma lacuna real nesse terreno. A versão 7.28 do Avenue e do Arena, lançada em 22 de setembro, traz a visão computacional como bloco nativo e, mais importante, ela nunca sai da máquina.

O que realmente muda por baixo do capô?

A atualização introduz dois novos nós de baixo nível no Wire, o ambiente de patch modular da Resolume: Human Segmentation e Depth Estimation. O Human Segmentation isola uma pessoa do fundo, quadro a quadro; o Depth Estimation constrói um mapa de profundidade a partir de uma simples imagem de câmera 2D, sem precisar de sensor de profundidade. Sobre essa base, Arena e Avenue trazem seis efeitos prontos para uso: Background Removal, Depth Blur, Depth Field, Depth Displace, Depth Pixelation e Depth Shift, além de um novo modo de fusão Depth que compõe as camadas pela distância aparente, e não só pelo alfa. Como cada efeito é, ele mesmo, um patch do Wire, um VJ pode abri-lo, recableá-lo ou construir um efeito totalmente próprio a partir dos mesmos dois nós, segundo o resumo da CDM sobre o lançamento.

O Depth Estimation traz filtragem e suavização temporais pensadas para reduzir o cintilar entre quadros, o defeito que por muito tempo tornou o mapeamento de profundidade em tempo real pouco confiável ao vivo. A atualização também adiciona o Group FFT, que permite aos efeitos áudio-reativos puxar dados de frequência de várias camadas ao mesmo tempo, além de um reset com clique direito dentro do editor de nós do Wire.

Por que o processamento local importa mais do que os efeitos em si?

Qualquer um desses efeitos poderia, em teoria, ser delegado a um serviço de visão computacional na nuvem, e muitas ferramentas de vídeo já fazem isso. Para um VJ que mixa ao vivo em um clube ou no palco de um festival, isso não é opção: um problema de rede no meio de um set significa um quadro congelado ou um sinal cortado na frente de milhares de pessoas, e enviar a imagem da câmera para fora do local também levanta questões de privacidade quando essa imagem mostra o público. A abordagem da Resolume mantém a segmentação e a estimativa de profundidade inteiramente no hardware do VJ, sem ida e volta e sem que nenhum dado saia da máquina. Essa é a verdadeira notícia: não que a remoção de fundo exista, mas que ela exista sem a latência e a dependência que a nuvem impõe.

Rodar os modelos localmente significa que os visuais continuam vivos mesmo que a internet do local não esteja.

Para quem isso realmente muda o jogo?

Qualquer VJ ou artista visual que use Arena ou Avenue em clubes, festivais ou instalações agora tem segmentação humana e efeitos de profundidade em tempo real sem precisar comprar uma câmera de profundidade nem programar sua própria visão computacional. Isso também encurta a distância entre a Resolume e a onda de ferramentas visuais turbinadas por IA que dependiam de inferência em nuvem, mantendo as garantias de confiabilidade que a produção ao vivo exige.

Por que isso importa

Os visuais são cada vez mais parte de como um evento house ou techno se vende, do palco principal de um festival ao warehouse com mapeamento de vídeo, e o software que comanda esse espetáculo se tornou quase tão decisivo quanto o do DJ ao lado. A visão computacional local elimina uma das últimas desculpas válidas para um colapso visual no meio de um set.

O que achamos

Esse é o tipo de atualização que nunca vira notícia viral mas que muda de verdade um fluxo de trabalho: um VJ agora pode recortar uma pessoa do fundo ou simular uma falsa profundidade volumétrica a partir de uma simples webcam, ao vivo, sem nenhuma dependência de internet. Isso pesa mais para a pista de dança do que mais um plugin de sintetizador, porque quando os visuais travam, a sala inteira sente.