Le VJing, c'est la partie de la soirée que personne ne nomme mais que tout le monde ressent : les visuels derrière la cabine qui tiennent ou s'effondrent selon que le logiciel suit ou non en temps réel. Resolume vient de combler un vrai manque sur ce terrain. La version 7.28 d'Avenue et Arena, sortie le 22 septembre, intègre la vision par ordinateur comme brique native, et surtout, elle ne quitte jamais la machine.
Qu'est-ce qui change concrètement ?
La mise à jour introduit deux nouveaux nœuds bas niveau dans Wire, l'environnement de patch modulaire de Resolume : Human Segmentation et Depth Estimation. Human Segmentation isole une personne de son arrière-plan image par image ; Depth Estimation construit une carte de profondeur à partir d'un simple flux caméra 2D, sans capteur de profondeur. Sur cette base, Arena et Avenue livrent six effets prêts à l'emploi : Background Removal, Depth Blur, Depth Field, Depth Displace, Depth Pixelation et Depth Shift, plus un nouveau mode de fusion Depth qui compose les calques selon la distance apparente plutôt que par simple alpha. Comme chaque effet est lui-même un patch Wire, un VJ peut l'ouvrir, le recâbler ou construire un effet totalement personnalisé à partir des deux mêmes nœuds, selon le récapitulatif de CDM.
Depth Estimation embarque un filtrage et un lissage temporels pensés pour réduire le scintillement entre images, le défaut qui a longtemps rendu la cartographie de profondeur en temps réel peu fiable en live. La mise à jour ajoute aussi Group FFT, qui permet aux effets audio-réactifs de puiser des données de fréquence sur plusieurs calques à la fois, ainsi qu'une réinitialisation par clic droit dans l'éditeur de nœuds Wire.
Pourquoi le traitement local compte-t-il plus que les effets eux-mêmes ?
Ces effets auraient très bien pu être délégués à un service de vision par ordinateur dans le cloud, beaucoup d'outils vidéo le font déjà. Pour un VJ qui mixe en direct dans un club ou sur une scène de festival, c'est hors de question : le moindre accroc réseau en plein set, c'est une image figée ou un flux coupé devant des milliers de personnes, et envoyer un flux caméra à l'extérieur pose aussi ses propres questions de confidentialité quand ce flux montre la foule. L'approche de Resolume garde la segmentation et l'estimation de profondeur entièrement sur le matériel du VJ, sans aller-retour et sans donnée qui sort de la machine. C'est bien là l'info : pas que le détourage existe, mais qu'il existe sans la latence ni la dépendance qu'impose le cloud.
Faire tourner les modèles en local, ça veut dire que les visuels restent vivants même si le réseau du club, lui, ne l'est plus.
À qui ça change vraiment la vie ?
Tout VJ ou artiste visuel qui utilise Arena ou Avenue en club, en festival ou en installation a désormais du détourage humain et des effets de profondeur en temps réel, sans acheter de caméra de profondeur ni coder sa propre vision par ordinateur. Ça referme aussi l'écart entre Resolume et la vague d'outils visuels dopés à l'IA qui misaient sur l'inférence cloud, tout en gardant les garanties de fiabilité qu'exige la scène live.
Pourquoi c'est important
Les visuels font de plus en plus partie de l'argument de vente d'un événement house ou techno, de la scène principale d'un festival au warehouse avec mapping vidéo, et le logiciel qui pilote ce spectacle est devenu presque aussi déterminant que celui du DJ à côté. La vision par ordinateur en local supprime l'une des dernières excuses valables pour un plantage visuel en plein set.
Ce qu'on en pense
C'est le genre de mise à jour qui ne fera jamais le buzz mais qui change vraiment un flux de travail : un VJ peut désormais extraire une silhouette de son fond ou simuler une fausse profondeur volumétrique à partir d'une simple webcam, en direct, sans aucune dépendance internet. C'est plus important pour le dancefloor qu'un plugin de synthé de plus, parce que quand les visuels plantent, toute la salle le ressent.
