ReCamMaster: Edició de vídeo amb càmera virtual
ReCamMaster és la nova proposta de Kuaishou Technology per transformar completament la manera com s’editen i es creen vídeos. Aquesta eina innovadora permet generar nous efectes de càmera a partir d’un sol vídeo, sense necessitat de gravar amb múltiples equips ni fer servir programari complex de postproducció.
La base de ReCamMaster és un model de difusió entrenat per comprendre i modificar la trajectòria de càmera en un vídeo, mantenint la coherència visual i la dinàmica original de l’escena. El més sorprenent és que els usuaris poden pujar un vídeo i seleccionar entre 10 trajectòries de càmera predefinides, com panoràmiques, inclinacions, zooms i moviments en arc, per obtenir un nou vídeo amb una perspectiva diferent.
ReCamMaster aconsegueix això mitjançant un mecanisme de condicionament dual que utilitza tant el vídeo original com la trajectòria desitjada, basant-se en un gran conjunt de dades generat a Unreal Engine 5 per simular condicions del món real. Això permet al sistema entendre millor el moviment de càmera i adaptar-se de manera natural a diferents tipus d’escenes.
Un dels grans beneficis és la seva capacitat per estabilitzar vídeos inestables. Utilitzant dades del conjunt DeepStab, ReCamMaster ha demostrat convertir gravacions mogudes en vídeos suaus i estables, sense perdre informació visual rellevant. A més, s’ha provat amb èxit en camps com la conducció autònoma, la visió artificial en robòtica i la creació de datasets complexos per a la intel·ligència artificial.
Per als desenvolupadors i professionals, ReCamMaster també ofereix suport per a comparacions qualitatives i quantitatives, cosa que el converteix en una eina valuosa com a baseline de referència.
Actualment, els usuaris poden provar aquesta tecnologia carregant un vídeo a la plataforma de prova. Després del processament, rebran per correu electrònic l’arxiu mp4 amb el resultat generat. Es recomana revisar també la carpeta de correu brossa si no arriba a la safata principal.
A més, l’equip de desenvolupament està disponible per ajudar amb inferències per lots, ideal per a projectes de recerca o ús professional intensiu. Si t’interessa experimentar amb noves formes d’edició i generació de vídeo, ReCamMaster és una oportunitat única d’innovació visual.
Preguntes i Respostes
Què és ReCamMaster?
És una tecnologia de Kuaishou que permet recrear nous efectes de càmera en un vídeo ja gravat, sense necessitat de tornar a filmar.
Quins tipus de moviments de càmera ofereix?
Ofereix 10 trajectòries bàsiques: panoràmiques, inclinacions, zoom, moviments verticals i en arc, tots amb rotació opcional.
És possible utilitzar ReCamMaster en projectes professionals?
Sí, es pot sol·licitar suport per a ús com a baseline i per a inferències per lots en investigacions o desenvolupaments avançats.
Com es pot provar ReCamMaster?
Carregant un vídeo a l’enllaç de prova proporcionat per Kuaishou, seleccionant una trajectòria de càmera i esperant l’arxiu generat per correu.
En quins camps es pot aplicar aquesta tecnologia?
És útil en edició de vídeo, estabilització, robòtica, conducció autònoma, reconstrucció 4D i generació de dades per a IA.
