Tekst til video, bilde til video, video til video, video in-painting

Vi begynner å venne oss til tanken på at vi kan bruke generativ AI til å lage bilder. Vi har også sett noen ganske gode, men dog litt begrensede forsøk på video. Nå har Google flyttet listen ganske langt med sin Lumiere

Lumiere er en ny teknologi som gjør det mulig å skape realistiske og varierte videoer direkte fra tekstbeskrivelser. Denne modellen skiller seg ut ved å håndtere hele videoens varighet på en gang, noe som sikrer bedre sammenheng og kvalitet i bevegelsene. Lumiere er ikke bare nyttig for å lage videoer fra tekst, men også for en rekke videoredigeringsoppgaver. Du kan lese om det

her

DreaMoving er en ny teknologi som gjør det mulig å lage tilpassede videoer av høy kvalitet med menneskelige figurer. Denne modellen kan generere en video der en spesifikk person utfører dans eller bevegelser, basert på forhåndsdefinerte bevegelsessekvenser. For å oppnå dette, bruker DreaMoving en spesiell kontrollmekanisme for bevegelse og en identitetsbevarer for å sikre at personens utseende forblir konsekvent gjennom videoen. Modellen er brukervennlig og kan tilpasses ulike stilistiske modeller for å skape varierte resultater

Sjekk siden deres for å se videoer. Det er ganske drøyt.

Vi er kanskje ikke helt der at Netflix kan lage filmer on-the-fly, men som alltid er det verdt å se hvor sykt langt vi har kommet de siste årene, og ikke minst hvordan utviklingen ser ut til å akselerere.. Jeg lurer på hvor vi er om et år fra nå.