• AI FTW
  • Posts
  • Figure AI for alle penga - Nvidia annonserer GROOT

Figure AI for alle penga - Nvidia annonserer GROOT

Roboter er sååå 2024

Figure01

Dette skjedde for litt siden og er ikke egentlig en “nyhet” i denne sinnsyke AI-hype-cycle-saken. Men jeg hadde visst ikke skrevet noe om det. Så da passet det fint nå, fordi Nvidia også har kommet ut med litt nye greier.

FIGURE 01

Om du ikke har sette denne videoen allerede, så har du en skikkelig hjernejogger foran deg. Det er et par punkter du må merke deg når du ser denne videoen.

  1. Det er “end-to-end neural net” - Det betyr at det er ikke noe menneske som står mellom maskinen og han fyren i videoen. Alt skjer internt i roboten. Det vil f.eks. si at mennesket som snakker ikke vet nøyaktig hva roboten kommer til å si. Litt som å spørre ChatGPT (hvis du er en savvy bruker av ChatGPT vil du se at displayet i hodet til roboten er det samme UI’et som ChatGPT sin iOS app i prate-modus)

  2. Dette går i 1.0x - Det vil si at det ikke speed’et opp for å se kult ut.

  3. Legg merke til at roboten både prater og handler samtidig.

  4. Den reflekterer over noe som har skjedd

  5. Den har en vennlig ‘talefeil’ på et par punkter hvor den liksom ‘stammer litt’

Dette er heeeelt koko.

Nvidia Groot

Nvidia har lansert en ny “general-purpose foundation model” for å lære opp roboter 🤯

disclaimer Jeg er ikke kvalifisert til å uttale meg om store deler av dette pensumet, men siden jeg har en datter i gang med ingeniørstudier så kanskje noe har gått inn via osmose 😉 

Men super-high level:

  • Nvidia tilbyr software og hardware hvor du kan lage en virtuell lekeverden (Omniverse) hvor roboter kan fomle rundt. Isaac Sim og Isaac Lab lar forskere og ingeniører simulere roboter i en 3D-verden.

  • GROOT er på en måte GPT-4 for læring av roboter. Du kan gi den masse ‘treningsdata’ i form av tekst, video eller ved demonstrasjon (fjernkontroll f.eks) og så gjør Groot det om til bevegelser for roboten. (Roughly speaking.. tror jeg)

  • Se for deg Matrix når Neo lærer seg Kung-Fu. Litt sånn er det. I en virtuel verden kan du gi en robot 10 år med kontinuerlig trening på noen timer.

Sluttresultatet her er at det åpner seg en ny verden for unge (og gamle) ingeniører og forskere som vil lage roboter som kan gjøre alt mulig.

Her er noen screenshots som forhåpentligvis viser konseptet bedre:

/

Slik visualiserer Nvidia prosessen med Groot

Og som alltid, tenk på hvor vi var for to år siden. Tenk at tiden det tar å utvikle ny teknologi akselererer. Så om to år fra nå burde vi kanskje har gjort tre ganger så stort fremskritt som vi gjorde fra 2022 til i dag. Det betyr at det labber en en liten robot rundt hjemme hos deg som du kan prate med akkurat som du ville pratet med en venn eller ansatt (eller en partner). Just sayin’