Igra Minecraft (ona istorija detaljno opisano Denis Koshelev) ne izgleda kao veoma važan alat za podršku naprednim istraživanjima u oblasti AI. Uostalom, da li je važno naučiti mašinu da igra sandbox igru koja je objavljena pre više od 10 godina? Iznenadit ćete se, ali da, a o tome svjedoči i najnovija istraživanja OpenAI laboratorije koja proučava razvoj umjetne inteligencije.
OpenAI uvek fokusiran na dostignuća AI i mašinsko učenje koje može koristiti čovečanstvu. Kompanija je nedavno uspješno obučila bota da igra Minecraft koristeći više od 70 sati igranog materijala (to je preko 2,9 dana, ili skoro 8 godina, ako ništa drugo). Ovo postignuće označava ogroman korak naprijed u naprednom mašinskom učenju pomoću posmatranja i simulacije.
OpenAI bot je odličan primjer kako simulacijsko učenje (poznato i kao „učenje pod nadzorom“) funkcionira. Za razliku od učenja s pojačanjem, gdje se agent za učenje nagrađuje nakon postizanja cilja putem pokušaja i pogrešaka, simulacija trenira neuronske mreže za obavljanje specifičnih zadataka promatrajući kako ih osoba izvodi. U ovom slučaju, OpenAI je koristio postojeće video zapise i tutorijale kako bi omogućio botu da izvrši složene scenarije igre koji bi zahtijevali otprilike 24 odvojenih radnji za normalnog igrača.
Također zanimljivo:
Učenje imitacijom zahtijeva da video podaci budu posebno označeni kako bi pružili kontekst radnje i ishoda, tj. AI mogao razumjeti koja su dugmad pritisnuta i koji su pokreti napravljeni. Ali takav pristup može biti dugotrajan, što rezultira ograničenim dostupnim skupovima podataka.
Umjesto da savijaju svoje mišiće izvođenjem velike vježbe ručnog označavanja podataka, istraživački tim OpenAI koristio je poseban pristup poznat kao Video Pre-Training (VPT) kako bi proširio broj dostupnih videozapisa. U početku su istraživači zabilježili 2 sati igranja s komentarima Minecraft i koristio ga da obuči agenta da poveže određene radnje sa određenim rezultatima na ekranu. Rezultirajući model korišten je za automatsko generiranje oznaka za 70 sati prethodno neoznačenog Minecraft sadržaja dostupnog na mreži. Ovo je botu dalo mnogo veći skup podataka za gledanje i simulaciju.
Također zanimljivo:
Ova studija dokazuje potencijalnu vrijednost dostupnih video spremišta kao što su YouTube, kao obrazovni resurs za AI. Naučnici za mašinsko učenje mogu koristiti pristupačne i pravilno označene video zapise za obuku AI za specifične zadatke, od jednostavne web navigacije do pomoći korisnicima s fizičkim potrebama u stvarnom životu.
Možete pomoći Ukrajini u borbi protiv ruskih osvajača. Najbolji način da to učinite je da donirate sredstva Oružanim snagama Ukrajine putem Savelife ili preko službene stranice NBU.
Također zanimljivo: