Hra Minecraft (ona histórie podrobne popísané Denis Koshelev) sa nezdá byť veľmi dôležitým nástrojom na podporu pokročilého výskumu v oblasti AI. Koniec koncov, je dôležité naučiť stroj hrať sandboxovú hru, ktorá bola vydaná pred viac ako 10 rokmi? Budete prekvapení, ale áno a svedčí o tom aj najnovší výskum laboratória OpenAI, ktoré študuje vývoj umelej inteligencie.
OpenAI vždy zameraná na úspechy AI a strojové učenie, ktoré môže byť prospešné pre ľudstvo. Spoločnosť nedávno úspešne vycvičila robota na hranie Minecraftu pomocou viac ako 70 2,9 hodín herného záznamu (to je viac ako 8 XNUMX dní alebo takmer XNUMX rokov, ak vôbec niečo). Tento úspech predstavuje obrovský krok vpred v pokročilom strojovom učení pomocou pozorovania a simulácie.
Bot OpenAI je skvelým príkladom toho, ako funguje simulačné učenie (známe aj ako „učenie pod dohľadom“). Na rozdiel od posilňovacieho učenia, kde je učiaci sa agent odmenený po dosiahnutí cieľa prostredníctvom pokusov a omylov, simulácia trénuje neurónové siete na vykonávanie špecifických úloh tým, že pozoruje, ako ich človek vykonáva. V tomto prípade OpenAI použila existujúce herné videá a návody, aby umožnila robotovi vykonávať komplexné herné scenáre, ktoré by pre bežného hráča vyžadovali približne 24 XNUMX samostatných akcií.
Tiež zaujímavé:
Imitačné učenie si vyžaduje, aby boli video dáta špeciálne označené tak, aby poskytovali kontext akcie a výsledku, t.j. AI vedel pochopiť, ktoré tlačidlá boli stlačené a aké pohyby boli vykonané. Takýto prístup však môže byť časovo náročný, čo vedie k obmedzeným dostupným súborom údajov.
Namiesto napínania svalov vykonávaním rozsiahleho cvičenia manuálneho označovania údajov výskumný tím OpenAI použil špeciálny prístup známy ako Video Pre-Training (VPT) na rozšírenie počtu dostupných videí. Spočiatku výskumníci zaznamenali 2 hodín komentovanej hry Minecraft a použili ho na trénovanie agenta, aby priradil určité akcie ku konkrétnym výsledkom na obrazovke. Výsledný model bol použitý na automatické generovanie štítkov pre 70 XNUMX hodín predtým neoznačeného obsahu Minecraft dostupného online. To poskytlo robotovi oveľa väčší súbor údajov, ktorý si mohol pozrieť a simulovať.
Tiež zaujímavé:
Táto štúdia demonštruje potenciálnu hodnotu prístupných videoúložísk ako napr YouTube, ako vzdelávací zdroj pre AI. Vedci strojového učenia môžu používať dostupné a správne označené videá na trénovanie AI na konkrétnych úlohách, od jednoduchej webovej navigácie až po pomoc používateľom s fyzickými potrebami v reálnom živote.
Môžete pomôcť Ukrajine v boji proti ruským útočníkom. Najlepším spôsobom, ako to urobiť, je darovať finančné prostriedky Ozbrojeným silám Ukrajiny prostredníctvom Zachrániť život alebo cez oficiálnu stránku NBU.
Tiež zaujímavé:
Nechaj odpoveď