Ce puteri botul openai care a bătut dendi

Săptămâna trecută, istoria a fost creată pe tărâmurile Dota 2 și AI. La International, Dendi, unul dintre cei mai buni jucători ai jocului, a fost bătut fără milă într-un 1v1, de un bot, de două ori la rând. Bot-ul în cauză a fost creat de OpenAI, un startup al lui Elon Musk.

Acum este posibil să aveți câteva întrebări. Ce este Dota? Ce este OpenAI? Și de ce acest lucru este chiar important? Pentru început, Dota este un joc MOBA liber de jucat în care controlezi Eroii și scopul tău este să distrugi adversarii Antici. Mulți fani Dota ar putea jigni la ultima propoziție, întrucât există atât de mult pentru Dota, dar am rezumat.

Jocul este foarte complex, cu o curbă de învățare foarte abruptă. M-am angajat într-o misiune de a învăța Dota cu ceva timp în urmă și mi-a luat o săptămână doar pentru a parcurge un videoclip de bază How To, în care explică strategia jocului, ce fac armele, vrăjile, eroii și cum pot să mă mângâie. Acest lucru face ca întreaga luptă AI vs Dendi să fie importantă, deoarece ilustrează cât de avansate au devenit AI și ML. Așadar, haideți să vedem ce ne alimentează botul și trebuie să ne speriem de revolta AI.

Rise Of The Planet Of AI

AI devenind Skynet este o problemă discutabilă. Elon Musk consideră că, dacă nu este ținut sub control, este posibil să se întâmple un scenariu ca Skynet. Pe de altă parte, Mark Zuckerberg spune că AI-ul este inofensiv și nu va provoca scenariul Doomsday. Elon Musk a început OpenAI cu acest obiectiv.

Pentru a preveni utilizarea necorespunzătoare a AI și cercetarea în IA care nu se va îndrepta împotriva noastră. Și eu sunt de partea lui.

Dar asta nu suntem aici pentru a discuta. Subiectul principal este să știți ce alimentează botul realizat de OpenAI. Pentru a înțelege acest lucru, am citit câteva lucrări de cercetare și bloguri pe această temă și am contactat și prietenul meu Anmol Sharma, care este cercetător AI și ML.

Consolidarea învățării

Acesta este numele tehnologiei din spatele botului OpenAI Dota. Dar înainte de a ne dedica în el, trebuie să înțelegem cum funcționează AI-ul general, sau specific AI în jocurile video. AI este un termen foarte consiliu și conține multe subiecte, cum ar fi Machine Learning, Deep Learning și rețele neuronale pentru a numi câteva. Pentru a defini în mod crud AI, putem spune că este capacitatea unui computer de a învăța din informații și de a lua decizii pe baza învățării sale. Cu cât învață mai mult, cu atât crește corectitudinea deciziei.

Cum este diferit de Bot-ul normal?

Boții din jocurile video în general pot părea că sunt inteligenți, dar nu este o formă adevărată de AI. Aproape toți acești roboți din jocuri sunt programați în funcție de setul If..This..Then statement. Ei doar urmăresc declarațiile și iau măsuri pe baza condițiilor scrise în declarație.

Mai sus am arătat un exemplu foarte simplu. Declarațiile din jocurile reale sunt mult mai complexe, cu condiții în condiții. Cu cât sunt mai bine definite și detaliate aceste afirmații, cu atât botul pare să fie inteligent.

Recompense și pedepse

În AI lingo, ceea ce numim bot este cunoscut ca agent. Scopul este de a face agentul să învețe orice am dori să învețe. Agentul învață prin aceeași metodă ca și câinele dvs. învață, prin recompense și pedepse. Ori de câte ori agentul face o greșeală, este penalizat și ori de câte ori face ghicirea corectă sau dă un răspuns corect, acesta este recompensat. Prin acest sistem, agentul învață să asocieze acțiunile pe care nu ar trebui să le facă pentru a evita penalizarea și a efectua acțiunea (sau acțiuni similare) care dau recompense.

Dacă vă gândiți cu atenție la ea, este la fel ca luarea unei decizii bazate pe anumite condiții, la fel cum o fac algoritmii. După cum am arătat mai sus, un bot de joc, care vine pe un butoi explozibil, va acționa conform algoritmului. Algoritmii din AI, în mod evident, sunt mult complexe decât aceasta, ceea ce face ca întregul sistem să fie inteligent.

Venind la botul nostru OpenAI, potrivit dezvoltatorilor, acesta a învățat întregul joc în timp de 2 săptămâni. Pe parcursul întregii perioade de 2 săptămâni, a fost online 24 × 7 și a jucat pe o copie de sine. Aceasta este o etapă remarcabilă, având în vedere complexitatea jocului și faptul că ar putea să-l învingă pe Dendi.

De ce încă nu există mașini cu șofer?

Aceasta a fost una dintre primele întrebări care mi-au apărut în minte când am auzit despre întregul eveniment. Dacă un bot poate învăța un astfel de joc și se poate antrena până la un punct de a bate jucătorii de vârf, de ce mai manevrăm roata. Și aceasta a fost aceeași întrebare pe care am filmat-o prietenului meu, domnul Anmol Sharma, care a cercetat și asupra mașinilor fără drivă. Asta trebuia să spună.

Într-un joc, dezvoltat de un om, numărul de variabile este mai mic. În plus, dacă agentul (bot) face o greșeală, cea mai grea penalizare este o pierdere rotundă. În lumea reală, o greșeală este moartea.

Chiar dacă Dota este un joc complex, combinațiile posibile de mișcări, vrăji și tactici, deși sunt încă absurd de mari, sunt încă limitate. Și greșelile sunt permise fără nicio penalitate reală. Dar în cazul unui agent auto fără șofer, greșelile pot duce la accidente periculoase și chiar la moarte.

În lumea reală, numărul de variabile pe care agentul trebuie să le monitorizeze este nesfârșit și situațiile aprinse din cauza acestor variabile, precum o altă mașină care se schimbă brusc banda, săritura pietonală în fața mașinii, sunt de asemenea interminabile. În plus, așa cum a spus Jeremy Clarkson, va trebui să ia decizii morale și etice atunci când sunt pe punctul de a ajunge la un accident imediat (deși teoria sa nu este valabilă).

Viitorul

Știm deja despre robotul controlat de om care efectuează intervenții chirurgicale intrinseci. Următorul salt sunt roboții controlați AI. Și acest lucru este doar în domeniul medical. AI va fi cu siguranță noua tehnologie dominantă în următorul deceniu în multe domenii. Dar, AI poate fi folosit greșit în scopuri nefaste, precum atacuri DDoS, Ransomware Bots și hacking alte PC-uri sau sisteme ale corporațiilor.

În ceea ce privește Dota și alte jocuri, ne putem aștepta să vedem astfel de bots inteligenți care sunt făcuți și pentru alte jocuri, împotriva cărora jucătorii se pot antrena pentru a performa și mai bine. Și am menționat că OpenAI va face un 5v5 la Internaționalul de anul viitor? Așa că sunt pe cale să-mi perfecționez abilitățile Dota pentru a înfrânge cel puțin roboții încărcați. Rapine Divine aici vin!