Auteur: Denny Britz, les anciens membres de l'équipe Google au cerveau

Q. compilateur de finition agriculture

Qubit produit | Numéro public QbitAI

 Les mains du personnel titulaire d'un U-disque, monté à l'intérieur du programme est de battre l'intelligence artificielle de des DotA humain 2 meilleurs joueurs

Quand j'ai vu hier OpenAI intelligence artificielle, sur un bonus de 24 millions $ tournoi e-sport, battre meilleurs joueurs de l'humanité DotA2, les gens se sentent super excités.

En effet, d'une part, je suis un fan de jeux électroniques. Bien que jamais joué DotA 2, mais je regarde souvent d'autres une autre compétition électrique sur Twitch, au lycée, je travaillais comme une rafale de joueurs semi-professionnels.

Plus important encore, comme DotA tel jeu de sport multi-tactique en ligne (MOBA), et ce type de jeu de stratégie en temps réel Starcraft 2 (RTS), est généralement considéré comme beaucoup plus que la capacité de contrôler l'intelligence artificielle de courant. Parce que ces deux types de jeux nécessitent des décisions stratégiques à long terme, multijoueur coopératif, que les échecs, Go a un état plus complexe et de l'espace d'action.

DeepMind Starcraft 2 a été étudié dans un certain temps, vient de sortir un nouveau progrès, mais jusqu'à présent, les études ont pas encore atteint une percée majeure. Il a été largement ressenti, de l'intelligence artificielle de jouer StarCraft 2 joueurs de l'humanité suspendu en haut, il y a au moins un an ou deux.

Voilà pourquoi OpenAI ce résultat si choquant. Comment ça va? Quelle est la plupart des avancées de l'intelligence artificielle de que je ne l'ai pas remarqué? Alors j'ai commencé à étudier l'intelligence artificielle à la fin ce que DotA 2 a fait, comment il est formé, et quel type d'environnement de jeu en cours d'exécution.

Ma conclusion est: Ceci est une réalisation impressionnante. Mais pas une percée dans l'IA.

A travers cet article, je veux fournir une explication claire sur la question. En fait, la spéculation excessive est le vrai progrès Intelligence artificielle chose dangereuse. Par exemple, la déclaration suivante sur Twitter, est le vrai trompeur.

Ceci est Elon Musk Twitter, Iron Man est non seulement le fondateur de la Tesla Silicon Valley, et a fondé le OpenAI. Le tweet ci-dessus cela, l'effet Musk que: OpenAI venir avec l'histoire des premiers jeux électroniques à battre les meilleurs joueurs de l'intelligence artificielle. Ceci est plus que les échecs et les dames font quelque chose de plus compliqué que cela.

Dans la deuxième poussée spéciale, Musk a été publié à nouveau vues Meng sessions AI: Personne ne aime à régler, mais le danger au public tout (voitures, avions, nourriture, médicaments, etc.) devrait être réglementé. AI est le même.

(Stream, bien sûr, a également fait un Musk, qubits ne sont pas traduits, le mappage suivant)

Il faut d'abord déclarer que je veux parler aujourd'hui ou battage médiatique trompeuse, non OpenAI erreurs de chercheurs. OpenAI étudie les aspects de nombreuses contributions. À l'heure actuelle, OpenAI n'a pas dévoilé les détails de leurs solutions, de sorte que le monde extérieur pourrait facilement tirer des conclusions erronées.

Maintenant, couper à la chasse. Jetons un coup d'oeil à programme DotA AI 2, à la fin résoudre plus d'un problème difficile? Surtout par rapport à AlphaGo.

• 1v1 et 5v5 ne peuvent pas être comparés

  Dans un jeu normal DotA 2, deux équipes de cinq joueurs contre chaque composition. Cours du jeu nécessitent des tactiques avancées, communication et coordination équipe, un jeu généralement 45 minutes.

  Cette intelligence artificielle de temps vaincu la race humaine, avec un mode 1v1, ce modèle a trop de restrictions. Par exemple, les deux parties ne peuvent avancer essentiellement le long d'une seule ligne, et essayer de tuer, quelques minutes pendant le jeu est terminé.

  En mode 1v1, les opposants défaite principalement par des compétences mécaniques et de la stratégie à court terme n'implique pas la planification à long terme et la coordination, ce qui est la plupart du défi de la technologie actuelle AI est.

  En fait, la confrontation DotA 2 homme-machine, le nombre d'action efficace peut être employé, moins aller machine de guerre de l'homme, l'espace d'état efficace (la situation de la situation actuelle), si d'une manière intelligente, dit être plus petit que le Go .

• AI peut obtenir plus d'informations

  programme d'intelligence artificielle de OpenAI, très probablement construit sur l'interface robot DotA 2 d'origine, vous pouvez obtenir plus de joueurs humains ne peuvent pas voir les informations. Même les chercheurs OpenAI ont limité l'accès à ces informations, l'intelligence artificielle encore être en mesure d'obtenir des informations plus précises que les humains.

  Des compétences telles que le moulage, les joueurs humains doivent être fixés sur l'écran, et d'estimer la distance entre les deux rivaux. L'IA connaître la distance exacte, et peut immédiatement décider si les compétences de la distribution. Obtenir des informations numériques exactes est un grand avantage. En fait, vous pouvez voir le cours de la guerre, Amnesty International a plusieurs attaques ont été lancées sur la distance maximale.

DotA 2 guerre homme-machine tout au long de la lecture, s'il vous plaît visitez qubit numéro public (QbitAI) vue.

• Temps de réaction

  AI peut réagir immédiatement, et non les humains. Couplé vient de dire la supériorité de l'information, l'avantage AI plus étendu. Par exemple, une fois que l'adversaire à portée d'attaque d'échappement, AI peut annuler immédiatement l'ordre d'attaque.

• Utilisez seul héros

  DotA 2 Il y a des centaines de héros différents, chacun avec des capacités et des forces différentes. La prise AI d'un seul héros: Shadow Fiend (ombre magique). attaques magiques Shadow sont généralement lancées immédiatement, plutôt que d'apprendre les compétences à maîtriser les attaques plus sophistiquées sur une période de temps, ce qui est plus propice à jouer les avantages de l'information AI et la réponse.

  Par conséquent, compte tenu de la concurrence 1c1 principalement des compétences mécaniques, AI a battu les joueurs humains ne sont pas surprenants. Compte tenu de l'environnement de jeu est strictement limité, entraînant une tactique et des stratégies série est limitée, et presque pas besoin d'une planification ou la coordination de la concurrence à long terme.

 DotA 2 de la magie de l'ombre

Encore une fois réitérer ma conclusion: les joueurs L'IA DotA à battre que les champions de l'homme de battement dans Go est beaucoup plus facile. L'homme n'a pas de percée soudaine dans le domaine de l'intelligence artificielle.

La raison pour laquelle l'IA gagner en confrontation DotA, parce que les chercheurs ont mis en place une question intelligente, de sorte que peut AI contourner les limitations techniques de l'intelligence artificielle de courant.

On dit que cette formation OpenAI jeu DotA AI a pris deux semaines. En revanche, AlphaGo ont été distribués formation à grande échelle depuis des mois sur le cluster GPU de Google. Calculé entre les deux programmes a nécessité un ordre de grandeur de différence.

Eh bien, ce sera les derniers vols de fantaisie de jouer DotA AI, à la fin ce un endroit merveilleux?

• Entièrement grâce à la formation d'auto-apprentissage

  AI ne nécessite pas de données de formation, ils ne seront pas apprendre de la race humaine. Au hasard démarrer le processus d'apprentissage, et l'apprentissage par eux-mêmes et combat. Bien que ce n'est pas une nouvelle technologie, mais étonnamment, les joueurs de l'homme Amnesty International a appris des techniques déjà utilisées. C'est cool.

  Il peut y avoir d'autres techniques d'intelligence artificielle, et même les humains ne savent pas. Ceci est similaire à ce que nous voyons dans AlphaGo, les joueurs de Go ont commencé à apprendre le mode AI d'échecs.

• Une étape importante dans le gaming AI +

  Dans l'environnement difficile (comme DotA 2 et Starcraft 2) pour tester la technologie AI est très important. AI peut fournir plus de valeur au jeu, le jeu va stimuler un développement plus rapide de la grippe aviaire.

• informations imparfaites

  En duel DotA, les joueurs humains intelligents voir une petite partie de la carte, la ligne de visée est entravée. AI peut être le même, mais on ne sait pas les détails OpenAI de la façon de traiter ce problème.

  Ce moyen vont, les échecs, les consoles Atari dans différents environnements, AI peut être observée dans une partie de l'environnement dans DotA, mais ne peut pas connaître les informations complètes sur l'état actuel du jeu. Ces problèmes sont souvent difficiles à résoudre, ayant dit, mais on ne sait pas 1c1 tournoi DotA 2, l'importance de la vision dans la géométrie finale.

Quoi qu'il en soit, je suis impatient de voir rapport technique OpenAI sur le jeu.

- complet  -

recrutement sincère

Qubits recrutent éditeur / journaliste, basé à Zhongguancun de Beijing. Nous attendons de talent, des étudiants enthousiastes de nous rejoindre! Détails, s'il vous plaît interface de dialogue qubit numéro public (QbitAI), réponse mot "recrutement".

qubit QbitAI

' « suivre les nouvelles technologies AI dynamiques et de produits