28 janvier 2018, un scientifique de Google DeepMind a révélé dans une discussion en table ronde liens sponsorisés DT juin EmTech Chine sommet Basé sur le « StarCraft 2 » environnement bâti AI fait d'apprentissage peut être étendu à d'autres domaines, sans s'y limiter à d'autres jeux vidéo, Et même la reconnaissance sans pilote et le visage.
Figure Shu Oriol Vinyals dans le discours
Le scientifique est le Oriol Vinyals, il avait 35 ans d'innovation d'âge de l'année 2016, 35 personnes se sont inscrites MIT Technology Review, à savoir 35 TR. Bien sûr, Oriol aussi "StarCraft 2" environnement d'apprentissage AI, les développeurs de SC2LE.
Qu'est-ce que SC2LE?
Premier document sur SC2LE en Août 2017 communiqué, le présent document décrit Sur la base de l'environnement d'apprentissage « StarCraft 2 », AI comment former à travers le jeu lui-même, et, finalement, les joueurs sont restés stables, même au-delà du niveau des joueurs professionnels.
Figure Shu SC2LE principe de fonctionnement
Oriol dit, ce jeu pour DeepMind, ou pour l'IA, il est un espace de formation, ou peut être dit aux médias. algorithmes AI exigent des médias, plus authentique sera le mieux.
Conversation, il a joué deux vidéo de mouvement du robot AI sans véritable formation sur le terrain, et a constaté que, Tant que ces robots viennent à travers une petite obstruction tomberez immédiatement, mais il peut aussi causer un crash du système.
Puis, il a montré au public deux modèles en cours d'exécution caractère virtuel, et explique: « Bien que ce soit un environnement virtuel de formation, mais il est très réel, y compris les règles de toute réalité physique. Par conséquent, même sans le test réel, mais le résultat que juste la présentation qui a plus de sens. »
Figure Shu joueurs professionnels
En fait, le « StarCraft 2 » est en mesure de fournir un bon environnement. jeu Oriol avec la cellule de base « SCV » par exemple, un « SCV » pourrait avoir quatre modes de fonctionnement: ressources collectons, bâtiments de construction, enquête, l'expansion.
Cependant, seulement quatre mode de fonctionnement contient de nombreux changements. Oriol a souligné, AI veulent contrôler un SCV, vous devez donner une commande de la console est sélectionnée, puis cliquez sur la destination. Toutefois, cette opération ne suffit pas de lumière, vous avez également besoin d'une autre console est également responsable de la simulation du clavier, pour faire un SCV pour terminer l'action.
En même temps, Oriol a montré un joueur de jeu vidéo professionnel. Plus une frappe rapide sur le clavier, l'écran bascule en arrière. exclama Oriol, ce mode de jeu « Il est comme des spectacles musicaux » La même chose.
Cependant, il a soudainement interrompu la présentation et dit au public: « Cette opération est tout simplement SCV, mais plutôt le » StarCraft 2 «chaque race a plus de dix types d'unités, ils ont des fonctions différentes, des instructions différentes qui peuvent être exécutées. »
Oriol fit une pause pour un moment, il a dit: « Les joueurs humains Opération dans le bout des doigts effectués pour SC2LE doit être divisé en deux et effectuer de nombreuses régions, très compliquée. Cependant, le look de jeu vers le bas, les joueurs humains moyenne de 5000 ces opérations. »
Figure Shu DeepMind créer un environnement d'apprentissage "StarCraft 2"
Cela signifie que si vous voulez battre une IA humaine, puis l'exécuter toutes les étapes de la politique, nous devons tenir compte des milliers de stratégie étapes. Cependant, il est précisément ce genre de variation spatiale infinie, il a donné DeepMind un meilleur environnement, parce que l'environnement réel est beaucoup plus complexe que cela.
Basé sur le « StarCraft 2 », mais ce n'est pas seulement un jeu AI
Lors de la séance de discussion en table ronde, des participants a suggéré que dans la plupart de l'environnement d'apprentissage, que quel usage est-il? Après Oriol entendu cette question a souri et a dit que, en fait, il va se poser de questions.
Il a dit: « StarCraft 2 » est un jeu vidéo, il sera finalement éliminé, est inévitable, mais ce jeu environnement d'apprentissage basé pour l'algorithme DeepMind un cadre et une application plus large et peut être étendu, ce qui permet aux développeurs il peut être sur d'autres questions, de la façon actuelle de penser à des solutions pour le rendre plus efficace.
« En même temps, ce qui pour nous (DeepMind) est également une capacité de formation. » StarCraft 2 « environnement est très complexe, un joueur humain peut facilement résoudre le problème, vous devrez peut appeler des ressources AI à un centre de données complet résoudre le problème, ce n'est pas ce que nous voulons voir. Nous avons donc appris à décomposer le problème, le « StarCraft 2 » Afin de briser beaucoup de petits morceaux, comme vient de le dire, nous avons passé 60 x 40 cellules AI à former, plutôt que par le jeu global de laisser l'IA comprendre le problème. "
La figure Shu SC2LE sur Linux seulement 60 x 40 cellules, et le droit est évaluée à partir de ces cellules
En fait, une carte « StarCraft 2 » peut contenir des centaines de milliers de cellules, mais ces cellules DeepMind réparties en plusieurs petits identiques ou similaires cellule à réfléchir sur le problème. La dernière étape est simplifiée, ce qui réduit la consommation des ressources.
Il est également la raison pour laquelle, Oriol faisait partie de la table ronde, il a dit: Même si le « StarCraft 2 » en raison du changement de temps et de déclin, mais l'architecture et le concept de l'environnement d'apprentissage, peut en faire la technologie AI à d'autres plates-formes. Pas seulement des jeux, mais inclut également sans pilote, la reconnaissance faciale et ainsi de suite.
AI peut être passé battant « StarCraft » l'homme?
Depuis Ke Jie et LiShiShi ont perdu AlphaGo, les gens sont plus préoccupés par la question, « AI peut battre l'homme? » Surtout pour l'IA Google.
En Octobre 2016 blizzard Bliizcon 2016, DeepMind potentiel et annoncé conjointement avec Blizzard « StarCraft 2 » comme un environnement de recherche pour libérer la technologie AI. L'ancien dit, Le jeu est l'un de l'environnement parfait dans lequel l'entreprise peut se développer rapidement et efficacement et de tester AI, afin d'augmenter la flexibilité de l'algorithme, et finalement de fournir une rétroaction instantanée par le score du jeu (résultat).
Octobre 2017, dans le treizième intelligence artificielle et de divertissement numérique interactive Assemblée générale (Conférence sur l'intelligence artificielle et du divertissement numérique interactif appelé AIIDE'17), la communauté des chercheurs d'Amnesty International qui ont apporté leur AI « StarCraft » de participer à la compétition. Parmi eux, l'utilisation de la race Zerg ZZZKbot 2465 record négatif 501 victoires et a remporté le championnat.
Cependant, plus de dix jours après le match, la Corée du Sud a organisé un « StarCraft » guerre homme-machine. anciens joueurs professionnels sud-coréen cigogne 4: 0 grand avantage de rouler la ZZZKbot, TSCMO, MJ ces trois niveaux de plus haut « StarCraft » AI dans le monde. Même pour le jeu domaine AI, le sens est très important, certains joueurs mais « StarCraft » professionnels croient que le jeu ne semble pas bon, parce que le tempo du jeu complètement en arrière la cigogne, il n'y a aucune possibilité de gagner AI .
Figure Shu a facilement remporté la victoire Stork
défi AI dans le « StarCraft 2 » à la hausse, mais pour Oriol est sans aucun doute de bonnes nouvelles. Il a laissé un commentaire été basé sur le « StarCraft 2 » environnement d'apprentissage, « Ceci est plus qu'une interaction multi-agents (voir les joueurs, unités, bâtiments) environnement, en raison du » brouillard de guerre « sur la carte, AI et joueur obtenu l'information est incomplète. « StarCraft 2 » est non seulement à des centaines de contrôle des unités d'espace, mais offrent également un espace pour un avion pour obtenir des informations de la fonction originale (image miniature carte) couplée à l'allocation des ressources (cristal et gazière ), de sorte que l'IA de faire toutes les étapes de l'action, il est nécessaire de penser des milliers de stratégie étapes ".
Oriol a dit dans son discours, même si le système d'évaluation a procédé à une évaluation élevée à la SC2LE actuelle, mais les joueurs humains et professionnels par rapport à tout simplement juvénile. Mais il est en fait très heureux, car seul défi peut donner le pouvoir DeepMind avant, pour surmonter le problème, afin de conférer plus capable AI.
Pendant ce temps, Oriol a fait remarquer qu'il ya place pour la croissance AI. Il AlphaGo par exemple, la capacité de la grippe aviaire dans la bataille Li Shishi est un tiers le temps de la bataille Ke Jie. En d'autres termes, à seulement quelques mois, AlphaGo de croître trois fois plus. Peut-être, vraiment un jour, SC2LE va facilement battre un joueur professionnel, tout comme aujourd'hui, nous les battons aussi facilement.
Tout de « StarCraft 2 » Les travaux ont commencé au moment, profitera aux générations futures
Vous savez compariez AI, Oriol est plus comme « StarCraft. » Il est entré en contact avec le jeu dès l'âge de 15 ans, mais au moyen qui a frappé quelques trucs en Espagne. En fait, l'information du public, Oriol a travaillé dans le bureau Microsoft, et jouer contre l'IA dans le développement de « StarCraft. » Car, lorsque le joueur ne peut pas trouver des adversaires, au lieu des joueurs humains et les opposants à la guerre.
Peut-être était cette chose a donné l'inspiration Oriol. Il a souligné que, dans la table ronde, « StarCraft 2 » peut être utilisé pour former l'IA, l'IA si vous pouvez former les joueurs à jouer « StarCraft 2 » moyenne? Pour exemple AlphaGo, il est par la confrontation, créé leurs propres tactiques uniques, mais cette tactique peut être appliquée à d'autres joueurs humains apporté jeu d'échecs.
Figure Shu Oriol discuté
« StarCraft 2 » est comparé au Go a plus de cartes, plus de possibilités, SC2LE est susceptible de créer une tactique uniques. Donc, pour mettre cette tactique pour la formation des acteurs humains, en particulier les joueurs à base zéro, peut être plus élevé que pour les nouveaux joueurs de découvrir le jeu vous-même plus.
En fait, que le temps et la technologie, « StarCraft 2 » Ce jeu est né dans le passé, combiné avec la technologie actuelle chaude AI, à la fois la forme du futur seront sans aucun doute la vie plus automatisée.
Oriol a fait remarquer, à faire des choses DeepMind est de créer une plate-forme. À son avis, cela ne concerne pas les scientifiques et leurs travaux de recherche, comme, SC2LE affrontera plus les développeurs et les joueurs « StarCraft 2 ». Oriol très disposé à ouvrir ces plates-formes, il est parce qu'il croit que l'IA a besoin d'innovateurs, ils peuvent faire l'IA plus de fonctionnalités.
Oriol représenté dans l'image, il est l'avenir de la communauté AI. Nous ne savons pas quand à venir, mais le travail en ce moment, profitera aux générations futures.
