Au cours d'une période de temps, parce que la plupart des entreprises mondiales ouvertes le télétravail, le nombre de personnes qui utilisent ces outils de zoom augmentation de la folie, peut être réalisée à partir de la vidéoconférence pour rencontrer des amis par Zoom, qui font aussi certaines personnes se sentent très stressés. Par conséquent, certains experts techniques étrangers dans le trou du cerveau ouverts, par la technologie AI trouver des moyens de rendre leur évasion de Zoom.

Zoombot: un clone à se rencontre

Récemment, expert technique étranger Matt Reed nommé en raison de Zoom intolérable dans des réunions sans fin, sur la mise en place d'un projet de clonage par l'IA Zoombot, vous pouvez cloner eux-mêmes à une réunion. Zoombot en utilisant la reconnaissance vocale AI et de l'outil texte-parole peut être faite lors d'une réunion en réponse à ses questions des autres. Reed et sans dire à ses collègues, les résultats ont été assez bons regards des captures d'écran.

L'ensemble du programme est pas compliqué, selon Reed a présenté à couper certaines de ses réunions de Zoom, puis sur la base Artyom.js sur les bibliothèques open source (écoute et répondre à) construire une application Web simple à programmer Je peux comprendre des conversations simples, telles que « Comment allez-vous? », « vous me comprenez », « au revoir » et ainsi de suite. Idéalement, Zoombot peut gérer l'ensemble du processus de réunion « Bonjour » à « Bye », et ne causera pas de prêter attention à personne, mais à ce stade du projet d'établir plus par intérêt, pas parfait, donc, Reed aussi projet GitHub en ce qui précède, et pour les développeurs qui tentent.

GitHub Adresse: https://github.com/mcreed/zoombot

Reed est considéré comme une bonne partie, il ne doit pas donner comme « Hey, Siri » un tel mot de réveil, vous pouvez commencer à utiliser. Tant que la voix externe peut déclencher une réponse, la réponse est donnée avec le mouvement du visage.

projet Zoombot a passé un total d'environ quatre heures pour construire, et Reed et a passé environ quatre heures pour organiser des réunions Zoom et ses collègues ont enregistré la vraie réaction. Reed a plaisanté: « L'astuce est de terminer parler avant de quitter la salle, car une fois dans le » Je ne peux pas entendre votre voix, vous pouvez le répéter? cycle de la mort « en difficulté.

Zoom avatar projets clés: les premier ordre modèles de mouvement

Il a été suggéré que si le projet ci-dessus dans un Factice, introduit ensuite le projet open source est plus proche de la base théorique et pratique car il y a un an.

projet avatarify est également un développeur étranger publié sur le projet open source GitHub, il est possible de Zoom, Skype applications appelant vidéo tels ajouter votre propre stand-in, le modèle de base modèle de premier ordre utilisé dans le projet provient d'un document SPNI « premier ordre de mouvement modèle pour l'animation des images ».

Les avantages d'un premier ordre modèle de mouvement est un ensemble de formation vidéo une fois qu'elle a été décrite dans la même classe de l'objet (par exemple un visage humain, le corps humain), cette méthode peut être appliquée à toute classe d'objets. Modèle procédé d'auto-surveillance et les informations de mouvement séparées l'apparence, se compose essentiellement de deux modules principaux: un module d'estimation de mouvement et le module de génération d'image.

exemple modèle d'animation

Comme indiqué plus haut, le plus à gauche image est grande vidéo d'entraînement, la première ligne de l'image vidéo droite de la source est un peu rangée inférieure est entraînée vidéo.

Installation et configuration est terminée, si vous voulez obtenir des commentaires de coupe, vous pouvez utiliser python crop-video.py --inp some_youtube_video.mp4, il utilisera ffmpeg pour générer des commandes nécessitent bibliothèque face alligment:

git clone https://github.com/1adrianb/face-alignment cd face-alignement pip installer -r requirements.txt python setup.py install

Autre contenu Accessibilité GitHub Adresse:

https://github.com/AliaksandrSiarohin/first-order-model

avatarify Adresse du projet:

https://github.com/alievk/avatarify

Sur GitHub, la méthode d'installation spécifique donnée, après la fin des paramètres sélectionnés dans avatarify appareil photo Zoom utilisé, une image peut être générée en temps réel par OpenCV poussé au flux vidéo.

Nécessité de faire attention est d'essayer d'utiliser la fonction de mise à l'échelle de l'image et la position dans la fenêtre d'aperçu de votre visage avec la cible avatar aligné autant que possible. Après l'alignement, cliquez sur le « X » pour utiliser ce cadre comme une référence pour le reste du disque d'animation.

De plus, le logiciel peut également appuyer sur « F » pour essayer vous-même de trouver un meilleur cadre de référence. Cela ralentit le frame rate, mais lorsque les événements suivants se produit, vous pouvez continuer à déplacer la tête: Lorsque la fenêtre de prévisualisation a montré des gestes du visage utilisés avec l'image actuelle est plus proche, il clignote en vert. Vous verrez également deux chiffres: Le premier numéro est votre incarnation actuelle et comment étroitement aligné, le second nombre est le repère de référence étroitement aligné. Vous pouvez choisir un bon alignement. Lorsque vous avez terminé, appuyez sur la « F » pour quitter le mode de recherche de cadre de référence. L'ensemble du processus ne nécessite pas très stricte, une configuration supplémentaire peut encore produire de bons résultats, mais cela est un bon point de départ.

De plus, les développeurs ont également démontré par le projet afin que l'effet de Musc participer à la conférence vidéo, pour votre référence.

Cette vidéo peut être visionnée via Reddit:

https://www.reddit.com/r/MediaSynthesis/comments/fxc34i/elon_musk_joined_our_zoom_call_avatarify/

Les liens de référence:

https://musebycl.io/index.php/makers/agency-guy-built-ai-clone-attend-zoom-meetings-him

https://www.reddit.com/r/MediaSynthesis/comments/fxc34i/elon_musk_joined_our_zoom_call_avatarify/

https://aliaksandrsiarohin.github.io/first-order-model-website/

https://github.com/alievk/avatarify