Dynamique | accent sur deux problèmes d'application de base, SMP 2018 secondes dialogue chinois homme-machine évaluation technique est conclu

Technologie AI Revue de presse : Parrainé par le traitement des médias sociaux Information Processing Society chinois Comité spécial, la septième Conférence nationale de traitement des médias sociaux (SMP 2018) Harbin Institute of Technology a accueilli le 2 Août 2018 - a eu lieu à Harbin le 4. Lei Feng réseau comme les médias stratégiques exclusifs apportent des rapports spéciaux.

Le dialogue est la forme la plus fluide et naturel de l'interaction homme-ordinateur, le dialogue humain-ordinateur et donc devenir une importante recherche dans le traitement du langage naturel. Avec Microsoft chiendent, Siri en tant que représentant des produits interactifs en tant que représentant du développement rapide des applications industrielles. Corrélativement, l'évaluation de la technologie interactive est devenue la technologie des universités et des terrains de formation des entreprises. "

Source: HIT SCIR Li Jiaqi

Août 16 heures, SMP évaluation 2018 secondes de la technologie de dialogue homme-machine chinoise (la deuxième évaluation de la technologie Dialogue chinois homme-machine, SMP-ECDT) Cérémonie de remise des prix a eu lieu en douceur et le rapport technique du Forum.

SMP-ECDT actuel parrainé par le traitement des médias sociaux Information Processing Society chinois des comités spéciaux, y compris l'Institut de technologie de Harbin et organisateur IFLYTEK Co., Ltd pour fournir un soutien de données, en plus du soutien fourni par Huawei prime. Structure organisationnelle SMP Comité d'évaluation technique 2018, y compris le président Zhang Wei homme (Harbin Institute of Technology), un membre Zhigang (IFLYTEK Co., Ltd.), Wanxiang Che (Harbin Institute of Technology) et Zhang Yibo (Huawei).

évaluation technique actuelle SMP-ECDT a suivi le système de compétition de l'année précédente, le champ est divisé en classification l'intention des utilisateurs et centrés sur les tâches d'évaluation en ligne interactif deux tâches.

Utilisateur a l'intention classées par domaine (une tâche) pour les classes de travail et deux catégories d'art à base de chat (domaine), le système demande à l'utilisateur dans les zones respectives correspondant classé unique dialogue d'entrée de roue, où les tâches sont réparties en 30 catégories champ vertical.

Dans le processus d'application du dialogue homme-machine, seul le droit de juger de l'intention de l'utilisateur, et diviser correctement afin de revenir encore les résultats de la réponse. Dans cette tâche, les participants peuvent ouvrir l'accès aux données de formation et de développement en plus des données fournies par les organisateurs, les organisateurs fournissent un ensemble de test donné, et exécute le système de la concurrence, les résultats d'évaluation obtenus dans l'ensemble de test ci-dessus. les critères d'évaluation comprenaient la précision (P), le rappel (R) et les valeurs F.

évaluation en ligne interactive basée sur les tâches (Tâche II) est couvert par type de billets, des billets de train en première classe, hôtel trois zones verticales, le système remplit les tâches correspondantes prédéterminées ou d'une requête par le dialogue et les testeurs en temps réel en ligne.

processus d'évaluation globale des différents systèmes d'entrée sont données la même entrée du premier tour du dialogue, selon le personnel d'évaluation Interagir jusqu'à la fin du dialogue donné une description complète du système intention et à l'entrée, le système retourne toutes les tâches (tâche simple ou tâches) des résultats en outre, si une seule tâche encore retourner le résultat souhaité après 30 testeurs dans plusieurs tours de dialogue, la fin de la séance d'essais. Cinq domaines d'évaluation comprennent les taux d'achèvement de la tâche, le nombre de tours de dialogue, la satisfaction des clients et de répondre aux ressources naturelles de la langue ne couvre pas des situations telles que la capacité de démarrage.

évaluation technique SMP-ECDT du 1er Avril, 2018 lancement, après près de cinq mois de la course, finalement attirer 80 équipes pour un total de 248 participants s'inscrire, par rapport à l'année dernière première session de l'évaluation technique d'un certain degré d'amélioration. Il est à noter que la proportion des équipes du secteur industriel a augmenté par rapport à l'an dernier, Président du SMP comité d'examen technique 2018, le Dr Zhang Wei Institut masculin de technologie de Harbin a dit que cela reflète l'attention de l'industrie sur la technologie de dialogue homme-machine d'un côté améliorer constamment le niveau technique a été régulièrement progresse.

évaluation technique SMP-ECDT le 23 Juillet a annoncé les résultats de l'évaluation, comme suit:

Source: HIT Zhang Wei mâle

Bien que l'année dernière par rapport à examiner le sujet n'a pas changé de manière significative, mais le Dr Zhang Wei homme a informé Lei Feng réseau AI Technology Review, les deux tâches à l'aide d'un nouvel ensemble de données, et la tâche de tester un ensemble de plus grande échelle, d'améliorer l'évaluation de la difficulté technique de la tâche .

En conséquence, la tâche d'une équipe participante indice global a diminué par rapport à l'année dernière. Toutefois, le comité d'évaluation technique vu également les progrès des équipes participantes.

« Nous avons récemment vu plus T2T de feu basé sur le modèle Transformer dans un système d'entrée de la tâche, et atteint les premiers résultats, par rapport à la LSTM, l'attention du transformateur que par la technologie multi-têtes, le modèle global est plus simple et efficace Pendant ce temps, nous voyons aussi la FastText en pré-formation et la performance des applications d'acquisition de données sur le vocabulaire et l'intégration fait ".

Le Groupe de deux en plus d'utiliser le nouvel ensemble de données, mais se réfèrent également à des problèmes de tests rencontrés l'an dernier pour effectuer une correction. Faire le comité d'évaluation sont ravis que cette année, la tâche de taux d'achèvement des tâches II et le nombre moyen de tours, puis deux indicateurs clés ont été améliorés de manière significative, le Dr Zhang Wei homme a dit: « Cette technologie sans aucun doute des marques interactives l'année dernière, au moins dans notre mission, nous avons fait des progrès significatifs, nous suivons les progrès en pleine confiance et des attentes. "

Source: HIT Zhang Wei mâle

Depuis l'année dernière, un comité d'évaluation de la technologie SMP dans Yi Ting professeur Jiangsheng Liu et soutien des enseignants à la réunion SMP tenue pour l'évaluation technique de deux dialogue informatique humain chinois, premier du genre. Dr Zhang Wei a présenté l'homme, dans le processus d'élaboration du contenu de l'évaluation, la Commission estime devoir tenir compte non seulement se concentrer sur l'étude du dialogue humain-ordinateur, plus interactifs devraient envisager des problèmes de base clé dans l'application pratique. « Après beaucoup de discussions, nous avons identifié deux tâches d'évaluation, à savoir la classification de l'intention de l'utilisateur et l'évaluation à temps réel interactive en ligne. Après deux mandats d'évaluation, nous sommes heureux de voir les progrès réalisés dans la technologie interactive sur deux tâches en même temps nous avons aussi trouvé des problèmes, tels que le domaine du modèle de migration ".

Un problème commun en collaboration avec chaque équipe exposée pendant la course, le comité d'évaluation pour ajuster la mise au point du développement de l'évaluation et du programme de suivi à l'avenir. Dr Zhang Wei a également dit l'homme, à l'avenir, ils seront également prévu en liaison avec les scénarios d'application réels, comme assistant mobile, haut-parleurs intelligents, de sorte que les équipes peuvent recevoir une rétroaction en temps opportun et faire des ajustements dans la pratique, il est également bénéfique pour la promotion interactive progrès et de la technologie d'atterrissage.

SMP2018 évaluation de la technologie de dialogue homme-machine chinoise (ECDT): http: //smp2018.cips-smp.org/ecdt_index.html

Vous voulez en savoir plus sur le traitement du langage naturel?

Bienvenue à cliquer sur « texte lu »

Ou Lieu communautaire AI Yanxishe ~

Dites Octobre est Octobre! Millet MIX 3 officiellement déclaré officielle: 25 Octobre Pékin voir
Précédent
Amis chanter, imidapril a gagné dix millions de financement, dix milliards de mini KTV part de marché comparable à vélo?
Prochain
les gens ne veulent pas, l'exposition au téléphone pliable OPPO, en accord avec l'apparition de X et Huawei Maté
Seulement deux uvres de Stephen Chow cinq étoiles, en plus de deux « Westward Journey », que celui-ci!
Octobre Octobre est-à-dire le mil MIX 3 téléphone plein écran a annoncé officiellement officiel!
« Quotidien du Peuple », CCTV aussi faire un live! Golf sur le net peut être rouge et le montrer?
Sony Xperia 10/10 plus sortie, écran pieuvre + processeur Qualcomm 630/636
Subaru WRX STI S208 chiffre officiel publié en édition limitée 450
L'Inde est un autre morceau de Dieu qui vient, « héros de toilette » plein de trucs, ou super « catch it! papa "
Bill Gates derrière l'homme! fondateur de Microsoft Paul Allen, est mort 65 ans
#SHOCK LE MONDE # G-SHOCK35 célébration d'anniversaire à New York montre
Paramount cinq ans de fond « six », maintenant les départs de PDG, l'entreprise peut supporter?
La nouvelle couronne sera dévoilée en Novembre, ou d'annuler la puissance V62.5L
Le riz rouge redmi Note 7 Pro Network: Sony MIX586 + Xiaolong 675