« Nips 2018 défaut majeur » divulgation de l'information d'examen, plus de 1000 conférence universitaire examen en double aveugle impliqué

Ji-won nouveau rapport

Source: NIPS, Twitter

Auteur: Wen Fei

[Introduction de nouveaux Zhi Yuan Quelque chose se passe] NIPS 2018: examen des fuites d'information, en raison de la grande vulnérabilité du système de soumission CMT, les examinateurs peuvent déterminer les noms des documents et des institutions parviennent pas à faire examen double aveugle! Non seulement cela, il n'y a aucun signe de cette coupe SPNI au large d'un atelier historique, ainsi que les résultats préliminaires précédents se plaignant, cette session du PNM, les gens vraiment inquiet.

Si le 2017 NIPS d'un numéro enregistré en flèche ciel comme forme pour créer un enregistrement, puis PNM 2018 met en évidence la fièvre chaude actuelle, une forte fièvre presque intelligence / profondeur artificielle du champ des problèmes dormants d'étude.

fuite d'information critiques, processus d'examen double aveugle a échoué!

7 août dans le processus de pincements résultats préliminaires à titre de réfutation mené, on a constaté que les lignes de contact 2018 Système d'examen Une fuite d'information sérieuse Ce processus d'examen à la critique populaire, une fois de plus un problème.

La façon dont il est, comme d'autres réunions, NIPS 2018 utilise également le système MS CMT3 de dépôt de papier et d'examen.

En tant que critique de la conférence, sweichwald constaté que le serveur de système a un grave défaut, que le « auteur / institution / société » justice en double aveugle et de l'égalité ainsi que l'examen de la destruction résultant:

Le problème se produit dans toute la liste des documents présentés n'est pas statique, mais d'après le nom de examinateurs (nom, ie / organisation / entreprise) est continuellement mis à jour.

Lorsque les examinateurs d'entrer des informations conflits de noms de domaine, le système CMT filtrera automatiquement les documents ont conflit, le nom de domaine et, par conséquent, les examinateurs ne pas entrer dans un nom de domaine ou en entrant le conflit, deux documents, puis donner une liste du système selon CMT , sera en mesure d'identifier les documents qui appartiennent au nom de domaine, En d'autres termes, il Équivalent à être en mesure de savoir quel papier est l'auteur ou qui appartiennent à quelle unité la .

sweichwald a noté que, tout en respectant les dispositions d'un examen en double aveugle, mais la plate-forme NIPS examinateurs de papier lui-même permet de tels papier approche proactive exposée nom de l'auteur et l'affiliation papier / société, mais aussi adapté à un des papiers individuels spécifiques, Belong négligence grave (négligence coupable) .

Quand il y a de telles failles dans le système, il est susceptible d'être exploité, mécanisme pour double examen aveugle échoue. Non seulement que, connaissant l'affiliation du papier, certains examinateurs sont susceptibles de choisir délibérément une unité de papier spécifique à la révision, ce qui a conduit à l'écart des résultats de l'évaluation.

En fait, sweichwald est la découverte de ce système de CMT de vulnérabilité sous accidentelle: c'était parce qu'il avait oublié, accidentellement entré dans le domaine d'un conflit, le journal a constaté que le nombre total de déclarations obtenir moins.

Alors, il compare sa liste pour trouver deux autre liste de certains journaux, en privé à un collègue a confirmé qu'il n'y a pas d'autre côté de lui dire directement sous le titre et le résumé de ce dernier document, les deux hommes ont échangé par informations, sweichwald tout à fait sûr, Il a vu que l'un de ses collègues thèse est soumis .

Dans une lettre à la boîte aux lettres NIPS AC, sweichwald dispositions expresses selon les critiques, il rentra dans le nom de domaine correct, tout en assurant qu'il ne sera pas un examen de ce document.

Multi-joueurs vulnérabilités du système de découverte continue, plus rapidement et en bon état

En plus de sweichwald, il y a un certain nombre d'examinateurs ont également trouvé des failles dans le système et de faire rapport, mais n'a pas reçu de réponse NIPS zone.

Il convient de noter que le problème de la situation avant de télécharger le papier arXiv prépublication et d'autres sites ou d'autres divulgation imprévue de l'identité est fondamentalement différente: il est Présent tout au long de la présentation du papier et de l'examen des problèmes sous-jacents du système, mais le système CMT3 est également utilisé plus de 1000 autres conférences en utilisant le double-aveugle, examen simple aveugle Cela signifie qu'une évaluation de la juste d'autres réunions sont susceptibles d'être détruits.

Selon le site officiel de CMT, 2016, les systèmes CMT ont été utilisés pour plus de 1000 conférences internationales, des séminaires universitaires et d'autres articles soumis à la vérification, impliquant des dizaines de milliers de documents et des milliers de leurs auteurs. Utilisez réunions CMT comprennent:

  • Conférence internationale de l'apprentissage machine (ICML)

  • Assemblage du système de traitement de l'information de progrès nerveux (PNM)

  • Et des conférences statistiques internationales (AISTATS) Intelligence artificielle

  • Incertitude Conférence Intelligence artificielle (AUI)

  • Conférence IEEE sur l'ordinateur Vision Pattern Recognition (de CVPR)

  • Conférence internationale sur la vision par ordinateur (de ICCV)

  • Conférence européenne sur la vision par ordinateur (de ECCV)

  • Conférence asiatique sur la vision par ordinateur (de ACCV)

  • Conférence britannique Vision (BMVC)

  • Conférence internationale IEEE Engineering Data (CIED)

  • Gestion des données ACM Groupe spécial d'intérêts (SIGMOD)

  • Grandes conférences internationales Base de données (VLDB)

  • Conférence internationale IEEE données de compression (DCC)

  • IEEE Conférence internationale sur le multimédia et Expo (CIME)

CMT a été initialement développé pour le SIGKDD 1999. Depuis lors, CMT a subi plusieurs améliorations majeures et extensions, a jusqu'à présent été utilisé dans des milliers de réunions.

29 mai vulnérabilités du système sweichwald a signalé ce au Président des domaines et NIPS 2018 administrateur système CMT. 31 mai NIPS groupe de conférence donne la réponse, il a dit qu'ils ont remarqué ce problème et a suggéré l'ancien après que le système est entièrement traitée, le public de la matière.

Répondre groupe NIPS conférence, a déclaré qu'il avait plus d'une personne pour leur rappeler cette vulnérabilité, le système sera fixé le plus tôt possible, et ne laissez pas le calme avant sweichwald première chose à résoudre

2 août réunions CMT qui incluent l'utilisation du système, y compris tous les fixes.

Maintenant, réunion d'examen à double insu, CMT afin que personne ne puisse renouveler leur conflit de nom de domaine, et l'occasion de voir les examinateurs avant tout document, entrez le nom de domaine qu'une seule fois.

Selon les évaluations officielles, l'examen actuel n'a trouvé aucune autre information Conférence CS / AI été fuite.

Cut se tiendra que pendant 10 années consécutives Atelier de biologie computationnelle

événements NIPS 2018 n'ont pas fini.

Aussi chez 7 Août, certains chercheurs reflètent cette année, NIPS aucune raison de couper le ML pour Compbio (MlcB) atelier Ce champ de séminaire de biologie computationnelle sur l'apprentissage machine, NIPS est que l'informatique biologique du séminaire concerné, il a été détenu pendant 10 ans, et en 2017 le nombre de documents présentés en établissant un record historique.

biologie computationnelle est une branche de la biologie. Selon la définition de l'Institut national américain de la santé (NIH), qui fait référence à l'élaboration et à l'application des méthodes d'analyse des données et de la théorie, la modélisation mathématique et de la technologie de simulation informatique pour une recherche interdisciplinaire de groupes biologiques, comportementaux et sociaux système .

Définition de la biologie computationnelle à grande échelle, y compris l'informatique, les mathématiques appliquées, l'animation, les statistiques, la biochimie, la chimie, la biophysique, la biologie moléculaire, la génétique, la génomique, l'écologie, l'évolution, l'anatomie, les neurosciences et les sciences Fondation visuelle.

Ironie du sort, lorsque les documents soumis à la NIPS, « Combio » appartient toujours à l'un des sous-champs.

Certaines personnes se lamenter sur Twitter, combien de personnes savent que la science informatique et la biologie computationnelle « AI médicale » ou « application clinique AI » est un concept complètement différent?

Si le champ diminue progressivement pas de problème, mais, comme mentionné précédemment, en 2017 le nombre de documents soumis à l'atelier en établissant un record historique, lors de l'atelier les participants attendent également dans une longue file d'attente, la présentation et la discussion a été très actif.

En conséquence, il y a eu de nombreuses voix ont exprimé leurs regrets sur Twitter.

Le bénéfice du doute, peut-être l'indépendance mlcB, et de devenir une conférence distincte des chances.

Sinon, comment devrions-nous faire?

Nouvelle Afrique, en Amérique latine, gay et AI Atelier juif

Cependant, cette session NIPS n'est pas de mauvaises nouvelles.

Selon « l'apprentissage machine inclusive » ce compte, ce NIIPS deviennent plus inclusif et diversifié - en plus de l'atelier d'apprentissage de la machine féminine qui existait auparavant (WimL), a également ajouté AI Afrique, en Amérique latine AI, AI et juifs gay AI ces ateliers.

NIPS deviendront plus inclusif et diversifié, ce qui est évidemment une bonne chose. Mais il ne pouvait pas non empêcher de faire réfléchir les gens, peut-être qui est la raison pour calculer l'atelier de biologie a été coupée?

Après tout, le site est seulement si grand, et NIPS inscriptions en 2017 a été aussi élevé que 8.500.

Dans le Sichuan, plus de 8000 personnes entassés dans la piscine en raison de la température élevée. Source: Sichuan en ligne

Bien sûr, NIPS 2017 figure aussi solitaire, lauréat du prix Turing, le père du discours de réseaux bayésiens Judea Pearl au public très peu.

NIPS 2017 lauréat du prix Turing Judea Pearl figure de solitaire. Source: Zhou Zhihua

Mais pas de problème, et maintenant Judea Pearl est en vie sur Twitter et autres réseaux sociaux, préoccupés par le nombre a augmenté à plus de 9100, il enthousiasme pour cause à effet / modèle d'apprentissage ravivé, cette fois s'il a une conférence, il devrait également emballé .

Documents de référence

  • NIPS 2018 Système d'information de communication complète soumission vulnérabilités: https: //sweichwald.de/leak-nips2018-cmt/

  • CMT site officiel: https: //cmt3.research.microsoft.com/Content/CMT.html

New Ji-won AI MONDE 2018 Assemblée de billets Early Bird []

En solde!

New Ji-won aura lieu le 20 Septembre AI Conférence mondiale des 2018 à Beijing National Convention Center, a invité l'apprentissage machine parrain, en mettant l'accent sur le professeur de l'intelligence artificielle à la CMU Tom Mitchell, Maike Mark Si-Tiger, Zhou Zhihua, un grand Cheng Tao, Chen Yiran AI et d'autres dirigeants et le destin de l'humanité.

Le site officiel de l'Assemblée générale:

Maintenant jusqu'au 19 Août New Ji-won nombre limité de billets Early Bird à la vente, la communication étroite avec le leader mondial de l'IA, l'intelligence artificielle, témoin de l'industrie mondiale à pas de géant.

  • Billets de ligne active lien:

  • billet de ligne active de code à deux dimensions:

Le comportement de conduite arrogante plus endémique, ce qui vous le plus amer
Précédent
billets d'avion à bas prix, de la beauté et coexiste cuisine Ceylan qui vous attend!
Prochain
JAC joint-venture de Volkswagen semble être des pertes de trading?
« 92 anniversaire de la naissance de Marvin Minsky » pionnier AI vie légendaire, a personnellement dirigé « AI hiver »
[Rappelez] « céphalosporine cache sa poche, exhortant les gens à boire sur un dig! » Blague Nouvel An, l'amère expérience!
« 92 anniversaire de la naissance de Marvin Minsky » pionnier AI vie légendaire, a personnellement dirigé « AI hiver »
20 monde de fées fantastique de Voyage, le plus vous voulez aller?
Musc les vendeurs à découvert ont été mis en examen, accusé de Tesla pousser artificiellement la radiation cours des actions
Deux véhicules sont entrés en collision, le moment critique et Bing Gege à double Ruoli économisent!
« Édition Asie du Sud-Maroc » Viens! Sans visa, prix ultra-ultra-bas, cinq billets 2k +!
Statique et dynamique combinaison grève des pilotes SAIC MG GS premier Rallye Go
Analyse comparative Apple, la Chine CV licorne flashé arme secrète 3D + AI
Cinq ans après les meurtres et se sont enfuis, les centres commerciaux de police du Shandong à saisir ...... 16 histoires, tous merveilleux!
intéressant! Les demi-finales de l'ABC sont actuellement l'entraîneur duel, l'entraîneur du nord-est Doufa Yonas Caesar