avant-propos
Récemment, l'autorité mondiale IT cabinet de conseil Forrester a publié "The Forrester WaveTM: CloudData Entrepôt Q42018" rapport, base de données analytique Alibaba (AnalyticDB) a été sélectionné! AnalyticDB comme Alibaba recherche indépendante et le développement de l'entrepôt de données en nuage temps réel de qualité PB est entièrement compatible avec le protocole MySQL et SQL: 2003 syntaxe standard, vous pouvez analyser instantanément milliseconde de la perspective multidimensionnelle et explorer les données d'affaires pour un billion, pour aider les clients et l'ensemble de l'analyse des données de la valeur de l'analyse hors ligne traditionnelle à la génération suivante du mode d'analyse en temps réel en ligne. Cet article interprétation de la profondeur de la valeur client AnalyticDB a été sélectionné derrière le produit de base et apporter.
Une capacité de base: en temps réel rapide et
base de données d'analyse des données de niveau peut AnalyticDB billion pour l'analyse en temps réel de la perspective multidimensionnelle en un instant, trouver rapidement la valeur des données. AnalyticDB complexe vitesse de requête SQL par rapport à la base de données relationnelle traditionnelle 10 fois plus rapide. En outre, AnalyticDB peut rapidement évoluer jusqu'à des milliers de nuds à grande échelle, et d'améliorer encore la requête temps de réponse. Trois modules ensemble pour construire une longueur d'avance sur les avantages de performance de la concurrence:
- optimiseur SQL intelligente : SQL Optimizer pour les requêtes SQL complexes, AnalyticDB pour obtenir une variété d'optimisation de réécriture de la requête, et sélectionnez chemin optimal basé sur JOIN COMMANDE informations statistiques et soutenir les fonctions de fusion CTE. A la latence faible même temps pour les requêtes simultanées élevées, fournir des renseignements cache du plan, sera semblable aux plans Pattern SQL sont mis en cache, afin d'éviter de répéter les frais généraux d'optimisation.
- Xi et moteur de calcul : AnalyticDB mise à jour complète en 2017 pour une nouvelle génération Xi et distribué des moteurs de calcul, l'utilisation globale de l'architecture MPP et le soutien modèle de calcul de DAG, l'introduction de la technologie LLVM optimisation du compilateur JIT et d'autres amélioration de la performance intra-nud d'exécution a plus que doublé. tâches d'analyse des données sont divisées en petites particules dans l'unité de calcul Xi et le moteur de calcul calcule le moteur mécanisme d'interrogation de planification intégrée de partage peut assurer un fonctionnement stable sous des tâches simultanées.
- moteur de stockage basaltique : AnalyticDB soutenir les rangs de stockage mixte, tandis que pour les différents types de données, lorsque les données en temps réel est écrit, la construction d'indexation intelligente une variété de dimensions, y compris le B + index, indice intervalle, l'indice inversé, un index bitmap, etc., et l'algorithme d'indexation traditionnelle l'innovation, la mise en place du filtrage dynamique, retard, etc. matérialisé, ce qui réduit considérablement les E / S, ou une gamme haute performance de points d'accès, une centaine de milliards d'enregistrements associés analyse de soutien.
Les compétences de base II: à grande échelle
AnalyticDB est architecture entièrement distribuée, de sorte que le noeud de support de base de données dynamique dilatation linéaire ECU à des milliers de nuds. Les utilisateurs peuvent améliorer grandement la requête SQL à la vitesse de réponse en expansion latérale, et en échange de haute traitement SQL concurrency. Vol AnalyticDB aliyun construit système basé, AnalyticDB stratifié l'architecture découplé, tandis que l'analyse et le calcul, les données sont écrites, et construit de manière séparée en différents noeuds d'index, tandis que différents types de mode de fonctionnement multi-noeud pour atteindre une haute disponibilité des données de phase stockées dans système de fichiers distribué Pangu, pour atteindre une haute fiabilité et haute performance en lecture-écriture d'E / S, l'expansion élastique et d'atteindre une haute disponibilité dans l'architecture globale. Chaque structure de la couche architecture AnalyticDB, sont pleinement pris en compte l'ampleur des problèmes d'évolutivité.
Trois compétences de base: haute réel écrit en même temps et mis à jour
Parce que les deux la couche d'accès frontal, supports de noeud d'écriture dynamique d'expansion à grande échelle, les clients peuvent écrire une capacité de 100.000 TPS plus petite taille, jusqu'à 10 millions de + TPS capacité d'écriture par le noeud d'expansion horizontale, écriture en temps réel, second niveau de données vu de l'analyse de l'ensemble des données sont écrites dans la commande de retard dans la seconde étape. PB données de niveau de support maximal de table unique, dix billions de dossiers, l'entrepôt de données traditionnel est généralement le mode hors-ligne des données de charge, n'a pas la possibilité d'écrire en même temps élevé à temps réel. Il est dû au fait d'énormes quantités de données en temps réel avec la capacité d'écriture, la rapidité AnalyticDB de l'analyse des données est très élevé, il est calcul hors ligne des données d'entreprise dans le transfert en temps réel de la prochaine génération de solutions de base.
Quatre capacités essentielles: Flexible
AnalytiDB la fois la couche d'accès frontal ou une couche élastique est calculée, et la couche de stockage de données sont conception entièrement distribuées, le seul point d'ensemble no. De plus une architecture informatique de stockage séparé, les avantages sont extrêmement flexibles. Les clients ne peuvent pas seulement Cloud sur la flexibilité pour ajuster le nombre de noeuds à tout moment, vous pouvez également faire avec les spécifications exemple de portance dynamique. AnalytiDB tout en soutenant la commutation souple entre les exemples de performance et de stockage de type SATA SSD exemple. Par exemple: haute performance peut être augmentée du 8 au 12 Exemple performance c4 exemple c8, huit ou tombe de 12 c8 c4, même haute performance passe de deux à quatre noeuds c8 stockage SATA de grande S2n etc., les entreprises peuvent véritablement contrôler les coûts flexibles.
Cinq capacités essentielles: la facilité d'utilisation
AnalyticDB comme un nuage hébergé entrepôt de données SQL de qualité PB, protocole MySQL hautement compatible et SQL: 2003, facile à utiliser et couramment utilisés par les outils standards SQL BI, des outils ETL et des plates-formes peuvent être. Ali nuage associé à des services de transmission de données (DTS) + package de visualisation de données (Datav & QuickBI), facilement glisser-déposer pour les données complètes à temps réel des entreprises de construction de l'entrepôt. AnalyticDB conçu pour aider les compagnies à réduire le seuil des données en temps réel des opérations de construction.
Les données pour les entreprises pour résoudre le problème de l'efficacité des bâtiments et de la performance
Groupe Quartet (4PX) est le leader des fournisseurs de services de fournisseur d'électricité cross-frontière. Après la livraison du Quatuor de l'équipe de technologies de l'information depuis de nombreuses années dans la construction de la plate-forme de données en ligne, nous avons besoin d'un peu de temps la plate-forme de données en temps réel de niveau PB de construction supports numériques opérations. Quartet de la technologie de l'information dans l'enquête sur une série de solutions, le coût et l'efficacité globale de construction et d'autres facteurs, le choix final basé sur AnalyticDB pour construire la plate-forme de données en temps réel. Les deux parties travaillent ensemble, dans une période de temps très court par DTS + AnalyticDB + DataV / suite QuickBI rapidement et facilement glisser configuration goutte complété le nombre réel infrastructure initiale 4PX d'entreprise de postes.
Sans lui populaire comme un appareil photo pour prendre des photos smart App, App et une variété de données utilisateur à déclarer faire une analyse en temps réel pour aider le personnel des opérations à effectuer une analyse de l'efficacité des campagnes, et les développeurs App pour faire l'analyse, et d'optimiser en permanence l'expérience utilisateur et la qualité App. La quantité de données d'environ 10 milliards, soit mis à jour dans le stockage en temps réel, les premiers clients du programme sont MySQL, suite remplacé MongoDB, écrire pour résoudre le problème en temps réel, mais d'analyser les performances géant lent. Après avoir utilisé l'instance de base de données d'analyse de type de stockage, les données de trafic est écrit directement AnalyticDB, non seulement résolu les problèmes réels de haute écritures concurrentes, pour analyser les performances d'un complexe de quelques secondes à 40 minutes + diminuer les niveaux, haut stade QPS 1800+.
clients industriels typiques - ils utilisent aussi AnalyticDB
À l'avenir: la réserve de marche + plus innovante pour construire un écosystème plus riche
base de données d'analyse AnalyticDB, comme Alibaba la prochaine génération de l'entrepôt de données en temps réel de qualité PB, la valeur comptable de la mission des données au sein du Groupe et l'analyse en temps réel du client nuage. Le rapport peut être vu à travers les grands services de données d'entreprise dans la phase CDW, flexible, facile à utiliser, self-service est devenu la principale tendance, le prochain sera sur la facilité de AnalyticDB de construction écologique de l'utilisation, le canal de données, gestion des tâches, la visualisation autour continuer à faire large, si profonde. Mais aussi pour l'avenir s'approvisionner force de base et de réaliser des progrès substantiels: 1. Analyser la base de données AnalyticDB pour la première fois dans le « double 11 mondial Carnival » en utilisant la technologie d'accélération GPU pour accélérer, dans le cas du coût significativement de calcul plus faible, les services d'affaires mondiaux analyse des données saisies à partir des temps hors ligne, le soutien de deuxième niveau d'analyse en temps réel des données de vitesse calculées par rapport au niveau de PB T + 1. 2. L'analyse du premier vecteur de soutien INTIME, boxes à chevaux et autres nouvelles reconnaissance de scène de détail, les algorithmes de recommandation, intégration en temps réel de l'analyse des données structurées, en ligne et hors ligne pour passer à travers le prochain système d'adhésion de milliseconde, données à l'appui à temps réel interactive de la commercialisation en ligne. AnalyticDB pour la valeur de la ligne de données de la naissance, comme plate-forme d'entrepôt de données en nuage en temps réel, dans l'espoir de diriger la prochaine génération de nombre en temps réel de la capacité de l'entrepôt tout Pratt & Whitney aux entreprises d'aider à accélérer la transformation de l'exploration et de la valeur de données en ligne.
contrôle lent, utilisez AnalyticDB: https: //www.aliyun.com/product/ads
