Active IQ à grande échelle : l’informatique proactive en coulisses

Que faut-il pour transformer la télémétrie d'infrastructure en quelque chose de réellement utile pour les clients ?

Chez NetApp IT, il ne suffit pas de collecter des données. Il faut être capable de les ingérer en toute sécurité, de les traiter à grande échelle, de les analyser rapidement et de les transformer en recommandations sur lesquelles les clients peuvent agir. C'est le rôle que Active IQ joue dans l'écosystème NetApp.

Derrière chaque recommandation, alerte de risque, information sur la santé et action de support automatisée se trouve une architecture conçue pour aider les clients à passer d'un support réactif à des opérations proactives.

Pour NetApp IT, il s'agit de bien plus qu'une simple histoire de produit. C'est un cas d'usage concret : celui de l'exploitation d'un service à grande échelle et gourmand en données sur notre propre technologie, tout en garantissant la sécurité, les performances et l'efficacité opérationnelle.

Active IQ est conçu pour aider les clients à mieux comprendre l'état de leurs environnements grâce aux données de télémétrie envoyées par leurs systèmes. Cette télémétrie n'est pas des données de l'entreprise. Il s'agit d'informations opérationnelles sur les systèmes eux-mêmes, notamment les détails de configuration, les tendances de capacité, les compteurs de performance et les journaux. À grande échelle, cela s'accumule rapidement.

Aujourd'hui, NetApp traite chaque mois des milliards de points de données sur l'ensemble de sa base installée mondiale, réalise des milliards d'évaluations des risques et gère un environnement mesuré en pétaoctets. L'échelle compte, mais la véritable valeur réside dans la manière dont NetApp transforme ces données en informations exploitables.

L'objectif est de transformer la télémétrie en action.

Fournir des informations exploitables à grande échelle

Une fois les données de télémétrie reçues, elles sont traitées, enrichies et analysées afin d'alimenter les tableaux de bord, les API et les intégrations qui constituent le cœur d'Active IQ Digital Advisor. Cela offre aux clients, partenaires et équipes autorisées de NetApp un moyen cohérent de surveiller l'état du système, d'identifier les risques et de prendre des mesures correctives avant que les problèmes ne deviennent perturbateurs.

Ce modèle proactif génère une valeur mesurable. Selon NetApp, 98 % des problèmes techniques détectés par Active IQ sont prédits et résolus de manière proactive. Les clients utilisant l’écosystème Active IQ résolvent également leurs problèmes d’assistance en moyenne deux fois plus vite, et la plateforme a permis d’éviter des millions d’heures d’interruption chaque année.

Ces résultats dépendent de l'infrastructure qui sous-tend l'expérience.

Création de la plateforme sous-jacente d'Active IQ

La plateforme NetApp Active IQ repose sur une architecture de microservices moderne, dont une grande partie est conteneurisée et s'exécute sur Kubernetes. Le pipeline de traitement utilise Kafka pour acheminer la télémétrie à travers plusieurs étapes, permettant aux équipes de faire évoluer les services indépendamment, de prioriser les charges de travail si nécessaire et d'assurer un flux de données efficace dans le système.

Au fil de ce processus, les données de télémétrie sont transformées et enrichies de contexte supplémentaire, notamment d'informations sur la base installée et les produits, permettant ainsi à la plateforme d'effectuer des diagnostics et de générer des recommandations. Les données analysées sont stockées dans MongoDB, tandis que les API et les services d'analyse rendent ces informations accessibles via GraphQL, REST et les environnements d'analyse internes.

NetApp utilise également StorageGRID pour les composants nécessitant un stockage d’objets compatible S3 et Dremio pour prendre en charge l’accès et l’analyse internes de type data lakehouse.

Du fait de l'envergure de la plateforme, l'efficacité du stockage n'est pas un luxe. Elle est essentielle. NetApp bénéficie directement des efficacités de stockage intégrées à sa technologie, ce qui rend possible la gestion d’un environnement de télémétrie mesuré en pétaoctets.

Concevoir pour la cyber-résilience

La reprise après sinistre est un autre élément essentiel de la conception. Afin de répondre aux exigences de conformité et de résilience, NetApp utilise SnapMirror pour la réplication géographique entre les sites américains. Cela permet à l’équipe de conserver des copies de sauvegarde des données stratégiques et de simuler la reprise après sinistre en déployant des ressources de calcul et en montant des ensembles de données en miroir en cas de besoin. FlexVol technologie contribue également à la prise en charge des scénarios de migration à faible interruption, ce qui est particulièrement important dans un environnement où le déplacement de données sans interruption de service est une exigence constante.

Sécurisation de la télémétrie de bout en bout

NetApp utilise le cycle de vie du développement sécurisé (SDL), les analyses de sécurité et les tests d'intrusion pour garantir que le processus de développement et l'infrastructure démarrent et restent sécurisés.

Les données de télémétrie sont intégrées au système via des canaux chiffrés, principalement HTTPS avec TLS. Elles transitent ensuite par un service de chiffrement qui identifie les informations potentiellement personnelles ou permettant d’identifier un client, puis les masque ou les chiffre immédiatement. Même les informations telles que les coordonnées, les noms de volumes ou les noms d’agrégats sont traitées avec précaution afin de réduire les risques. Les clés de chiffrement sont strictement contrôlées et accessibles uniquement au personnel autorisé.

L'accès aux données de télémétrie et aux analyses est régi par des contrôles d'accès stricts basés sur les rôles. Les clients peuvent accéder uniquement à leurs propres environnements. Les partenaires peuvent accéder uniquement aux systèmes qu'ils sont autorisés à prendre en charge. NetApp accorde aux employés un accès en fonction de leur rôle et des exigences de nécessité, les demandes d'accès temporaires étant soumises à approbation et à des limites de temps.

Application de l'IA à l'intelligence opérationnelle

L'IA et l'apprentissage automatique contribuent également à accroître la valeur de la plateforme. Aujourd'hui, Active IQ utilise des approches prédictives et des systèmes experts pour des tâches telles que la prévision des capacités et le signalement des systèmes à risque. NetApp utilise également la recherche sémantique en interne pour aider les équipes de support à comparer les nouveaux problèmes à des cas similaires survenus dans l'historique et à accélérer le tri. À mesure que de nouvelles fonctionnalités telles que AIDE continuent d'évoluer, l'objectif reste le même : réduire le délai de résolution et permettre aux équipes d'agir plus rapidement grâce à un contexte plus précis.

Transformer l'échelle en valeur client

L'enseignement principal est le suivant : l'informatique proactive ne se limite pas à la simple génération d'alertes. Il s'agit de mettre en place l'infrastructure, les contrôles et le pipeline de données nécessaires pour transformer l'échelle en informations.

C’est ce que Active IQ démontre au sein de NetApp. Il s’agit d’un exemple concret de la façon dont une infrastructure de données moderne, une architecture axée sur la sécurité et l’automatisation peuvent collaborer pour aider les clients à consacrer moins de temps à réagir aux problèmes et plus de temps à les anticiper.