Comment les centres de données hyperscale se comportent en tant que charges alimentées par onduleurs

Principaux enseignements

• Un campus hyperscale réagit à une perturbation du réseau via le micrologiciel du convertisseur plutôt que par le biais d'une masse en rotation ; sa réponse en cas de défaut relève donc d'un paramètre de protection plutôt que d'une propriété physique.
• L'injection d'harmoniques, les seuils de maintien en service et les rampes de charge agissent à des échelles de temps différentes, et une seule étude de planification ne permettra pas de les prendre tous en compte simultanément.
• Les paramètres de protection recueillis salle par salle, associés à une simulation dans le domaine temporel, permettent de transformer une demande de raccordement de grande envergure en une solution technique que les responsables de la planification peuvent défendre.

Un centre de données hyperscale se présente au réseau comme une charge pilotée par onduleur, car la quasi-totalité de la puissance qu'il consomme transite par des composants électroniques de puissance qui découplent les serveurs de la tension et de la fréquence du réseau.

Les transformateurs du site alimentent les redresseurs, les systèmes d’alimentation sans coupure maintiennent les bus en courant continu, et les variateurs de vitesse font fonctionner l’installation de refroidissement ; ainsi, le site réagit à une perturbation par le biais de seuils de micrologiciel plutôt que par sa masse. Un défaut à 230 kV sur l’Interconnexion de l’Est l’a clairement démontré, lorsque près de 1 500 MW de charge ont été coupés au moment où le défaut s’est résorbé en 42 millisecondes. Aucune défaillance mécanique n’est survenue. Des milliers d’alimentations électriques se sont synchronisées entre elles au même instant.

Les études de planification qui considèrent un campus comme un bloc de puissance constant passent systématiquement à côté de cette réponse. Le comportement qu’il convient de modéliser réside dans les convertisseurs, dans la répartition des réglages de protection entre les bâtiments et dans le profil de montée en puissance imposé par la charge, et aucun de ces éléments n’apparaît dans une analyse de flux de charge. Si l’on néglige ces trois aspects, le premier défaut le plus proche devient l’objet de l’étude.

Qu'est-ce qui fait d'un centre de données hyperscale une charge fonctionnant avec des onduleurs ?

Un centre de données hyperscale est considéré comme une charge à onduleurs, car chaque chemin reliant le réseau électrique à un processeur en fonctionnement passe par un convertisseur. Les redresseurs alimentent les bus en courant continu, qui à leur tour alimentent les cartes mères et les disques durs des serveurs. Aucune machine tournante ne se trouve entre le réseau électrique et les baies.

Imaginez un site de 250 MW réparti sur cinq bâtiments. Chaque bâtiment dispose de son propre système d'alimentation sans coupure, chaque rack est équipé d'alimentations redondantes avec correction active du facteur de puissance, et les groupes frigorifiques fonctionnent avec des variateurs de vitesse. La tension du réseau alimente une boucle de régulation qui détermine la quantité de courant à prélever.

Cette distinction modifie la nature même de l'installation. Une charge à moteur ralentit lorsque le système ralentit et restitue l'Énergie ie stockée pendant quelques cycles. Une charge alimentée par un convertisseur ne fait ni l'un ni l'autre. Elle maintient sa consommation d'énergie à un niveau constant lorsque la tension d'entrée chute, de sorte qu'elle se comporte comme un bloc de puissance constante jusqu'à ce qu'un seuil soit franchi, après quoi elle ne se comporte plus comme une charge du tout.

Comment les circuits d'entrée des redresseurs influencent le profil harmonique de l'installation

Les circuits d'entrée des redresseurs déterminent la signature harmonique, car ils prélèvent du courant sous forme d'impulsions plutôt que de sinusoïdes. Les alimentations de serveurs dotées d'une correction active du facteur de puissance maintiennent le facteur de puissance de déphasage proche de l'unité et repoussent la distorsion dans la gamme des kilohertz. Les variateurs à six impulsions de l'installation mécanique continuent toutefois d'injecter de fortes harmoniques de cinquième et de septième ordre.

L'aspect mécanique domine le spectre des harmoniques d'ordre inférieur. Une installation de refroidissement alimentant plusieurs mégawatts de variateurs à six impulsions génère un courant harmonique de cinquième ordre mesurable au niveau du collecteur, tandis que les salles informatiques contribuent à une dispersion des harmoniques d'ordre supérieur que les limiteurs de distorsion classiques ne parviennent guère à maîtriser.

Le risque concret ne réside pas dans la distorsion au niveau des bornes de l'installation, mais dans la résonance. Les longues lignes de câbles moyenne tension ajoutent une capacité qui entre en résonance avec l'inductance de la source, quelque part entre la cinquième et la treizième harmonique. Si l'on atteint ce point avec un courant injecté suffisant, on obtient une amplification de tension, des déclenchements intempestifs des bancs de filtres et un échauffement des transformateurs qu'aucune étude en régime permanent ne met en évidence.

Pourquoi les paramètres de « ride-through » déterminent le moment où la charge est déconnectée

Les paramètres de « ride-through » déterminent le point de coupure, car la charge ne présente aucune inertie lui permettant de continuer à fonctionner pendant une chute de tension. L'alimentation d'un serveur continue de fonctionner pendant un nombre défini de millisecondes à une tension minimale prédéfinie. Si l'une ou l'autre de ces limites est franchie, l'alimentation cesse de fournir du courant ou l'onduleur bascule sur batterie.

Les équipes de mise en service définissent rarement ces limites de manière identique. Une salle peut passer à 0,85 par unité après 20 millisecondes, car c'est la valeur définie par défaut dans le micrologiciel d'origine, tandis qu'une salle construite deux ans plus tard continue jusqu'à 0,7 par unité. Le schéma unifilaire semble uniforme. La réponse électrique est en escalier.

L'agrégation transforme cela en un problème systémique. Des milliers de sources d'alimentation présentant des seuils similaires ne se déconnectent pas de manière aléatoire sur toute une plage de tension. Elles agissent de concert, et un défaut survenu à deux sous-stations de là entraîne la perte de centaines de mégawatts en une seule fois. Le réseau absorbe la hausse de tension et l'excédent de puissance réactive qui en résultent sans aucun avertissement, car l'étude d'interconnexion n'avait jamais envisagé ce scénario.

« Ils sont d'accord, et une panne survenant à deux postes électriques de là entraîne la perte de plusieurs centaines de mégawatts d'un seul coup. »

Comment les clusters d'entraînement de l'IA génèrent des fluctuations de charge seconde par seconde

Les clusters d’entraînement en IA connaissent des fluctuations importantes, car des milliers d’accélérateurs exécutent une tâche synchronisée. La charge de calcul atteint son maximum pendant un cycle d’entraînement, puis diminue lors des points de contrôle et des communications collectives, ce qui fait qu’un hall consomme des dizaines de mégawatts en une seconde. Les charges de travail Web classiques ne se sont jamais comportées de cette manière.

Les fluctuations de consommation des installations sont enregistrées par le système en raison de leur ampleur. Les centres de données américains ont consommé 176 TWh en 2023, soit près de 4,4 % de la production nationale d’électricité, et la même analyse du Berkeley Lab estime la consommation de 2028 entre 325 et 580 TWh. Une salle de formation de 150 MW qui s’interrompt pour un enregistrement de point de contrôle se débarrasse de la majeure partie de sa charge de calcul en moins de deux secondes et la reprend tout aussi rapidement.

La réponse du régulateur et la commande automatique de production ont été ajustées pour s'adapter à une charge qui varie à l'échelle de la minute. Une variation progressive se répétant toutes les quelques minutes se situe à mi-chemin entre les produits de régulation et de suivi de charge proposés par la plupart des marchés, et se traduit par une dérive de fréquence dans les zones d'équilibrage de plus petite taille. Les installations qui modulent ces rampes dans leur micrologiciel sont plus faciles à raccorder que celles qui ne le font pas.

Ce que le réseau observe à l'échelle des sous-cycles et des minutes

Le réseau perçoit une installation différente selon l'échelle de temps considérée. À une échelle inférieure à un cycle, il perçoit une source de courant harmonique ; à l'échelle de quelques dizaines de millisecondes, un seuil de protection ; à l'échelle de quelques secondes, une variation de la charge ; et à l'échelle de quelques minutes, l'installation de refroidissement. Un modèle couvre rarement ces quatre cas de manière satisfaisante.

Le champ d'application de l'étude doit refléter cette distinction. Les essais de traversée exigent une fidélité des formes d'onde, tandis que les essais en rampe nécessitent l'étude du comportement de planification et de la réponse du système de refroidissement, éléments qu'aucun modèle de convertisseur ne prend en compte.

Pourquoi la modélisation EMT permet de mettre en évidence ce que les études de flux de charge ne prennent pas en compte

La modélisation EMT permet de saisir ce que l'analyse des flux de charge ne peut pas rendre compte, car elle résout le réseau dans le domaine temporel en conservant intacts les circuits de commutation et les boucles de régulation. L'analyse des flux de charge fournit un point de fonctionnement en régime permanent. Elle ne permet pas de visualiser le transfert d'une batterie, la commutation d'un redresseur ou le franchissement d'un seuil 40 millisecondes après l'apparition d'un défaut.

Les études portant sur un grand campus combinent généralement des modèles agrégés de convertisseurs pour les salles informatiques, un modèle explicite de la commande de l’onduleur et de sa logique de transfert, ainsi qu’un modèle de l’installation pour les variateurs. C’est en simulant ces éléments avec des formes d’onde de défaut enregistrées qu’une équipe se rend compte que la courbe de maintien en service supposée était trop optimiste. Les travaux d’ Simulation HIL s menés chez OPAL-RT vont encore plus loin : ils intègrent un contrôleur d’installation dans un réseau simulé avec des pas de temps de l’ordre de la microseconde, ce qui permet de tester les paramètres livrés face aux perturbations qui se sont réellement produites.

Le compromis porte sur la durée d'exécution et l'accès aux données. Les modèles détaillés nécessitent des paramètres que l'opérateur considère comme confidentiels, et leur exécution est lente si l'on modélise chaque rack. L'agrégation résout le problème de la durée d'exécution, à condition de conserver la répartition des paramètres de protection au lieu de les regrouper en une seule valeur.

« On ne verra pas de transfert de batterie, de commutation du redresseur ni de franchissement d'un seuil 40 millisecondes après l'apparition d'un défaut. »

Quelles hypothèses de modélisation s'avèrent erronées lors des études d'interconnexion ?

Les études d'interconnexion échouent lorsqu'elles décrivent le campus comme un bloc « sage ». Les hypothèses qui s'avèrent erronées concernent l'uniformité, la sensibilité à la tension et la vitesse de réaction de la charge. Chacune d'entre elles masque un comportement qui se révèle lors du premier défaut grave.

• Considérer le réseau du campus comme une source d'alimentation constante à toutes les tensions, ce qui masque le seuil de coupure.
• En partant du principe qu'un seul paramètre « ride-through » est appliqué à l'échelle du site alors que chaque salle a été livrée avec un micrologiciel différent.
• Modélisation du refroidissement sous la forme d'un bloc fixe plutôt que de modules réagissant à la tension.
• En utilisant un profil moyen annuel qui efface les variations seconde par seconde générées par un groupe d'entraînement.
• Sans tenir compte du courant harmonique que les circuits d'entrée du redresseur injectent dans le système collecteur.

Pour corriger ces éléments, il n'est pas nécessaire de modéliser chaque serveur. Il faut plutôt définir des paramètres de protection salle par salle, préciser les types de disques utilisés dans l'installation mécanique et disposer d'un profil de rampe fiable fourni par l'équipe d'orchestration. Ces trois éléments permettent d'affiner les résultats de l'étude bien davantage que n'importe quel affinage du modèle réseau.

Ce que des modèles de charge précis apportent aux planificateurs et aux opérateurs

Des modèles de charge précis fournissent aux planificateurs des informations exploitables. Ils indiquent la part de la charge qui reste connectée en cas de défaut, celle qui se déconnecte, ainsi que la vitesse à laquelle le reste de la charge se déplace par la suite. Cela permet de transformer une demande de raccordement importante, qui relevait auparavant d'un débat sur les capacités, en un enjeu d'ingénierie.

La rigueur technique qui se cache derrière tout cela n’a rien de glamour. Elle consiste à recueillir des paramètres que personne n’a consignés par écrit, à conserver l’écart entre les salles au lieu de le lisser par une moyenne, et à revalider le système chaque fois qu’une nouvelle salle est mise sous tension avec un micrologiciel différent. Les équipes qui négligent cette étape ne découvrent le fonctionnement de leur installation que la première fois qu’un défaut à proximité se résout en trois cycles. C’est le travail que soutient OPAL-RT: intégrer les commandes de l’installation et les modèles de réseau dans une seule boucle en temps réel, afin que le comportement soit mesuré avant que le gestionnaire de réseau ne le mesure à votre place.