Planification de l'extension des centres de données prêts pour le réseau à l'aide de simulations en temps réel

Principaux enseignements

• La capacité du réseau, la résistance aux pannes et les limites d'exploitation doivent déterminer l'ampleur de l'extension avant que l'affectation des sols, le nombre de halls ou les objectifs en matière de locataires ne soient fixés.
• La simulation d'un centre de données s'avère particulièrement utile lorsque la courbe de charge électrique, la puissance de refroidissement et le déploiement par étapes sont analysés comme un tout, plutôt que sous forme d'estimations distinctes.
• Les discussions avec les services publics s'avèrent plus fructueuses lorsque vous présentez des scénarios de crise modélisés, des limites par phase et des mesures d'atténuation, plutôt qu'une simple demande de charge de pointe.

L'extension d'un centre de données compatible avec le réseau électrique commence par l'élaboration d'un modèle du système d'alimentation avant même de passer au plan d'aménagement.

Cet ordre est important, car les services publics dimensionnent les interconnexions en fonction de la courbe de charge, des niveaux de défaut, des réglages de protection et de la marge disponible sur les lignes d'alimentation et les sous-stations voisines. Les centres de données ont consommé environ 460 TWh d'électricité en 2022. Cette ampleur explique pourquoi un nouveau campus est considéré comme un élément du réseau plutôt que comme un simple bâtiment commercial. Les risques liés au réseau apparaissent bien avant la mise sous tension.

Si vous envisagez d'agrandir vos centres de données sans vous exposer à des risques liés au réseau électrique, vous avez besoin d'un logiciel de simulation de centres de données qui intègre le comportement électrique, la charge de refroidissement et les choix de mise en service dans un modèle unique pouvant être testé. Un simulateur de centre de données vous indiquera quand une phase de 40 MW est compatible, quand une phase de 60 MW échoue, et ce qu'il faut modifier pour que l'une ou l'autre puisse être raccordée. Cette approche vous offre bien plus qu'une simple estimation optimiste de la puissance de pointe. Elle vous fournit une position de raccordement solidement étayée.

« La capacité du réseau correspond à l'enveloppe du site. »

Les limites du réseau doivent définir le périmètre d'extension avant la conception du site

La planification de l'extension doit commencer par les limites du réseau, car c'est ce dernier qui détermine la charge maximale, le comportement en cas de défaut, la courbe de montée en puissance et le schéma de redondance que le site peut prendre en charge. Une conception du site qui part de la superficie du terrain ou de la capacité informatique ne tiendra pas compte de la contrainte qui détermine en réalité la quantité d'énergie que l'on peut ajouter.

Un projet de campus de 90 MW prévu à proximité d'un poste de transformation de 115 kV peut sembler réalisable sur le papier, car le terrain est vaste et l'accès à la fibre optique est excellent. L'étude technique peut toutefois limiter la première phase à 32 MW si la charge des transformateurs, la congestion des lignes d'alimentation ou les capacités nominales des disjoncteurs sont déjà proches de leurs limites. Il est indispensable de connaître ces limites avant de dimensionner les bâtiments, les systèmes de secours et de conclure des engagements avec les locataires. La capacité du réseau constitue le cadre imposé par le site.

C'est pourquoi le premier modèle doit tester le point d'interconnexion, la robustesse du réseau en amont et l'impact des pannes de type « N-1 ». Une simulation de centre de données efficace comparera le fonctionnement normal à une perte d'alimentation, à une panne de transformateur et à une augmentation rapide de la charge due à la mise en service d'une nouvelle salle de serveurs. Si le site présente des défaillances dans ces scénarios, votre objectif d'expansion est erroné, même si le budget foncier et d'investissement semble satisfaisant. Une correction précoce coûte peu cher, tandis qu'une correction tardive bouleverse l'ensemble du programme.

La simulation du centre de données révèle la forme réelle de la charge

La simulation d'un centre de données doit estimer la courbe de charge à laquelle le réseau sera réellement confronté, et non pas se contenter d'un chiffre fixe tiré des données nominales. Les gestionnaires de réseau s'intéressent aux variations horaires, aux vitesses de montée en puissance, à la coïncidence avec les pics locaux et au comportement des systèmes de secours, car ces caractéristiques déterminent le risque d'interconnexion et les limites d'exploitation.

Une salle de 20 MW remplie de processeurs graphiques ne se comportera pas de la même manière qu'une salle de 20 MW remplie de serveurs de stockage. Dans un cas, la consommation peut augmenter de plusieurs mégawatts en quelques minutes dès le démarrage des tâches d'entraînement, tandis que dans l'autre, elle reste beaucoup plus stable tout au long de la journée. Les logiciels de simulation de centres de données doivent refléter cette différence en tenant compte des hypothèses de charge de travail mesurées, des pertes des onduleurs, de la puissance des pompes et de la réponse du système de refroidissement. Une simple moyenne pondérée masque l'événement de pointe que le fournisseur d'électricité étudiera en premier lieu.

C'est là qu'un simulateur de centre de données prend tout son sens. Il permet de tester les pics d'activité en semaine, les périodes de recharge des sauvegardes et la reprise de charge après maintenance sans intervenir sur le site en production. Les équipes qui négligent cette étape présentent généralement des chiffres de pointe bien lisses, puis passent des mois à expliquer pourquoi les résultats mesurés s'avèrent moins bons que prévu. Les planificateurs du réseau ne s'opposent pas à la croissance, mais ils s'opposeront fermement aux surprises.

La résistance aux courts-circuits détermine la charge maximale pouvant être connectée

La résistance aux courts-circuits indique le niveau de rigidité du réseau local et la charge supplémentaire qu'il peut supporter sans que cela n'entraîne une baisse de la tension ou des problèmes de protection. Un site présentant une faible résistance aux courts-circuits peut atteindre sa limite pratique bien avant d'atteindre la puissance nominale du transformateur indiquée sur le schéma unifilaire.

Prenons l'exemple d'une extension de 40 MW raccordée à un jeu de barres dont la contribution au court-circuit provenant du réseau en amont est faible. Les démarrages de moteurs, le comportement des redresseurs des onduleurs et les contrôles d'harmoniques peuvent faire chuter la tension à un niveau suffisamment bas pour déclencher des équipements sensibles lors d'une perturbation à proximité. Ces mêmes 40 MW, raccordés à un jeu de barres plus robuste, peuvent fonctionner normalement avec des mesures d'atténuation plus simples. C'est pourquoi les études d'impact sur le réseau doivent inclure des analyses de défauts, des cas de chutes de tension et la coordination des protections.

Vous devez également vérifier comment la production sur site interagit avec ce réseau fragile. Les générateurs qui semblent utiles en cas de coupure de courant peuvent compliquer la gestion des courants de défaut, la synchronisation et le timing des transferts lors des commutations normales. Si vous attendez que le rapport du fournisseur d'électricité soulève ces problèmes, votre conception mécanique et électrique sera déjà figée. La résistance aux courts-circuits est un paramètre de dimensionnement, et non un élément de validation à ajouter en fin de processus.

Les modèles en temps réel permettent de détecter plus tôt les risques liés aux interconnexions

Les modèles en temps réel permettent de détecter plus tôt les risques liés à l'interconnexion, car ils permettent de tester le réseau, la centrale et les systèmes de commande comme un seul et même système actif. Cela revêt une importance particulière lorsque les variations de charge, les schémas de transfert et la logique de protection interagissent trop rapidement pour qu'une étude hors ligne puisse les saisir avec suffisamment de fiabilité.

Un test simulé permet de relier en boucle fermée un modèle de sous-station, les commandes d'onduleurs, les contrôleurs de générateurs et la logique de transfert avant que les documents de construction ne soient finalisés. Les équipes utilisant OPAL-RT peuvent exécuter ces scénarios avec le code réel des contrôleurs et observer le comportement du site en cas de perte d'alimentation, de dysfonctionnement d'un disjoncteur ou de variation brusque de la charge de refroidissement. Ce niveau de données diffère considérablement de celui d'un simple tableur statique. Il met en évidence les délais de réponse, l'instabilité et les déclenchements intempestifs.

L'intérêt ne réside pas uniquement dans la rapidité. Vous disposez d'une référence commune pour les ingénieurs électriciens, les équipes de contrôle-commande et les planificateurs des réseaux, ce qui permet à chacun de s'appuyer sur le même comportement transitoire. Une chute de tension de 150 millisecondes peut sembler insignifiante dans un rapport, mais elle peut déclencher une cascade de réinitialisations si les paramètres de résistance aux perturbations sont mal configurés. La simulation en temps réel met en évidence ces points faibles alors que vous avez encore la possibilité d'ajuster les paramètres, la topologie ou la taille des phases.

La simulation CFD permet de calculer avec précision la puissance de refroidissement des plans de centres de données

La simulation CFD est essentielle pour la conception des centres de données, car la charge de refroidissement représente une part importante de la charge électrique que le réseau doit supporter. La planification de la capacité électrique échoue lorsque les flux d'air, les circuits de refroidissement par liquide et l'évacuation de la chaleur sont estimés de manière approximative, au lieu d'être modélisés en fonction des densités de racks que vous installerez réellement.

Le refroidissement et la circulation de l'air peuvent représenter environ 40 % de Énergie d'un centre de données. Une salle informatique de 12 MW équipée d'échangeurs de chaleur à porte arrière, de pompes à eau de condensation et de refroidisseurs à sec peut faire grimper la charge totale du site bien au-delà de la consommation des serveurs prévue dans les premières analyses de rentabilité. La simulation CFD du centre de données vous fournit les températures d'entrée des racks, les schémas de recirculation et la réponse des pompes ou des ventilateurs en cas d'occupation partielle ou totale. Ces résultats doivent être intégrés au modèle de réseau, car la conception thermique modifie le comportement électrique.

Il en va de même lorsque l'on compare les salles à refroidissement par air au refroidissement par liquide direct sur les puces. Une solution peut permettre de réduire la consommation des ventilateurs, mais augmenter la charge de pompage et la complexité du système de traitement de l'eau. Une autre peut offrir davantage de flexibilité en termes d'espace libre, tout en augmentant le rejet de chaleur maximal lors des après-midis chauds. Une simulation CFD de qualité pour un centre de données mettra en évidence ces compromis avant que vous ne vous engagiez sur la taille d'une phase auprès du fournisseur d'énergie.

La planification par étapes de l'expansion donne les meilleurs résultats lorsque la capacité suit la simulation

La mise en œuvre progressive de l'extension fonctionne lorsque chaque phase correspond à la capacité vérifiée du réseau, aux limites thermiques et aux paramètres de contrôle applicables à ce stade du campus. Des phases conçues autour d'un objectif final que le réseau ne peut pas prendre en charge entraîneront une refonte du projet, la mise en veille d'espaces ou l'adoption de règles d'exploitation temporaires qui compliqueront la gestion du site.

Imaginez un campus prévu pour une puissance de 80 MW, répartie en quatre blocs. Les 20 premiers MW peuvent être raccordés aux infrastructures existantes du réseau public, les 20 suivants nécessitent un nouveau transformateur, les 30 suivants requièrent une mise à niveau des dispositifs de protection, et les 20 derniers ne peuvent fonctionner qu’après un renforcement du réseau de transport. En modélisant chaque étape, vous pouvez aligner les achats et la mise en service sur la réalité technique. Si vous ignorez cette séquence, la première phase sera surdimensionnée pour un réseau de quatrième phase qui n’existe pas encore.

Ce tableau n'est pas une simple formalité administrative. Vous prendrez des décisions d'investissement plus éclairées si chaque phase est évaluée selon un modèle de réussite ou d'échec, plutôt que sur la base d'une date indicative figurant dans une feuille de route. Cela permet également de veiller à ce que la conception, l'exploitation et la planification des services publics s'appuient sur les mêmes hypothèses. La mise en place de phases garantira ainsi la fiabilité du réseau, au lieu de masquer les risques liés aux interconnexions qui n'ont pas été résolus.

Les hypothèses figurant sur les plaques signalétiques masquent les effets les plus néfastes sur le réseau

Les hypothèses de plaque signalétique masquent les répercussions sur le réseau, car elles ne tiennent pas compte de la coïncidence, de la perte de diversité, de la réponse de refroidissement et des états de fonctionnement anormaux. Les fournisseurs d'électricité testeront le site dans des conditions qui apparaissent rarement dans les présentations commerciales ; par conséquent, un plan fondé sur le nombre d'armoires ou la puissance moyenne par rack sous-estimera la complexité de la demande de raccordement.

Un projet de 30 MW peut sembler modeste lorsque chaque salle est représentée avec un taux d'occupation partiel et que le refroidissement est considéré comme un facteur fixe. Les problèmes apparaissent lorsque ce même site atteint une forte densité de racks, redémarre après une opération de maintenance ou recharge ses batteries après une brève coupure de courant. Ces moments génèrent souvent les pics de consommation les plus importants observés sur le réseau. Les angles morts courants sont faciles à identifier une fois qu'on les a modélisés :

• Les clusters de serveurs peuvent passer d'un état de veille à une charge proche de la pleine capacité en quelques minutes, dès que la planification des charges de travail change.
• Les installations de refroidissement augmentent la puissance des pompes et des ventilateurs au moment même où la charge thermique des équipements informatiques atteint son pic.
• Les périodes de recharge des batteries peuvent ajouter des mégawatts supplémentaires à la charge normale du bâtiment après de brèves perturbations.
• Les schémas de transfert des générateurs peuvent entraîner de brèves variations de tension et des délais de rétablissement inopportuns.
• Les hypothèses de redondance peuvent s'avérer erronées lorsqu'une panne de ligne d'alimentation ou de transformateur supprime la diversité.

Chaque élément transforme un chiffre de planification bien ficelé en un scénario d'interconnexion différent. Il n'est pas nécessaire d'avoir des prévisions parfaites pour les analyser. Il faut disposer de fourchettes raisonnables, de scénarios pessimistes réalistes et d'un modèle qui relie la charge informatique aux réactions mécaniques et électriques. C'est là toute la différence entre une marge de sécurité suffisante et un problème inattendu lors de la mise en service.

« Plus vos données seront solides, meilleurs seront vos choix en matière d'expansion. »

Les résultats du simulateur de centre de données devraient orienter les discussions avec les services publics

Les résultats du simulateur de centre de données devraient orienter les discussions avec les fournisseurs d'électricité, car ils remplacent les demandes de charge génériques par des scénarios d'exploitation testés, des limites de phase et des options d'atténuation. Les fournisseurs d'électricité réagissent mieux lorsque l'on leur montre comment le site se comporte en cas d'imprévu, et pas seulement quelle quantité d'électricité le campus achevé prévoit de consommer.

Une réunion avec les services publics prend une toute autre tournure lorsque vous arrivez avec des simulations de charge sur les lignes d'alimentation, des graphiques de chute de tension, des données sur la charge des disjoncteurs et des profils de charge spécifiques à chaque phase. Une équipe qui demande 50 MW à un seul point de raccordement se verra poser un certain type de questions. Une équipe qui démontre que 20 MW sont déjà acceptables, que 15 MW supplémentaires le deviendront après des modifications des dispositifs de protection et que le blocage final nécessite des travaux en amont se verra poser des questions bien plus pertinentes. Les cas concrets offrent aux planificateurs des éléments à étudier plutôt que des hypothèses à formuler.

C'est la norme à respecter avant que la conception du site ne soit figée. Une expansion compatible avec le réseau repose sur des tests rigoureux, des hypothèses claires et des limites de phase réalistes, et non sur des calculs théoriques optimistes. OPAL-RT s'inscrit dans ce processus lorsque les équipes ont besoin d'une validation en boucle fermée qui intègre dans un seul modèle le comportement du réseau, les commandes et la réponse des installations. Plus vos données sont solides, meilleurs seront vos choix en matière d'expansion.