# Gestion énergétique des centres de calcul

La gestion énergétique des centres de calcul est la mise en œuvre de moyens permettant d'optimiser les besoins importants en énergie de ces centres. Elle fait partie du concept d'informatique durable.
C'est une gestion intelligente qui s'appuie sur des indicateurs de performance énergétique obtenus par une évaluation de chaque site. Pour améliorer ces indicateurs, une étude préalable est nécessaire dès la phase de conception du centre, afin de tirer parti des avantages géographiques du lieu d'implantation (climat, accessibilité à des sources d'énergie) et de l'architecture même du site, liée notamment au choix de la solution de refroidissement.
L'optimisation des logiciels, tant au niveau du traitement des données qu'au niveau du fonctionnement du centre, et l'amélioration continuelle de la performance de l'ensemble des équipements contribuent également à la réduction de la consommation et donc des coûts énergétiques.
Cette efficacité est devenue aujourd'hui un enjeu majeur, aux niveaux tant économique qu'environnemental. Les sociétés consomment de plus en plus de ressources informatiques. Celles-ci leur pourraient leur permettre d'atteindre leurs objectifs et d'accroître leur rentabilité. En conséquence, le nombre de centres de données ne cesse d'augmenter et suscite un besoin croissant en énergie. Il devient nécessaire de privilégier l'électricité décarbonée et de valoriser la chaleur produite par les serveurs.
Gérer efficacement ces centres de calculs, optimiser leur fonctionnement doivent permettre de limiter l'impact environnemental et le coût financier qu'ils engendrent. C'est aussi un moteur de recherche pour le développement de nouvelles technologies dans les domaines de l'alimentation électrique, de la climatisation, de la virtualisation et de la fabrication des composants électroniques.

## Remarque préalable

Selon Frédéric Bordage, expert en GreenIT et sobriété numérique, contrairement à une idée répandue, résultant d'une certaine surmédiatisation, l'impact environnemental des centres informatiques, certes important, ne représente en 2019 qu'environ 15 % de l'impact environnemental du numérique à l'échelle mondiale, loin derrière les équipements utilisateurs (plus des deux tiers) et le réseau. En outre, les impacts ne se limitent pas à la consommation d'électricité, mais incluent aussi l'épuisement des ressources abiotiques (métaux).

## Problématique

C'est en 1992, via le sommet de Rio, que les premiers engagements sont pris pour protéger notre planète. En 2007, The Green Grid regroupe plusieurs entreprises dont le but est de travailler sur la gestion de l'efficacité énergétique. Face au surcroît de consommation de ces centres de données, deux axes se dessinent : optimiser les besoins en énergie en gérant au mieux la consommation et lutter pour réduire l'impact environnemental.

### Gestion

La gestion de l'énergie est mise en avant pour optimiser au mieux la consommation et la dissipation que génèrent ces établissements. Ces centres de données prennent une place prépondérante pour répondre aux besoins toujours plus pressants des entreprises ou même pour de simples utilisateurs. Ils offrent un panel de services très important : les objets connectés, le big data ou encore le cloud qui est un service de stockage des données et représente une des plus importantes activités de ces centres de données.
Il faut être en mesure de recycler ce surplus d'énergie (Par exemple, la dissipation de la chaleur) : c'est devenu un véritable enjeu environnemental, le site Green Data Center News y fait état$^,$.
Pour information, l'article de Datacenter Mag donne une revue des différents problèmes qui sont rencontrés, des coûts supplémentaires à prendre en compte dans cette gestion (par exemple les licences logicielles). Il indique les sites les plus performants et montre ainsi la montée en puissance de ces centres dans lesquels, du matériel de plus en plus « hightech » y est concentré à tous les points de vue.

### Énergie

D'après la thèse de Georges Da Costa, au niveau mondial, la consommation a été multipliée par cinq entre 2000 et 2007. En 2020, une estimation montre qu'elle devrait atteindre 1 000 TW h. Autre constat, le nombre de serveurs s'est densifié. En 2014, plusieurs dizaines de milliers de serveurs occupaient une surface de l'ordre de 10 000 m$^2$. D'après l'Uptime Institute, 20 % des serveurs seraient devenus obsolètes et d'après une estimation de Google, ces serveurs seraient utilisés à moins de 50 %. Il faut dès à présent pouvoir répondre à cette croissance, en développant de nouvelles technologies au niveau du refroidissement, de l'alimentation électrique, mais aussi des équipements informatiques et environnements applicatifs. Pour préserver et limiter ces besoins en énergie, il est nécessaire de travailler sur tous ces domaines à la fois. Un article d'Actu-Environnement.com stipule qu'un seul centre de données, consomme en moyenne plus de 30 MW (jusqu'à 100 MW). En comparaison, cette consommation est équivalente au besoin d'une ville de 25 000 à 50 000 habitants. Au niveau mondial, elle représente entre 1,5 % à 2 % de la consommation énergétique et 2 % des émissions de CO$_2$ et en Europe, c'est 56 TW h par an d'électricité, le double d'ici 2020. Si cette gestion était maîtrisée, une économie de 30 TW h par an serait possible.

## Une conception efficace

L'architecture même de ces centres de calculs est un vecteur important pour gérer efficacement l'énergie de ces établissements. Le but étant de limiter le « gaspillage » énergétique. Pouvoir réutiliser toute cette énergie dite passive, favoriser l'utilisation d'énergie décarbonée sont aussi des enjeux importants. D'autres pistes sont à prendre en considération, décrite ci-après.

### Choisir le lieu d'implantation

Avant de s’intéresser à l'architecture même d'un centre de calcul, il est important de prendre du recul au niveau du choix d'implantation du site. Ces sites dissipent énormément de chaleur. Ils doivent utiliser des systèmes de climatisation puissants, qui consomment autant d’électricité que les équipements informatiques eux-mêmes. Le climat du lieu d'implantation peut diminuer le coût de la facture énergétique et optimiser ainsi son fonctionnement. Exemple de choix géographique : le centre technique de Facebook situé à Lulea, au nord de la Suède, près du cercle polaire, utilise l'air extérieur qui est glacial. Celui-ci est filtré, humidifié puis mélangé à la chaleur dégagée par les serveurs pour réguler la température à l'intérieur. Ainsi le constat est le suivant : 90 % de l’électricité consommée sert à alimenter les calculateurs. D'autres études peuvent être réalisées pour statuer sur le choix d'une région géographique par rapport à une autre en prenant en compte d'autres critères, comme la qualité de l'air à Sapporo au Japon.

### Définir les solutions de refroidissement

Une fois ce choix géographique acté, la climatisation est un facteur important qui influencera l'architecture et plus particulièrement l'organisation des salles hébergeant le matériel informatique.
Le refroidissement à air est souvent privilégié, car moins coûteux. Plus généralement, par rapport au centre de données de Facebook, le free cooling (refroidissement à partir de l'air extérieur) permet de limiter le recours à des refroidisseurs et entraîne ainsi une réduction de la facture énergétique. Le free cooling n'est intéressant que dans les implantations où l'air extérieur est froid suffisamment longtemps durant l'année.
La climatisation peut être complétée par un refroidissement à eau, qui est 4 000 fois plus efficace que l'air pour conduire la chaleur. Autre constat, d'autres solutions technologiques sont plus largement mises en œuvre : entre autres, la segmentation, le conditionnement d'air dans les salles informatiques (CRAC), l'utilisation de blocs de climatisation (CCU) qui permettent ainsi le refroidissement et l'humidification de l'air$^,$. Le fait d'appliquer ces nouvelles technologies (free-cooling par exemple), a permis de passer de 55 % d'énergie consommée par les climatiseurs à 18 %.

### Optimiser les différents flux d'air

En appliquant des règles simples basées sur la maîtrise des flux, le refroidissement de l'air peut être facilité en cloisonnant les baies et en évitant que celles-ci ne présentent des ouvertures à des emplacements non utilisés. Le fait d’espacer les travées pour former des couloirs « chauds » et des couloirs « froids » implique qu'un couloir sur deux insuffle l'air froid, par la face avant des serveurs via des baies grillagées, l'autre couloir aspirant l'air chaud par l'arrière. En lien avec cette gestion de flux, le design du bâtiment est important, à l'image du datacenter d'OVH à Roubaix, qui est conçu avec un grand nombre d'ouvertures sur toutes ses façades. L'air extérieur est introduit via ces ouvrants, traverse des « containers » dans lesquels se trouvent les serveurs. L'air chaud est ensuite évacué par des ventilateurs vers une cheminée (cour intérieur du bâtiment) pour y être refroidi. L'air traverse le bâtiment et les équipements.

### Réduire la consommation des équipements

Un autre axe d'optimisation est de privilégier l'utilisation d'équipements normés au niveau de la consommation énergétique(80Plus, Energy Star, EPEAT). Ainsi ce matériel ayant un cahier des charges plus restrictif sur les niveaux de consommation, l'énergie utilisée est plus facile à maîtriser. Enfin, il ne faut pas oublier tout simplement de veiller à ce que les serveurs ou autre matériel non utilisés, soient éteints.

### Augmenter la température de fonctionnement du matériel

L'un des leviers plus récents dans la réduction du coût énergétique des centres de calcul est d'augmenter la température de fonctionnement des composants, limitant ainsi le refroidissement requis. Ainsi, les recommandations de l'association ASHRAE encouragent de faire fonctionner les équipements informatiques jusqu'à 27 °C sans risque de panne, ce qui permettrait une économie globale d'énergie de 4 %.

### Autre contrainte à prendre en considération

Enfin, aux contraintes liées à la conception et au choix géographique, s'ajoute également un critère sur les possibilités de raccordement au réseau. Un centre de données doit offrir une gestion efficace de la consommation de son énergie, mais aussi être le plus sécurisé possible (double adduction, maillage...). De plus, un raccordement au réseau doit être optimal pour limiter les temps de latence possible au niveau des liens de transmission. Il faut donc trouver un compromis.

## Méthodes d'évaluation
### Les étapes d'évaluation

Que ce soit dans les bâtiments « classiques » ou pour ce qui concerne ces centres de données, plusieurs études ont été menées afin d'identifier une méthodologie d'évaluation de l'efficacité énergétique. Cette mesure peut se faire dans un premier temps d'une façon globale, méthode dite « standard » (Sans prendre en compte les problématiques rencontrées), puis elle peut être affinée, en appliquant différents modèles. Parmi toutes ces études, celle réalisée par Schneider Electric éditant un livre blanc définit une méthodologie standard en trois étapes :
* Classement standard des sous-systèmes (charge informatique : serveurs, etc.) ;
* Estimation des ressources partagées charge infrastructure : climatisation, énergie, etc.) ;
* Estimation des appareils difficiles à mesurer (autres).
Avant de commencer ces trois étapes, la phase initiale consiste à lister les différents types d'équipements présents sur le site et de les répartir dans les trois catégories ci-dessus.
Le but est de pouvoir calculer deux indicateurs de performance ou KPI :
* l'indicateur d'efficacité énergétique ou PUE (Indicateur d'efficacité énergétique), qui est le rapport entre la puissance d'entrée et la charge informatique ;
* le rendement de l'infrastructure ou DCiE du centre de calculs.
Concernant l'étape deux, les ressources partagées sont aussi appelées : sous-systèmes « mixtes ». Par exemple, la climatisation est commune au matériel informatique, mais également au bureau du personnel. Il est nécessaire dans ce cas, de réaliser une estimation de la perte que cela engendre et de la prendre en compte dans le calcul du PUE.
Pour la dernière étape, il est à noter qu'il n'est pas toujours facile de classifier ces sous-systèmes. Il faut donc réaliser une estimation de cette consommation et la déduire de la sortie de l'onduleur. Le résultat donnera la charge informatique. Ces pertes sont ensuite intégrées à la charge de l'infrastructure lors du calcul du PUE. En faisant de la sorte, cette imprécision est ainsi compensée.

### Modèles et Outils de suivi et de calculs

De plus en plus de projets sont initiés pour diminuer la consommation de ces centres. L’efficacité énergétique devient un enjeu. Au niveau européen, c'est le projet CoolEmAll, financé par la Commission européenne, qui a élaboré des modèles de centres (matériel et logiciel) et différents outils (en open source). Ces applications ont été mises à disposition des entreprises pour évaluer l’efficacité énergétique et l’empreinte carbone combinées de l'ensemble des équipements du site (tous les sous-systèmes). Le but de ces outils de suivi et de calculs étant, comme le souligne Georges Da Costa dans sa thèse, de répondre à l'attente des différents acteurs. Par exemple, le constructeur sera plutôt intéressé par la consommation du centre de calculs pour en définir son dimensionnement, l'opérateur quant à lui observera l'OPEX... Il faudra donc trouver le juste milieu entre tous ces différents KPI.

### Affinement des modèles

L'évaluation de l'efficacité peut aller encore plus loin, détaillée ci-dessous. Pour affiner cette analyse, différents types de modèles sont définis, modèles liés au matériel constituant un centre de calculs. Un autre point est à noter, le fait que la consommation d'un serveur peut varier en fonction :
* de son utilisation : machine virtuelle, ressources partagées;
* de la fréquence à laquelle travaille le processeur;
* de la gestion de la ventilation (alimentation interne ou externe des ventilateurs);
* du voisinage d'un serveur (impact de la température de l’un sur l’augmentation de la température de l’autre).
Cette seconde étude liste de nouveaux indicateurs de performance en plus des deux précédents :
* E$_{DC}$: consommation énergétique d'un centre de calcul;
* EWR: gains potentiels au niveau de la gestion des machines et des logiciels;
* Prod Productivity : productivité (utilisé pour comparer deux centres de calculs ayant le même domaine d'application);
* RCI$_{LO,HI}$: qualité du refroidissement des serveurs;
* IoT: différentiel de température entre les processeurs;
* CAPEX: dépenses d'investissement pour l'achat et la mise à jour du matériel;
* OPEX: dépenses opérationnelles liées à la consommation électrique dans le cas des centres de calculs;
* CO$_2$: impact écologique.
De même après le côté matériel, des modèles peuvent être établis au niveau applicatif (surtout au niveau machine virtuelle). En prenant en compte le détail de leur fonctionnement et surtout de leur consommation. Par contre, l'utilisation de machine virtuelle implique un partage au niveau matériel. difficile à identifier, d'où une gestion assez complexe.
Un modèle en cours de développement s’appuie sur l'intelligence artificielle : Google édite un livre blanc dans lequel il détaille le fait que la gestion de ses centres peut être suivie par une machine qui grâce à des algorithmes, adapterait les besoins en énergie en fonction de la charge des différents équipements. Cette machine, appelée « réseau neuronal », anticiperait et régulerait ainsi l'énergie nécessaire. D'après cette étude, les prévisions de l'indicateur d'efficacité pourraient être définies avec une précision de 0,4 %.

### Autres Classements et influence

L'Uptime Institute, seul organisme en 2015 à délivrer des certifications de centre de données, classe les centres par niveaux :

#### niveau I - Basique

    Site qui ne dispose pas de redondance.

#### niveau II - Redondance

    Les composants sont redondants, mais pas les distributions (électricité et froid).

#### niveau III - Maintenabilité

    Tous les composants et circuits de distribution sont redondants. Aucune maintenance ne doit provoquer d'arrêt, mais certains incidents peuvent interrompre le système informatique.

#### niveau IV - Tolérance aux pannes

    Même un incident grave (comme un incendie) ne doit avoir de conséquences sur le fonctionnement du centre.
L'enjeu environnemental est devenu tellement omniprésent qu'il s'invite à présent dans ce classement. Par exemple, l'entreprise Interxion fait apparaitre en plus du niveau de Tier, la prise en compte du développement durable dans le détail de leur offre commerciale.

### Quelques exemples d'évaluation

À la mise en place de ces différents indicateurs et plus particulièrement l'indicateur d'efficacité énergétique, en 2008 Google annonçait ses premières mesures. Résultat, l'indicateur moyen de ses différents centres de calcul était à 1,21. Alors qu'à cette même période les valeurs communes se situaient autour d'un PUE à 2, voire plus pour d'autres entreprises. En 2011, ce chiffre atteignait des valeurs situées entre 1,5 et 1,2.

## Optimisation des logiciels

La volonté d'économiser de l'énergie dans les centres de calcul par des procédés logiciels reste complexe. La notion de proportionnalité énergétique entre en jeu avec le souhait de rendre les serveurs disponibles à la demande et de les gérer de manière dynamique en fonction de la charge de travail. C'est dans ce but que plusieurs recherches ont été réalisées afin d'optimiser les logiciels. Quelques-unes de ces recherches sont abordées dans ce chapitre. Cependant il faut savoir qu'en dépit de leurs promesses théoriques, ces solutions sont rarement utilisées car le besoin de réponse rapide des équipements pour respecter les contrats de service prend le dessus sur la politique écoénergétique. En effet, ces contrats exigent des opérateurs de fournir des services en respectant un certain délai et malheureusement, la réduction de la capacité peut modifier la qualité de service.

### Planification des tâches

Parallèlement aux avancées techniques en matière de virtualisation, de nouveaux algorithmes ont été pensés pour répartir de manière temporaire la charge de travail vers des serveurs écoénergétiques et plus particulièrement vers des centres de données de type HPC$^,$. Ces centres de données sont optimisés pour des applications demandant une intensité de calculs importante avec des traitements de gros volumes de données. Ils ne sont en général exploités qu'entre 60 % et 80 %. De plus la virtualisation est très utilisée dans les centres de données pour permettre une transparence matérielle pour exécuter n'importe quel logiciel sur n'importe quelle plate-forme et ainsi avoir moins d'équipements pour réduire la consommation d'énergie.
La notion de planificateur de tâches doit permettre de faire une estimation du temps d'exécution des tâches et doit être capable de décider s'il peut répondre ou non aux critères de réalisation de ces tâches liés aux contraintes des contrats de service$^,$$^,$. Ainsi, le décalage entre le temps d'exécution estimé et le temps réel d'exécution est mesuré et un travail est fait afin d'améliorer l'efficacité énergétique. De ce fait, des algorithmes sont utilisés et ont pour fonction de lisser la charge de travail permettant de mettre hors tension des serveurs plus longtemps et ainsi économiser considérablement de l'énergie tout en restant performants. Trois algorithmes (SCINT, FCFS-backfill, EDF-LRH) sont utilisés dans ce cas. D'autres algorithmes tels que MinHR et XInt$^,$ sont combinés aux précédents et traitent les problèmes de recirculation de chaleur afin de mieux répartir la température.
Par contre, dans certains cas, il n'y a pas que la réduction de la consommation d'énergie qui est la seule visée mais aussi la réduction du coût de l'électricité. Deux idées principales ressortent de cette volonté de faire des économies. La première est de planifier des tâches par lots dans plusieurs centres de données géographiquement différents. On parle alors de centres de calcul géographiquement distribués. Et la deuxième est de transférer les serveurs économes en énergie vers des zones géographiques offrant des prix d'électricité moins élevés. L'algorithme de planification GreFar (Geographical Cost Minimization with Thermal Awareness, « minimisation des coûts géographiques et sensibilisation thermique ») est proposé dans ce cas. GreFar peut économiser jusqu'à 16 % du coût de l'énergie en traitant des opérations en priorité sur des serveurs économes en énergie géographiquement sur différents sites et lorsque les prix de l'électricité sont les moins élevés. Une simulation avec trois modèles utilisés a prouvé que GreFar réduit le coût de l'énergie ainsi que la consommation en énergie du système de refroidissement.

### DIMMer

Un gaspillage d'énergie est engendré par une faible utilisation des composants des serveurs, qu'ils soient utilisés ou non. La solution DIMMer a pour objectif de diminuer cette consommation d'énergie en identifiant les composants non utilisés. Avec cette solution, ce sont les mémoires qui sont visées avec la volonté de les mettre hors tension afin d'éliminer l'énergie nécessaire à l'auto-rafraîchissement de mémoire non-allouée. La solution a pour action de couper l'alimentation de la mémoire DRAM libre et la mémoire DIMM utilisées par les processeurs.
Une estimation de 50 % d'économie sur les DRAM et 18,8 % sur les processeurs peut être faite avec DIMMer. Un exemple de traces collectées sur un centre de données Google avec 12 000 serveurs à intervalles de 5 minutes pendant un mois, montre que 50 % de la DRAM peut être non utilisée et finalement pourrait être éteinte, d'où l'efficacité de DIMMer. Cependant, il faut savoir que la mise en place de DIMMer n'est pas complètement transparente et nécessite des modifications de l'OS Kernel et une nouvelle configuration matérielle. Malgré cela, la solution est une bonne occasion de réduire la consommation d'énergie sans impact sur la performance globale.

### eStor

Le constat reste identique : une partie de l'énergie est gaspillée par des équipements en repos. L'objectif ici est de désactiver certains serveurs et de réorienter la charge de trafic afin d'économiser de l'énergie, le tout avec toujours une contrainte de disponibilité des données. Le matériel sur lequel se concentre cette solution est le système de stockage. Le principe de l'étude est de jouer avec les espaces de stockage mais en même temps de pouvoir répliquer les données par sécurité pour ne pas en perdre. C'est le principe de parallélisme de reconstruction des données, ou principe de reconstruction des données en parallèle, qui signifie qu'un nombre de serveurs peut participer au processus de réparation de données perdues ou défaillantes en utilisant des répliques. Cette multiplication de données identiques assure ainsi une sécurité.
Deux stratégies ont été identifiées : la première avec une disposition aléatoire de données avec un parallélisme de reconstruction élevé de ces données mais avec moins de serveurs mis hors tension, la seconde stratégie avec une disposition séquentielle de données avec un grand nombre de serveurs mis hors tension mais avec un faible parallélisme de reconstruction des données. La solution eStor est proposée pour répondre à ces deux stratégies. C'est une sorte de compilation avec une partie des données stockée séquentiellement et une autre partie de façon aléatoire et au besoin de mettre hors tension un grand nombre de serveurs avec en même temps une reconstruction élevée du parallélisme. Des tests ont été réalisés pour définir la performance de cette solution qui doit répondre aux trois critères suivants :
* Économe en énergie en désactivant un certain nombre de serveurs;
* Analyse du parallélisme de reconstruction des données à partir de la disposition des données$^,$;
* Répondre à la notion de popularité des données(les données les plus demandées) avec la condition simple de ne pas éteindre deux serveurs voisins$^,$.
Un exemple est donné concernant la politique de disposition de données eStor avec pour chaque objet, trois répliques de données stockées dont deux de façon séquentielles sur des serveurs voisins et la troisième donnée de façon aléatoire sur un autre serveur. Certains algorithmes sont également présentés dans ce but$^,$. L'expérimentation a été faite sur un environnement Hadoop basé sur un cluster à 24 serveurs avec une configuration bien déterminée. Elle s'est réalisée selon trois axes :

#### Efficacité énergétique

    Les chercheurs pensent que leur solution eStor de gestion de données peut réduire assez de serveurs en fonctionnement pour économiser de l'énergie;

#### Tolérance aux pannes

    La solution eStor peut participer au processus de reconstruction des données;

#### Popularité des données

    Une bonne prise en compte faite par une stratégie de mise en pages des données.
Finalement, eStor est une stratégie combinant plusieurs procédés qui permettent de désactiver un grand nombre de serveurs économisant ainsi de l'énergie.

### Gestion des états de sommeil des équipements

Le principe est de mettre les serveurs dans une sorte d'état de sommeil avec une consommation énergétique faible pour faire des économies. C'est le principe de la gestion dynamique de l'alimentation. L'étude se fait selon trois critères :
* traçage de la charge de travail ;
* type de politique de gestion de l'énergie utilisée ;
* taille du centre de calcul.
Le test a été réalisé avec une configuration à 24 serveurs. Un état des lieux est fait avec un dur constat sur le gaspillage de l'énergie avec près de 60 % ou plus de puissance maximale perdue qui est utilisée par des serveurs en veille. La politique actuelle de gestion de l'alimentation des centres de calculs est en mode Always On. C'est-à-dire, que le choix est fait de laisser autant de serveurs en fonctionnement pour répondre à un pic de besoin. L'objectif de l'étude est de mesurer l'efficacité des états de sommeil avec un calcul de la puissance consommée pendant cette période.
De premiers tests, appelés Reactive et SoftReactive, ont été réalisés en fonction des changements de charge en mettant en veille les serveurs lorsque la charge diminue et en les rallumant lorsque la charge augmente. Une comparaison est faite entre les modes Reactive et SoftReactive et le mode AlwaysOn avec l'introduction d'une métrique NPPW. La valeur de NPPW augmente alors jusqu'à 50 %, aussi bien en mode Reactive que SoftReactive pour une taille importante de centre de calculs, le nombre de serveurs passant dans ce cas de 14 à 140.
Une autre étude couple la gestion des états de sommeil avec une gestion de file d'attente des différentes tâches. La gestion des files d'attente se fait selon des modèles respectant le processus de Markov. Dans ce cas, la mise en sommeil des serveurs est plus finement définie avec deux modes :
* un mode veille (serveurs endormis) : il présente une faible consommation d'énergie et permet une réactivation rapide ;
* un mode désactivation (serveurs désactivés) : il nécessite un redémarrage en cas de besoin, donc un temps d'activation plus long.
Le modèle de gestion de file d'attente proposé est un modèle polyvalent pour les centres de calcul avec toujours la même contrainte de répondre à la fois à l'efficacité énergétique et à la performance. D'autres études ont été réalisées avec le même objectif$^,$.

### Gestion des prévisions dynamiques des temps d'inactivité des processeurs

Les processeurs sont les plus gourmands dans la consommation énergétique des centres de calculs. Sachant qu'un processeur ne fonctionne jamais à 100 % du temps, la consommation d'énergie pendant les périodes de repos est importante en raison du courant de fuite. De plus, le fait de rendre inactif un processeur n'est pas toujours le bon choix si son mode de veille nécessite un temps de réveil trop long, voire plus long que sa période de repos.
Le but de cette étude est de prévoir de façon dynamique les périodes de repos pour faire une estimation des périodes d'inactivité du processeur pour choisir l'état de sommeil le plus approprié. Le meilleur choix donnera la meilleure économie d'énergie. Le schéma proposé par cette solution permet d'économiser de 10 % à 50 % de puissance par rapport au DVFS. Trois types de tests ont été réalisés avec des modèles de temps de repos court, moyen et long avec une amélioration de la consommation d'énergie respectivement de 10 %, 25 % et 45 %. Mais les tests ne s'arrêtent pas là et une prochaine étape est l'intégration de ces modèles sur des outils de simulation comme CloudSim ou BigHouse pour réaliser des études futures.

## Optimisation du matériel

Les différents aspects de l'optimisation matérielle ont pour but de vouloir réduire la consommation énergétique. Les chercheurs travaillent sur cette optimisation à tous les niveaux matériels : sur la position géographique des baies (projet CoolEmAll), sur les liaisons internes entre serveurs (projet OSA), sur une meilleure gestion des ventilateurs des serveurs pour réduire la consommation, sur l'utilisation d'un mode différent d'alimentation électrique... Parfois, la frontière entre l'optimisation du matériel et l'optimisation du logiciel reste mince. Par exemple, un algorithme (le logiciel) peut gérer un nouveau système de refroidissement de serveurs (le matériel) ainsi que leurs mises en veille. Le principe de refroidissement classique utilise l'air et pose un problème d'efficacité avec la recirculation d'air chaud. Mais de nouveaux serveurs avec un refroidissement par liquide plus performant peuvent être utilisés. Un algorithme comme SmartPlace peut piloter le déploiement de ce type de serveurs et minimiser la consommation d'énergie. Les résultats montrent qu'avec cet algorithme, on peut atteindre jusqu'à 26,7 % d'économie avec un retour sur investissement au bout de trois ans. Les différentes études présentées ne sont pas exhaustives mais permettent d'avoir une idée des différentes recherches déjà réalisées.

### Projet CoolEmAll

CoolEmAll est un projet qui a été financé par la commission Européenne. À partir de simulations et de modélisations, il avait pour objectif de fournir des outils utiles pour les concepteurs de data center mais aussi pour les exploitants et chercheurs, le tout avec une interaction entre le hardware, software, l'énergie nécessaire et le refroidissement à utiliser. C'est un projet qui a commencé en 2011 et qui a fonctionné pendant 30 mois jusqu'en 2014. Le constat a été fait que l'impact énergétique est une préoccupation majeure avec une consommation représentant 2 % de la consommation énergétique mondiale. Pour avoir une idée, elle est équivalente au besoin de l'industrie aéronautique en 2008. Il faut savoir qu'en 2012, plus d'un tiers des centres de données consommaient plus d'énergie pour le refroidissement et les infrastructures que pour la partie informatique elle-même. Il y a une perte d'efficacité énergétique. Des études ont donc été faites sur ce phénomène et pour résoudre ces problèmes, le projet CoolEmAll est né. Son objectif est de combler le fossé entre l'informatique et les installations. Le projet propose deux solutions :

#### Fourniture de modèles de blocs de construction DEBB $^,$

    C'est une description abstraite d'un matériel ou de composants définissant un bloc de données d'un data center. À partir de ce concept, le DEBB a été modélisé sur la base d'une architecture RECS $^,$ qui est un système informatique multi-nœuds développé par Christmann.

#### Fourniture d'outils de centre de données SVD toolkit $^,$

Le projet a également proposé une contribution aux métriques d'efficacité énergétique déjà existantes. Les tests de cette étude sont réalisés à partir de modèles utilisés dans la conception et la gestion des outils :

#### Le modèle de puissance

    C'est un élément clé pour le développement et la maintenance de Data Centers écoénergétiques. Ce modèle permet d'estimer la dissipation de puissance de l'application avec une granularité élevée de la mesure.

#### Le modèle de refroidissement

    Il a pour objectif de calculer la puissance de l'équipement de refroidissement et d'autres dispositifs électriques dans un centre de données en fonction de la charge de travail informatique. Ce modèle a été construit sur la base d'équations thermodynamiques de base.
L'utilisation de ces modèles peut améliorer les mesures de compteurs d'énergie. Le projet CoolEmAll utilise donc un ensemble de métriques avec différents niveaux d'analyse pour effectuer les différentes mesures en fonction des tests à réaliser. À partir de toutes ces données, différents tests ont été réalisés avec cinq types de processeurs basés sur l'architecture RECS. De plus, des outils tels que FFT, Abinit, C-Ray ont été utilisées pour ces simulations ainsi que le simulateur DCworms$^,$$^,$. Les expériences valident les politiques de gestion des ressources proposées et les mesures d'efficacité énergétique$^,$.

### Autres projets existants

Au niveau matériel, d'autres projets ont pour objectif d'améliorer la consommation énergétiques, dont les suivants.
Depuis octobre 2011, le projet européen Mont-Blanc a eu pour objectif de concevoir un nouveau type d'architecture informatique capable de définir les futures normes mondiales dans le domaine écoénergétique. C'est la commission Européenne qui a financé ce projet jusqu'en septembre 2016 dans le cadre du programme Horizon 2020. Ce projet s'est déroulé en trois phases avec une troisième phase qui devait s'assurer que les innovations matérielles et systèmes soient facilement traduites en avantages pour les applications HPC$^,$. Ce projet vise à concevoir une nouvelle plate-forme HPC capable de fournir un nouveau niveau de rapport performance / énergie lors de l'exécution d'applications réelles.
Le projet Watcher de chez b<>com est destiné à fournir une solution d’optimisation de la consommation des ressources matérielles des data centers. L'objectif de ce projet est l’optimisation du placement des machines virtuelles en améliorant le gestionnaire d'infrastructure. Watcher propose une réorganisation via un algorithme qui utilise des mécanismes de prédiction pour identifier les traitements futurs.

### Optical Switching Architecture (OSA)

L'optical switching architecture (OSA, ou architecture de commutation optique) est une technologie qui joue sur la flexibilité des liaisons. Elle s’appuie sur une reconfiguration à chaud des périphériques en modifiant de façon dynamique la topologie et la capacité des liaisons optiques, le tout pour coller au plus près de façon dynamique à la demande de trafic. Cette technique est possible par une gestion complémentaire des ports optiques avec la mise en place d'une fonction « circulateur » pour une transmission simultanée des données dans les deux sens. Cette étude a été réalisée en deux étapes :
* simulation d'analyses sur une configuration appelée OSA-2560 ;
* expérimentation réelle sur une maquette.
Dans les deux cas, les chercheurs ont réalisé des mesures pour déterminer la meilleure bande passante (qui est appelée bande passante de bissection) en jouant sur la flexibilité de la topologie. Les résultats de ces tests indiquent une bande passante élevée de 60 à 100 %. Comme précisé dans l'étude, ces résultats montrent la faisabilité du prototype OSA.

### Introduction de l'alimentation en courant continu 380 V

L'utilisation d'une alimentation en courant continu 380 V permettrait d'économiser plus d'énergie que le courant alternatif. En 2016, une expérimentation est en cours au Japon dans le cadre de projets comme le Green IT Project sponsorisé par l'organisation NEDO. Les tests ont démontré une amélioration de l'efficacité de 4 % à 8 %. Pour optimiser cette solution, il faut la coupler avec une source d'énergie solaire.

### Gestion des ventilateurs sur les micros serveurs

La gestion des ventilateurs sur les micros serveurs porte sur l'utilisation de l'énergie dans la gestion thermique des micros serveurs et leur impact sur la consommation énergétique globale d'un data center. Du point de vue des fournisseurs de matériels, il y a également une volonté de réduire les coûts de refroidissement et aussi de réduire le PUE. Une solution récente est d'utiliser des micros serveurs basés sur une architecture à faible consommation. Des modèles ont été nécessaires pour simuler la charge d'un data center afin de permettre l'étude de la dissipation de chaleur et une meilleure utilisation des ventilateurs.
L'objectif principal est de configurer la gestion des ventilateurs pour minimiser la consommation globale et de proposer des modèles à utiliser sur les serveurs des centres de calcul. Cette gestion doit se faire sur un principe de prédiction des changements de température en réduisant au maximum les temps de surchauffe afin d'éviter une détérioration des composants. De nouvelles métriques telles que le PUE niveau 4 ont été proposées car les chercheurs ont considéré que le PUE n'était pas suffisant. L'expérimentation s'est faite de la manière suivante :
* utilisation d'un système RECS: Ce système est en quelque sorte une boîte de calculs qui peut héberger de 6 à 18 serveurs avec toute une architecture de ventilateurs qui fonctionnent autour ;
* deux modèles de bases (puissance et thermique): Ils sont utilisés pour définir un nouveau modèle thermique pour réaliser les différents tests ;
* utilisation du simulateur DCworms$^,$.
Par principe, trois méthodes de tests ont été utilisées en jouant sur les vitesses des ventilateurs : une vitesse constante de 30 % ou 100 %, une vitesse variable et pour finir une vitesse dynamique. La difficulté a été de trouver un compromis entre la vitesse des ventilateurs pour réduire la consommation d'énergie et les périodes de haute température qui sont néfastes aux serveurs et qui provoquent des erreurs. En conclusion, cette étude a montré que la gestion des ventilateurs par principe de prédictions permet d'économiser 12 % d'énergie. Mais l'étude ne veut pas en rester là et permettre à terme une gestion plus automatique pour minimiser la consommation d'énergie.

## Alimentation par énergies renouvelables

Si les choix architecturaux et les optimisations tant logicielles que matérielles ont pour but de réduire la forte consommation électrique des centres de calculs, l'emploi de sources d'énergie vertueuses va permettre de réduire l'empreinte écologique et le poids fiscal (taxe carbone) importants de ce besoin toujours plus important. Des mesures incitatives et la progression de la production de nouvelles sources d'énergie renouvelable conduisent à une baisse des coûts à l'achat ou en investissements. L'exemple de l'énergie éolienne est représentatif : fin 2015, 40 % de la demande nationale était satisfaite via cette source au Danemark, 20 à 30 % au Portugal, en Irlande et en Espagne.

### Applications
#### Domaine expérimental

Des expérimentations ont été menées à partir de sources d'énergie vertes comme l'énergie solaire$^,$$^,$, éolienne$^,$$^,$, hydroélectrique, géothermale, en mixant plusieurs sources comme au National Renewable Energy Laboratory (NREL), situé à Golden, Colorado aux États-Unis (solaire et éolien), ou encore à GrenoblIX 2, premier centre de calcul écologique français qui a vu le jour en avril 2011, alimenté par des panneaux solaires, de l'énergie hydroélectrique et éoliennes, et refroidi grâce à l'eau d'une nappe phréatique peu profonde.

#### Grands acteurs de l'industrie informatique

De nombreuses grandes entreprises utilisent aujourd'hui des sources renouvelables pour alimenter leurs centres de données, telles que Microsoft à Dublin en Irlande (éolien) ou Facebook à Prineville dans l'Oregon aux États-Unis (solaire). Apple alimente déjà ses centres de calculs avec 100 % d'énergies renouvelables sur ses 5 sites américains : Maiden (Caroline du Nord), Austin (Texas), Prineville (Oregon), Newark (Californie), Reno (Nevada), et ses 2 sites européens : Cork (Irlande) et Munich (Allemagne). À Maiden, en Caroline du Nord (États-Unis), 1 km$^2$ de terrain dédié à des panneaux photovoltaïques, couplés à des piles à combustible alimentées par du biogaz permettent de pourvoir à 60 % de l'énergie nécessaire à ce centre. Les 40 % restants proviennent d'opérateurs locaux spécialisés en énergies renouvelables.

### Coefficient d'énergie verte

Différents organismes gouvernementaux américains, japonais et européens ainsi qu'un consortium industriel (The Green Grid) ont établi en octobre 2012 une nouvelle métrique, afin de quantifier la part d'énergie renouvelable consommée, le coefficient d'énergie verte (GEC, « green energy coefficient »). Il s'agit du rapport entre la somme des énergies renouvelables (en kilowatts-heures) et l'énergie totale consommée, calculée de façon identique au PUE.
Soit $r$ la somme des énergies renouvelables consommées et $t$ la somme totale de l'énergie consommée par le centre de calcul :
       $GEC={r \over t}$

### Classification

Le choix de la politique d'approvisionnement dépend de la capacité d'investissement de l'opérateur, la facilité et le coût de la mise en œuvre, et surtout la possibilité de faire évoluer facilement la capacité du site en énergies renouvelables. En complément de la classification de l'Uptime Institute qui mesure leur efficacité, les centres de calculs peuvent être classés suivant la politique d'approvisionnement adoptée :

#### Les centres qui génèrent leur propre énergie renouvelable

    L'avantage de produire sur place est le peu de perte puisque la puissance subit moins de conversions et n'est pas transmise sur de longues distances. Mais il est difficile de conjuguer tous les facteurs qui interviennent dans l'emplacement optimal d'un centre de calcul (latence du réseau, disponibilité de la main d’œuvre, structures fiscales) avec les lieux qui ont les meilleurs potentiels de production d'énergie renouvelable.
* La source est sur place :
** énergie thermique produite à partir de capteurs solaires;
** électricité produite par des panneaux photovoltaïques, éoliennes ou des turbines hydrauliques;
** énergie thermique extraite de sources de chaleur ambiantes (air, sol ou eau) par des pompes à chaleur.
* La source est hors-site : la source d'énergie est fournie de l'extérieur, mais la production d'énergie utilisable se fait sur place
** biomasse;
** biogaz.

#### La génération hors-site

    Dans cette approche, l'opérateur du centre effectue un investissement à long terme dans une usine de production d'énergie renouvelable dans un endroit où la ressource est abondante. Le transport entraîne des pertes d'énergie.

#### Achat d'énergie à un tiers

    L'opérateur n'est pas un participant actif à la production électrique. Un système de certificat de suivi de l'électricité permet de certifier l'origine de l'énergie :
* en Europe, le certificat principal est le Guarantee of Origin (en);
* aux États-Unis, le Renewable Energy Certificates (en).
L'opérateur peut également conclure un contrat avec un fournisseur d'électricité qui détermine la quantité d'électricité que le fournisseur s'engage à produire, la vente directe d'électricité. Par exemple, Google a conclu un contrat d'achat de 114 MW d'énergie éolienne pendant 20 ans pour alimenter le centre de calcul de Council Bluffs, Iowa aux États-Unis. Pour alimenter en partie son centre de calcul de Dublin en Irlande, Microsoft achète également de l'énergie éolienne.

### L’intermittence de la production énergétique

La disponibilité des énergies renouvelables est par essence intermittente : la production solaire dépendra du taux d'ensoleillement et sera nulle la nuit, la production des éoliennes est fluctuante puisque dépendante de la force du vent. En complément des optimisations des logiciels et des matériels qui permettent de réduire la consommation énergétique, les opérateurs doivent donc adapter leurs infrastructures pour répondre à cette nouvelle contrainte$^,$.

#### Réponse logicielle

La gestion du centre de calcul (machines et applications) et la gestion électrique sont décorrélées : ce sont deux centres de décision différents qui travaillent sans interaction directe. Les traitements du centre de calcul doivent donc être gérés de façon que la consommation électrique soit en adéquation avec la production d'énergie via une planification dynamique de la charge de travail en fonction de la disponibilité des ressources, voire en mettant en pause le lancement des tâches. De nombreux algorithmes ont été développés pour répondre à cette équation, parmi lesquels :
* GreenSlot, qui prédit la disponibilité de l'énergie solaire sur 48 heures et planifie les tâches en conséquence afin de limiter l'utilisation de l'énergie non renouvelable;
* GreenSwitch, qui planifie dynamiquement les traitements et effectue un choix entre énergie renouvelable ou non suivant la charge de travail, la configuration technique du centre de calcul (puissance maximale, batteries) et le coût des énergies. Cet algorithme a été testé sur un prototype de recherche de centre de données alimenté par panneaux solaires : Parasol;
* OL-PICEA-g, algorithme multi-objectif d'ordonnancement des tâches, qui maximise l'utilisation des énergies renouvelables et la qualité de service (taux de réussite des tâches), tout en minimisant la consommation énergétique totale et la durée des traitements via l'algorithme the Smart Time Scheduling Strategy, qui détermine l'heure de début et de fin des traitements suivant le nœud choisi.

#### Réponse matérielle

* La pile à combustible :
Les solutions les plus classiquement développées pour produire de l'électricité à partir de sources renouvelables sont aujourd'hui les énergies solaire et éolienne associées à des batteries. Il est nécessaire de surdimensionner ces systèmes afin de répondre aux périodes critiques pendant lesquelles la production électrique est faible. Pour éviter ce surdimensionnement, on ajoute généralement un générateur diesel, mais celui-ci présente deux inconvénients majeurs : le bruit et la pollution (gaz à effet de serre). La pile à combustible est une alternative intéressante : de l'hydrogène combiné à l'oxygène de l'air ambiant produit du courant capable d'alimenter les serveurs sans émission de CO$_2$ et d'autres polluants nuisibles à la santé et à l'environnement. Par exemple, la pile à combustible associée à des systèmes photovoltaïques-batteries permet une diminution de la capacité des batteries et de la puissance crête du générateur photovoltaïque, notamment dans des régions où les variations d'ensoleillement sont très importantes selon les saisons. Du gaz naturel peut également être utilisé pour produire un flux d'hydrogène pur et alimenter la pile à combustible.
* Les supercondensateurs :
En complément aux piles à combustible, les supercondensateurs permettent de gérer dynamiquement les déséquilibres de puissance induits par l'utilisation d'énergies renouvelables avec de nombreux avantages : faible perte d'énergie, charge et décharge rapides avec un courant élevé, durée de vie deux à trois fois plus importante que les batteries. Mais ce système est très coûteux pour un déploiement à grande échelle dans les centres de calcul. Néanmoins, un retour sur investissement élevé peut être atteint via une stratégie adaptative à partir de sources hétérogènes telle que proposée par le HEB (Hybrid Energy Buffering). Comparativement à un système de batteries classique, le HEB permet d'améliorer de 39,7 % l'efficacité énergétique, de prolonger de 4,7 fois la durée de vie des onduleurs, de réduire le temps d'arrêt du système de 41 % et d'améliorer l'utilisation des énergies renouvelables de 81,2 %, ce qui permet d'obtenir un retour sur investissement viable.

### Les centres de données modulaires

Une autre approche conceptuelle de centres de calculs verts utilise plusieurs centres en réseau distribué : les centres de traitement de données modulaires. Ils permettent de faciliter l'exploitation de l'énergie en dispersant intelligemment de petits centres près de sources renouvelables. L'imprévisibilité de l'approvisionnement est ainsi résolue par l'équilibrage de la charge d'alimentation et les techniques de migration de machines virtuelles entre les centres délocalisés$^,$. La conception est modulaire : ces petites structures sont assemblées, configurées, câblées, et donc prêtes à l'emploi en sortie d'usine. Elles sont ensuite transportées dans un conteneur vers le site de l'opérateur partout dans le monde. Il ne reste qu'à les alimenter en électricité, en connectivité réseau et en eau réfrigérée.
L'université de Cambridge (Royaume-Uni) a ainsi testé en 2011 « Free Lunch », une architecture de centres de données modulaires dispersés sur deux sites ayant un fort potentiel pour la récolte de l'énergie solaire, et situés dans différentes zones temporelles et climatiques pour se compléter (près de la mer Rouge et dans le sud-ouest australien). Des éoliennes venaient compléter l'offre énergétique, une connectivité réseau à haut débit était dédiée entre les deux sites et la migration de la charge de travail étaient basée sur des machines virtuelles. Cette expérience a démontré la viabilité de la solution. Google a commencé à s'y intéresser dès 2005 et depuis, plusieurs grands acteurs du secteur ont investi dans la conception de centres de traitements modulaires, comme SUN (en), IBM (en), HP (en) ou Google (en).
Néanmoins, des défis sont à relever concernant le fonctionnement de la migration de machines virtuelles. Il subsiste des délais de latence (délais de réseau et de service) entre les nœuds dispersés géographiquement. Des techniques de compression de contenu ont été proposées pour diminuer le transfert de données et le délai de service. De plus, la sécurité du contenu de la machine virtuelle lors de la migration est une préoccupation importante, car la machine doit migrer sur des liaisons de données vulnérables.

## Réutilisation de la chaleur résiduelle

L'augmentation de la puissance des serveurs conduit à une exigence de dissipation thermique de plus en plus importante : cette exigence a été multipliée par environ trente fois depuis 1990. La combinaison de récupération et de réutilisation de la chaleur résiduelle, notamment à partir des composants les plus puissants (les processeurs), est une opportunité de réduire les coûts énergétiques associés au refroidissement des centres de données en profitant de cette source d'énergie perdue, et de réduire le taux d'épuisement des réservoirs de combustibles fossiles et le taux d'émission de CO$_2$ et d'autres gaz contaminants$^,$. Néanmoins, dans la plupart des cas, la température capturée reste limitée à moins de 85 °C, et cette chaleur de basse qualité complexifie sa réutilisation via des processus thermodynamiques conventionnels.

### Les températures de capture

Les possibilités d'exploitation de la chaleur résiduelle vont dépendre de sa qualité, qui sera différente suivant la technologie de refroidissement utilisée par le centre de données.
Le point optimum pour récupérer de la chaleur dans les centres de calcul refroidis par air, qui constituent la majorité des centres actuels, pour une capture maximale d'énergie (de 35 à 45 °C) est situé directement à l'échappement de tous les serveurs, avant le mélange à l'air ambiant, ce qui est logistiquement compliqué. Il est plus facile d'opérer la capture au retour de l'unité de climatisation de la salle informatique (de 30 à 40 °C).
Pour les systèmes refroidis par eau, le transfert de chaleur est plus efficace : la chaleur résiduelle est de meilleure qualité (de 60 à 70 °C) et la capture est plus facile en utilisant le flux liquide de décharge directement. Des plaques froides situées le plus près possible des composants générant de la chaleur permettent de collecter jusqu'à 85 % du rejet calorifique$^,$.
Sur les systèmes de refroidissement avec un réfrigérant (phase-change cooling), on obtient une chaleur résiduelle allant jusqu'à 70 à 80 °C. Ce système de pompe ou compresseur qui entraîne un liquide de refroidissement a donc un potentiel exceptionnel pour la récupération de la chaleur résiduelle.

### L'exploitation de la chaleur

Plusieurs techniques sont utilisées, selon l'objectif recherché et la capacité d'investissement des opérateurs, pour exploiter la chaleur résiduelle dans les centres de calcul :
* la production d'eau chaude sanitaire : la chaleur capturée dans des centres refroidis à l'air (de 30 à 40 °C) est suffisante pour des besoins de chauffage domestique. Des chaleurs de qualité légèrement supérieure (de 50 à 60 °C) peuvent alimenter en direct un réseau de chauffage urbain ;
* le refroidissement par absorption et adsorption ;
* la production directe d'électricité : piézoélectricité et thermoélectricité$^,$ ;
* la production indirecte d'électricité : cycle de Rankine$^,$ ;
* le dessalement : production d'eau potable à partir de l'eau de mer.
Le cycle de Rankine et le refroidissement par absorption sont les technologies les plus prometteuses, techniquement et économiquement, pour une optimisation de l'utilisation de la chaleur résiduelle.

### Outils de mesure de la réutilisation énergétique

Dans la lignée du coefficient d'énergie verte (voir supra), de nouveaux instruments de mesure ont été mis au point afin d'encourager la réutilisation de l'énergie en dehors du centre de calcul plutôt que de la rejeter. On distingue deux types d'applications :
L'efficacité de la réutilisation énergétique (ERE, « energy reuse effectiveness ») est une métrique reposant sur le calcul du PUE et y ajoutant la notion d'énergie réutilisée. En considérant $t$ la somme totale de l'énergie consommée par le centre de calcul, $er$ l'énergie réutilisée et $si$ l'énergie consommée par le système informatique :
       $ERE={t-er \over si}$
Le facteur de réutilisation d'énergie (ERF, « energy reuse factor ») est une métrique qui identifie la portion d'énergie qui est exportée pour être réutilisée en dehors du centre de données :
       $ERF={er \over t}$
Soit
       $ERE=(1-ERF)\times PUE$
L'ERF va de 0 à 1 : la valeur à 0 signifie qu'aucune énergie n'est exportée du centre de données pour réutilisation (ERE = PUE), tandis qu'une valeur de 1 signifie que toute l'énergie apportée au centre de données est réutilisée en dehors du centre de données.

### Applications dans le domaine expérimental

Au niveau de la recherche, quelques essais ont eu des résultats significatifs.

#### Aquasar

Premier prototype de supercalculateur à eau chaude, situé à l'École polytechnique fédérale de Zurich en Suisse, Aquasar (en) utilise un système de refroidissement composé de micros-canaux qui apportent l'eau directement sur les processeurs. Cette solution permet d'atteindre une efficacité de récupération de chaleur de 80 % avec une température de l'eau à 60 °C. La chaleur est récupérée pour chauffer les bâtiments et faire de la réfrigération en utilisant des machines frigorifiques à adsorption.

#### Le Colosse de Québec

Le supercalculateur de l'Université Laval au Canada installé en 2009, le Colosse de Québec est disposé de façon concentrique afin de récupérer la chaleur produite par les serveurs et faciliter la ventilation et le refroidissement. En hiver, la chaleur est récupérée via des serpentins dans le réseau d’eau réfrigérée et chauffe ainsi d'autres pavillons du campus. L'infrastructure ne consomme que 30 % de l'énergie d'une salle standard, et en incluant la récupération de la chaleur, cela représente une réduction de la facture d'énergie de 200 000 $ par an pour l'université.

#### Une moissonneuse d'énergie pyroélectrique

Dans le cadre du projet ARPA-E, le laboratoire national d'Oak Ridge dans le Tennessee (États-Unis) a développé une technologie pour récolter l'énergie pyroélectrique en transformant la chaleur des processeurs en électricité. Une structure en porte-à-faux d'un millimètre de large repose sur l'élément chauffant. À mesure qu'elle se réchauffe, elle se déforme jusqu'à toucher un dissipateur de chaleur. Refroidie, la structure se replie pour toucher à nouveau la surface chaude. Les oscillations rapides créent un courant alternatif d'une puissance de l'ordre de 1 à 10 mW, et peuvent permettre de générer des quantités considérables d'énergie puisqu'un processeur d'une surface de 6,5 cm$^2$ peut accueillir 1 000 de ces convertisseurs, tout en étant une aide au refroidissement.

#### Data furnace

Une autre approche propose de remplacer les grands centres de calcul par des « micro-centres de données » distribués à petite échelle, utilisés comme source principale de chauffage domestique dans des maisons individuelles, des complexes d'appartements ou des immeubles de bureaux. Une armoire métallique est installée dans l'habitation et branchée aux conduites d'eau chaude comme pour un système de chauffage classique. Les bénéfices du concept Data furnace (en) sont multiples : une empreinte carbone plus faible en diminuant la part de consommation d'énergie consacrée au chauffage domestique, une réduction substantielle du coût des serveurs pour l'opérateur (gain de 280 à 325 $ par an et par serveur selon une estimation), et une proximité accrue des utilisateurs. Mais la répartition géographique des serveurs conduit à des difficultés de maintenance, de sécurisation du parc, et une limitation de la bande passante du réseau.

#### Les centres de données modulaires

Tout comme le placement intelligent de centres de données modulaires permet d'optimiser l'exploitation de sources d'énergies renouvelables, ces modules peuvent être placés à proximité d'un site de récupération de chaleur. Lorsqu'ils en sont éloignés, la chaleur résiduelle peut être utilisée comme source pour un système de refroidissement par absorption intégré au module.

### Mises en place effectives

La réutilisation de la chaleur des centres de calcul est en pleine évolution et de nombreuses initiatives sont déployées dans le monde. Pour illustrer cette tendance, on peut citer :
* le Centre de recherche en informatique de l'université Notre-Dame-du-Lac en Indiana aux États-Unis a placé une baie de serveurs dans une serre municipale locale pour aider à chauffer les plantes et les fleurs;
* dans le même esprit, le centre de données Condorcet à Paris chauffe un arboretum récréant les conditions climatiques méditerranéennes afin que les scientifiques de l'Institut national de la recherche agronomique (INRA) étudient l'évolution du changement climatique;
* à Bailly-Romainvilliers dans le département de Seine-et-Marne, les rejets thermiques d'un centre de calcul permettent de subvenir à 90 % des besoins en chaleur du parc d'entreprise et d'un centre aquatique voisins;
* à quelques kilomètres, à Champs-sur-Marne, le centre de données Marilyn recycle la chaleur pour chauffer des bureaux, salle de sport, douches et alimente un système d'arrosage grâce à la condensation$^,$;
* enfin, l'université d'Amsterdam, aux Pays-Bas, reçoit une eau gratuitement chauffée provenant de la chaleur résiduelle du centre de données Equinix.

## Historique

C'est en présentant l'ENIAC en 1946 que la notion de data center est introduite. Créé par le laboratoire de balistique de l’Armée américaine, cet ordinateur disposait à l'époque de 0,05 MIPS (million d'instructions par seconde). Il est entouré d'autres équipements qui lui offrent des capacités de stockage, mais dispose aussi d'équipements d'énergie permettant de sécuriser son alimentation (consommation 1 500 kW). Suivra en 1954 le CDC 6600 construit par Control Data Corporation. L'ère du transistor est née.
En 1973 le premier réseau local est créé, appelé ARCnet. L'interconnexion d'équipements informatiques devient possible. Puis arriveront les années 1980 et le développement des premiers ordinateurs personnels ou PC. Les années 1990 et les débuts d'internet, apporteront les premières applications client/serveur : le début des premiers data centers, mais aussi l'apparition des premiers supercalculateurs, qui font partie de la même catégorie. En effet, ils sont assimilés à des centres de calculs. Cray-2 (en) mis en service pour le compte de Météo-France a connu une évolution en 2014 (remplacé par BULL B710 DLC) offrant une capacité de calcul multipliée par 500 000 depuis la première génération.
En novembre 2007, une nouvelle classification est créée : issue du TOP500 qui liste les 500 supercalculateurs les plus puissants au monde, le Green 500 classe ces superordinateurs selon l'évaluation de leur efficacité énergétique (performance par watt). Le consortium industriel The Green Grid voit le jour la même année avec une dizaine de membres ayant comme objectif de travailler conjointement pour un secteur des réseaux informatiques plus écologique et plus efficace (en 2016, l'organisation accueille plus de 200 membres). Les conférences du SIGCOMM (en) organisées par le groupe d'intérêt spécial sur les communications de données de l'Association for Computing Machinery (organisme en systèmes d'information) sont considérées comme le plus important rendez-vous annuel en matière de réseau dans le monde. C'est en abordant le thème des centres de données lors de la conférence de 2008 à Seattle, dans l'état de Washington aux États-Unis, que la recherche en matière d'amélioration de la conception, la performance et l'efficacité (notamment énergétique) s'est très fortement accélérée. Depuis, le développement en laboratoire de nouvelles technologies, tant au niveau matériel que logiciel, et de nouveaux concepts perfectionnant l'efficience énergétique sont mis en application industrielle effective. Cette activité continue d'être en pleine effervescence, alors que le besoin de traitement de données est de plus en plus important et conduit au développement massif des centres de calculs.