Vous êtes sur la page 1sur 50

Environnement des serveurs : datacentres

Franoise Berthoud Alger, 12 septembre 2011

Objectif
Fournir

les lments de comprhension pour apprhender les aspects conceptuels et techniques dun datacentre,

en rponse aux besoins et par rapport aux enjeux environnementaux, financiers et lgislatifs

Questions par sous groupe


3

questions par postit par sous groupe (10 min) Exposes

1re partie :
Les questions se poser avant de dbuter la mise en place dun datacentre !

A quoi sert un datacentre ?


A

assurer un fonctionnement optimal des services (services gnraux, calcul, stockage), en fonction :

Des besoins Des contraintes Des risques couvrir

Spcification des besoins


Importance

de la connaissance de lutilisation finale des serveurs Types de services et niveaux de criticit lments capacitaires (consommation effective totale) lments de disponibilit (frquence, dure dinterruption tolres)

Quels risques souhaitez-vous couvrir ?


Scurit

etc. Incendie, inondation, autres Coupure rseau lectrique (connaissance


rseau lectrique)
Coupure

physique (intrusion) : salle, rack,

rseau internet Surchauffe salle serveurs Pollution sonore

Cas concret

2me partie : Units / indicateurs / Tiers Conditions de fonctionnement des serveurs

Quels sont les lments dun datacentre : units


Un groupe lectrogne dveloppe des kW

Un disjoncteur est calibr en Ampres (A)

Un serveur utilise des Watts (W)

Un groupe froid dlivre des kW

Un onduleur exprime une puissance en KVA

W, KVA, cos

Les lments capacitifs ou inductifs introduisent un dphasage entre le courant (A) et la tension (U)

P = U I cos
Watt = Volt x Ampre x 0,

Dans les salles informatiques le dphasage est essentiellement inductif (bobines)

Si est important (cos est petit) alors pour une mme puissance (serveurs) il faut fournir plus d'Ampres (arrive lectrique/onduleur) surconsommation risque de disjonction

Un mauvais cos est pnalis par le fournisseur dnergie

Notion de puissance active et ractive

Petit rappel : Kw - kwh


Un serveur dune puissance de 0,400 kW, consommera si il est allum toute lanne (en Algrie) : 0,400 * 24 * 365 = 3504 KWh Soit 3504*1,4 DA = 4905 DA / an (hors frais dabonnement)

Quelques chiffres

2008 :

consommation dlectricit mondiale : 17000 Twh Consommation datacentres : 900 Twh (5%)

Croissance prvue dans les 10 prochaines annes


(cluster de calcul : environ 20 kW/rack, baie de serveurs web : de lordre de 5 kW/rack)

30 fois plus de donnes (dont 90% non structures) 1000 fois plus de serveurs Haute densit (>10 kw/rack) dans tous les DC

Aspects consommation lectrique


Aspects

environnementaux (GES)

Aujourdhui >2% GES (autant que laviation civile) en forte croissance Nous devons rduire nos GES dun facteur 4 dici 2050 [EU]

Aspects consommation lectrique (exemple)


1 W (IT) >2W nergie >4W nergie primaire

Aspects consommation lectrique : aspects financiers


Aujourdhui en France les cots de fonctionnement dun serveur (nergie) sont suprieurs au cot dachat de lquipement ! Important facteur dconomie

Augmentation du cot de lnergie

Quen est il pour vous ?

Aspects consommation lectrique (exemple)

Source : Etude Emerson "Energy Logic : Reducing Data Center Energy Consumption by Creating Savings that Cascade Across Systems"

Aspects consommation lectrique


Mesures
PDA

(monitoring)

intelligents Chssis, rack intelligents Compteurs armoire lectrique Voltmtres / ampremtres Camras thermiques Utilisation de lipmi des serveurs etc.

PUE = Power Utilization Effectiveness (1/DCiE)


Fournisseur ARRIVEE ELECTRIQUE (FACILITIES)

DISTRIBUTION ET QUALITE ELECTRIQUE (FACILITIES)

GESTION INFORMATIQUE (IT) calcul, stockage, rseau

GESTION CLIMATIQUE (FACILITIES)

AUTRES : Lumire, scurit etc. (FACILITIES)

KWH FACILITIES

KWH IT

PUE =
KWH IT

PUE(s)
PUE Category 0 Point de mesure IT Dfinition de lnergie IT Sortie des UPS Demande lectrique ponctuelle (IT) (kW) Demande lectrique totale ponctuelle (kW) PUE Category 1 Sortie des UPS Energie IT annuelle PUE Category 2 Sortie des PDU Energie IT annuelle PUE Category 3 Entre des serveurs Energie IT annuelle

Dfinition de lnergie totale

Energie totale annuelle

Energie totale annuelle

Energie totale annuelle

Source : Energy Star Data Center Energy Efficiency Initiatives

Indicateurs

Limites du PUE (annualis, nergies renouvelables, rutilisation chaleur et surtout PUE si EIT (mme si les serveurs tournent vide) CUE (CO2/KWh IT) = [Empreinte (KWh EDF) + Empreinte (KWh GE)
Empreinte (E photovoltaque)] / KWh IT

WUE (L/KWh IT) = Quantit annuelle deau utilise / KWh IT ERE : quivalent au PUE mais tient compte de lnergie
rcupre

DCP (Data Center Productivity) = useful works/ Resource Consumed

Source : http://www.thegreengrid.org/

Points supplmentaires

Du datacentre linfrastructure de datacentre (disponibilit assure par une redondance de services dans des salles distantes) Attention lalimentation secourue du groupe froid (surtout avec les hautes densit) Pensez aux dispositifs dextinction automatique des serveurs en cas de surchauffe

Rponses constructeurs
Cals

sur des standards par forcment adapts votre problmatiques, vos besoins (en particulier par rapport au calcul) de disponibilit classs en tiers

Niveaux

Obligations standards par Tier selon UPTIME INSTITUTE Sources de puissance (GE, UPS, prod. de froid) Redondance des composants de chaque systme desserte ou chane de distribution

TIER I
1 systme N 1

TIER II
1 systme N+1 1

TIER III
1 systme mutualis N+1 1 normal + 1 alternatif en veille non oui non oui Dpend de la densit de charge 99,98 % 1,6 H

TIER IV
1 systme + 1 systme N aprs panne 2 actifs en simultane oui oui oui oui Class A

Compartimentage des systmes et sous-systmes Maintenance planifie avec continuit de service Tolrance aux pannes (un seul vnement) Ncessite des matriels informatiques en double alimentation Refroidissement continu

non non non non Dpend de la densit de charge 99,67 % 28,8 H

non non non non Dpend de la densit de charge 99,75 % 22 H

Taux de disponibilit Dure annuelle d'interruption du systme informatique (statistique)

99,99 % et + 0,8 H

Codification du refroidissement continu :

Class A: Refroidissement ininterrompu : Ventilateurs et pompes sur chanes ondules. Bche tampon sur rseau deau glace. Objectif : conserver la salle informatique une temprature normale durant une coupure lectrique. Class B : Refroidissement continu : ventilateurs sur chanes ondules Objectif : conserver une circulation dair durant une coupure lectrique. Class C : Refroidissement interrompu : Pas dquipements de climatisation sur chaine ondule. Refroidissement suspendu jusqu' restauration de lalimentation.

Conditions de fonctionnement des quipements : ASHRAE

Tableau des recommandations ASHRAE pour Datacentre de classe 1 et 2 : 2004 versus 2008 Source : document "2008 ASHRAE Environmental Guidelines for Datacom Equipment - Expanding the Recommended Environmental Envelope"

Le taux dhumidit support en entre des serveurs peut atteindre 90% exceptionnellement ! La plage des tempratures admissible titre exceptionnelle pour un Datacentre de classe 1 est plus large :

Minimum : 15C Maximum : 32C

Conditions de fonctionnement des quipements: Norme ETSI


La norme ETSI EN 300 019-1-3 encadre les conditions environnementales recommandes et admissibles au sein dun Datacentre

Exemple : exprimentation FT

Rsum partie III


GES Gaspillage Couts

Normes

3me partie : mettre en uvre les techniques adaptes

Elments dterminants
Minimiser la consommation lectrique, les pollutions sonores en maximisant les performances (selon les spcifications dfinies)

Elments dterminants : salle


Accs (hauteur/largeur/passage) Charge au sol (1T/m2) Pas de poteaux Exposition minimale une source de chaleur ventuellement modulaire

A propos des quipements IT (spcifications achat)


Processeurs

: basse consommation ? Alimentation : energy star, 80plus platinium, double alimentation ? Serveurs : EPEAT Nuds de calcul : diskless ? Stockage : SSD, MAID

80plus

Hier, lefficacit tait de lordre de 60% 75% Depuis 2004, le label 80plus impose un minimum de 80% defficacit nergtique (inclus dans Energy Star depuis la version 4.0 en 2006 pour les PC) A partir de 2008, 80plus se dcline en 3 labels, un 4me pour les serveurs apparu fin 2009

Charge 20% 50% 100% 80% 80% 80% 82% 85% 82% 85% 88% 85% 87% 90% 87% 90% 94% 91%33

A propos des racks


Densit

(>25kw/rack) Standards (taille) Dispositifs de monitoring Dispositifs de condensateurs / onduleurs Dispositifs dextinction incendie Dispositifs de refroidissement

Alimentation secourue
Attention

au cos ! (> 0,8) Attention aux conditions de Temprature (21) Les UMC peuvent tre un bon compromis pour les nuds de calcul Nonduler que ce qui est ncessaire (qualit rseau lectrique, spcificits jobs, mcanismes de relance, etc.) Choisissez une solution modulaire

Courants faibles / forts


Minimiser les longueurs de cble attention : 0,01% de perte par mtre audel de 6m)

Groupe lectrogne

Est il vraiment ncessaire ? Quelle dure de fonctionnement ? Ny a-t-il pas moyen de dporter les services critiques sur dautres serveurs dans la temps de maintien par londuleur ? Pollution sonore Augmente les interventions ( risques de panne) Si prsent : test une fois par mois

Refroidissement
Au

plus prs des serveurs (cloisonnement, couloirs dair chaud / couloirs dair froid) Fluide meilleur caloporteur que lair Portes rfrigres Techniques de free-cooling (direct/indirect/air-air/air-eau/eauair/eau-eau) Techniques de gothermie etc ..

La climatisation
Conditionnement des alles

Illustrations: Siriwardana, J., Schott, W. & Halgamuge, S. 2010, "The power grabbers", Power and Energy Magazine, IEEE, vol. 8, no. 1, pp. 46-53.

La climatisation
Free-cooling
Exemple du Free Cooling air direct

Schma simplifi

Lair frais de lextrieur vient refroidir le circuit dair de refroidissement du datacentre

La climatisation
Free-cooling
Exemple du Free Cooling eau indirect Schma simplifi

Leau froide de la source vient refroidir le circuit deau glace du datacentre via un changeur

La climatisation
Le systme est encore plus efficace avec lexploitation de baies rfrigres (refroidissement au plus prs de la source de chaleur).

Les containeurs : avantages/inconvnients


Rapidit de mise en uvre Modularit (SGI par ex) Existent en free-cooling Pas de recul Fragilit des installations compte tenu de la densit Uniquement pour solutions standards Quid en cas de nombreuses interventions ? Dure de vie ? Cout de maintenance (au-del des 3 ans ..)

Les guides
Code

of Conduct Energy star Les livres blancs des constructeurs

Code of Conduct [EU]

Le CoC couvre les Data centres de toutes dimensions de la simple salle informatique aux btiments complets spcialement ddis.

Peut sappliquer aux btiments anciens ou nouveaux et aux fabricants dquipements, de systmes, de conception et les bureaux dtudes
Un des points clefs du Code of Conduct est que chaque participant doit se mesurer par rapport aux objectifs quil sest fix afin de les amliorer

Code of Conduct [EU]


1. 2.

3.

4.

5. 6.

7.

Introduction: Objectifs, Applicabilit des bonnes pratiques, Primtre considr, Planification, gestion et utilisation du Datacentre: Lien avec les parties prenantes, politique gnrale, niveau de redondance, Equipements IT et services: Slection, dploiement, gestion Refroidissement: Gestion des flux dair, rglages des tempratures, taux dhumidit, rendement des units de froid, ... Alimentation lectrique du Datacentre: Slection et dploiement Autres quipements du Datacentre: Bureaux et espaces de stockage Surveillance, monitoring: Mesures raliser, rapport priodique
Code of Conduct on Data Centres Energy Efficiency, European Commission, Oct. 2008. 20p. Best practices for the EU Code of Conduct on Data Centres, European Commission. Oct. 2008. 27p.

Sources:

Data Center Initiative

[Energy Star, US]

Objectifs : Dvelopper un systme de cotation utile pour les industriels sur la base des lments gnralement mesurs et/ou suivis en sappuyant sur les mthodes Energy Star existantes et autres plateformes Applicable sur les DC ddis ou ceux situs dans un immeuble Evaluer la performance du btiment Communiquer auprs des utilisateurs sur les ressources possibles Modle de rgression permettant prdiction du PUE incluant les facteurs hors de contrle de lexploitant du DC avec des facteurs dajustement dtermin en fonction des collectes de donnes et des analyses Comparer PUE rels et les prdictions

Pour aller plus loin


teindre

les serveurs / nuds de calcul non utiliss (cf gestionnaire de batch) Optimiser lutilisation des serveurs allums (utilisation des ressources) Optimiser les codes

En conclusion
Cots croissants de lnergie + conditions optimales de fonctionnement des serveurs

Importance de la conception de lespace daccueil des serveurs (minimisation des pertes) Si la salle (et clim) existe dj, sparer les flux dair, teindre les serveurs non utiliss, augmenter la temprature de consigne.

Pour ne rien oublier


Organisation fonctionnelle spatiale du site
Zonage du btiment (situation de la salle dans lensemble du projet/Accessibilit) Besoins en surfaces informatiques et en puissance Puissance Salle informatique, locaux oprateur, locaux annexes, locaux techniques

Ingnierie des salles informatiques (Etat de lart, redondance, urbanisation) Suret de fonctionnement

Conditions de fonctionnement du centre informatique Urbanisation Niveau de continuit de service

Temprature, hygromtrie Equipements informatiques, Nombre de baies, Principe de cheminement des fluides et des Courants, faux plancher, plan de salle Fonctionnement de la salle, niveau de disponibilit, niveau de tiers associ, caractristiques de lalimentation lectrique, caractristiques de lalimentation Cfa, courants secourus Qualit du courant, rgime du neutre, raccordement au rseau HTA, GE, Onduleurs, Transformateurs, Impact env (bruit) du GE T, Hygromtrie, air neuf, principe de refroidissement, ventilation, optimisation nergtique, free-cooling,

Courants forts, principes dalimentation Climatisation et ventilation Mtrologie, outils de mesure, simulations .. Suret, scurit, gestion technique, ..

Alimentation lectrique

Conditions de fonctionnement

Principe de scurit des accs Scurit incendie Suret physique et lectronique du centre Contrle et surveillance des accs

Profils daccs, lments de scurit Protection passive, dtection automatique, extinction automatique,