Projeto de Datacenters

Prof. Rafael Guimares, PhD

rguima@gmail.com

Agenda
Introduo aos datacenters
O que so, desafios, tipos

Consideraes de projeto
reas funcionais de um datacenter
Cabeamento horizontal e backbone
Organizao de racks e refrigerao
Classificao de datacenters em tiers
Tcnicas de identificao
Racks, cabos, conexes

Datacenter verde

O que um datacenter?
uma edificao, ou parte de uma edificao,
cuja funo primria hospedar uma sala de
computadores e suas reas de suporte.
Hospeda equipamentos e dados de misso
crtica!

Desafios
Desafios de um datacenter

Garantir disponibilidade de aplicaes/sistemas (SLA)

Hospedar sistemas complexos e heterogneos
Garantir nveis de servio para tempo de resposta
Manipular grandes quantidade de dados (disponveis e
backups)
Manter conformidade com normas regulatrias e de
segurana
Acompanhar alteraes nos requisitos de negcio
Aplicar prticas verdes e de reduo de consumo de
energia

Tipos de datacenter
Existem basicamente dois tipos:
Datacenter corporativo
Possudo e operado por corporaes privadas,
institutos e rgos governamentais
Suportado por equipe de TI prpria ou contratados

Datacenter de Internet
Possudo e operado por operadores de telecom e
provedores de servios
Prov terceirizao de TI

Consideraes de projeto
Coordenao de todos os aspectos de projeto
crtica:

Sistema de cabeamento de telecomunicaes

Projeto de piso de equipamentos
Projetos eltricos
Projeto arquitetnico
Ar-condicionado
Segurana
Iluminao

Processo de projeto
Processo de projeto recomendado:
Estimar as necessidades dos equipamentos
capacidade total
Antecipar crescimento futuro do datacenter
Prover todos os requisitos para arquitetos e
engenheiros
Criar um projeto de piso de equipamentos
Projetar sistema de cabeamento de
telecomunicaes

reas funcionais
5 reas funcionais propostas pela norma TIA942:

Sala de entrada (ER)

rea de distribuio principal (MDA)
rea de distribuio horizontal (HDA)
rea de distribuio de zona (ZDA) opcional
rea de distribuio para equipamentos (EDA)

Idealmente salas separadas, o que no

prtico para maioria das organizaes
Pode ser consolidado em reas pr-definidas

reas funcionais

reas funcionais
Sala de entrada (ER)
Demarcao de ponto de provimento de acesso
Equipamento de terminao para cabos de
provedor de acesso
Interface entre cabeamento do datacenter e
cabeamento do edifcio
Caminho para todos os cabos de entrada
Pode ser localizada dentro ou fora da sala de
computadores

reas funcionais
rea de distribuio principal (MDA)

Ponto central de distribuio

Inclui as conexes principais (MC)
Pode incluir conexes horizontais (HC)
Roteadores e switches ncleo para LAN/SAN e
PBX
Localizado dentro da sala
de computadores
Deve haver pelo menos
uma MDA

reas funcionais
rea de distribuio horizontal (HDA)
Suporta todo o cabeamento para a rea de
distribuio de equipamentos
Inclui as conexes horizontais (HC)
Switches para os equipamentos
na EDA esto aqui
Localizado dentro da sala de
computadores
Mnimo de uma HAD por andar

reas funcionais
rea de distribuio de zona (ZDA)
Ponto de interconexo opcional com o
cabeamento horizontal
Localizada entre HAD e EDA
Permite reconfigurao frequente e flexibilidade
Deve servir no mximo 288 conexes para evitar
congestionamento de cabos
No deve possuir nenhum equipamento ativo

reas funcionais

reas funcionais
Zona de distribuio para equipamentos (EDA)
Espao para equipamentos servidores,
mainframes, storage etc
Cabeamento horizontal termina aqui em patch
panels
Cabeamento ponto-a-ponto entre equipamentos
permitido

Cabeamento horizontal
Topologia de cabeamento horizontal

Cabeamento horizontal
Cabeamento entre HAD e EDA incluindo cabos
horizontais, patch cords etc

Cabeamento backbone

Cabeamento backbone
Cabeamento entre ER, MDA e HAD
Deve permitir reconfiguraes de rede e
crescimento futuro

Topologia reduzida
Reduo da topologia de datacenter
Consolidao de ER, MDA e HDA
Aplicvel maioria das empresas

Passagem de cabos
O cabeamento do datacenter deve seguir a
norma ANSI/TIA-596-B
Os cabos no deve passar por espaos pblicos
a no ser quando protegidos por passagens
seguras
Acessos para manuteno, caixas de juno e
caixas de distribuio devem ser trancadas e
monitoradas

Passagem de cabos
Sala de entrada (ER)
Cabos deve passar por baixo do piso (elevado)
Cada provedor de acesso deve possuir ao
menos um condute de 4
Deve seguir a norma ANSI/TIA-569-B

Passagem de cabos
Por baixo do piso (elevado)
Cabeamento por baixo do piso deve passar por calhas
ventiladas para evitar bloqueio do fluxo de ar
Calhas devem ser instaladas em mltiplas camadas
Mais barato do que cabeamento areo se o piso for
elevado
Deve prover capacidade de crescimento
Separar fibras de cabos de cobre e de cabos de energia

Passagem de cabos
Cabeamento areo
Calhas devem ser instaladas em mltiplas
camadas (3 camadas)
Camada inferior: cabeamento de cobre
Camada intermediria: fibra
Camada superior: cabos de energia

Calhas devem ser suportadas pelo teto

Racks
Posicionamento de racks
Corredor quente / corredor frio alternados
Corredores frios so a frente e corredores
quentes a traseira dos racks
Se houver piso elevado
Cabos de energia passam pelos corredores frios
Cabos de dados passam pelos corredores quentes

Refrigerao
9 solues

Fonte: www.apcdistributors.com

Cada soluo tem

sua aplicao
ideal

Fonte: www.apcdistributors.com

Refrigerao para pisos fixos

Refrigerao para pisos fixos

Fonte: www.apcdistributors.com

Fonte: www.apcdistributors.com

Refrigerao para pisos elevados

Refrigerao para pisos elevados

Fonte: www.apcdistributors.com

Refrigerao
Sistemas de conduo de calor/frio por dutos

Tiers
A norma TIA-942 define 4 tiers (nveis) para
datacenters:
Relacionados com os nveis de disponibilidade
da infraestrutura
As classificaes de tiers foram definidas
originalmente pelo Uptime Institute
Sistemas crticos podem ter diferentes
classificaes
Classificaes podem cair medida que a carga
do datacenter aumenta com o tempo

Tiers
Tier I Bsico
Caminho nico para distribuio de energia e de
refrigerao
Sem componentes redundantes
No necessita ter piso elevado
Suscetvel a interrupo devido a atividades
planejadas ou no planejadas
28,8h anuais fora do ar

Tiers
Tier II Componentes redundantes
Caminho nico para distribuio de energia e de
refrigerao
Componentes redundantes
Possui piso elevado
Um pouco menos suscetvel a interrupes do
que o Tier I
22,0h anuais fora do ar

Tiers
Tier III Manutenibilidade concorrente
Mltiplos caminhos para distribuio de energia e
de refrigerao apenas um caminho ativo
Componentes redundantes
Permite a realizao de qualquer atividade
programada relacionada com infraestrutura sem
interrupo da operao
1,6h anuais fora do ar

Tiers
Tier IV Tolerante a falhas
Mltiplos caminhos ativos para distribuio de
energia e de refrigerao
Componentes redundantes
Todos os componentes de hardware devem
possuir duas fontes de alimentao
Suporta pelo menos uma falha ou evento no
programado que no cause impacto crtico
0,8h anuais fora do ar

Tiers
Tier IV Redundncia de fornecimento de
energia

Tiers
Tier Caractersticas de negcio

Efeito no projeto do sistema

Tipicamente empresas pequenas

Presena online limitada
Pequena dependncia de TI
Tempo fora do ar tolerado

Vrios pontos nicos de falha

Sem gerador se UPS suporta 8min
Geralmente no suporta mais de 10min de falta
de energia

II

Parte da receita se obtm online

Mltiplos servidores
Sistema de telefonia vital
Dependente de email
Tolerante a paradas programadas

Alguma redundncia no fornecimento de energia

e sistema de refrigerao
Gerador de backup
Pode suportar 24h sem energia
Sala de dados formal separada as outras reas

III

Presena global
Maior parte da receita obtida online
Sistema telefnico VoIP
Alta dependncia de TI
Alto custo por tempo parado

Sistemas de energia e refrigerao redundantes

Provedores de servios redundantes
Pode suportar 72h sem energia
Permite manuteno concorrente
Planejamento cuidadoso da escolha do local

IV

Negcio de vrios milhes

Maioria da receita de transaes
eletrnicas
Modelo de negcios dependente de TI
Custo extremamente alto por tempo
parado

2N sistemas de energia e refrigerao

Pode suportar 96h sem energia
Critrio rgido de escolha do local
Equipe de manuteno 24/7 no local

Identificao de setores
O piso deve seguir a matriz do prprio
datacenter
Use duas letras e dois dgitos numricos para
cada pedao de 60cm x 60cm do piso
Ou cada mdulo do piso elevado
AA, AB, AC, , AZ,
BA, BB, BC,
Similar batalha naval

Identificao de setores
Localizao de um rack
Se houver mais de um andar, colocar o nmero
de andar como
prefixo: 2AJ05

Identificao de patch panels

Usar letras (A,B,C,...) de cima para baixo

Identificao de patch panels

Conexes do patch panel
Rack, seguido do patch panel seguido das portas

Identificao de patch panels

Cabos e patch cords
Devem possuir indicaes de ambas as
terminaes nas duas pontas do cabo

Datacenter verde
Por muitos anos, questes ambientais foram
consideradas preocupaes para poucos
Para CEOs
Consumo de energia e preocupaes ambientais
assumem novo significado ao bloquear a
capacidade de crescimento da empresa

Para CIOs
Necessidade de encontrar
maneiras de ampliar a
capacidade das operaes
para atender exigncias do
negcio

Datacenter verde
Custos de energia em ascenso
Equipamentos de TI pressionando infraestrutura
de energia e resfriamento
Crise operacional e econmica pode estar em
vias de acontecer

Eficincia energtica passa a integrar lista de

parmetros operacionais junto com
disponibilidade, confiabilidade e desempenho.
Transio para um datacenter verde e a
otimizao da eficincia operacional podem ser
tarefas complexas

Datacenter verde
Tornar-se verde uma necessidade que as
empresas tero que incorporar o quanto antes
se quiserem sobreviver economicamente
Desafios para os CIOs
Surgimento de servidores mais rpidos,
dispositivos de armazenamento mais baratos e
equipamentos de rede mais flexveis
Demandam cada vez mais energia!

Evoluo dos servidores de alta densidade

(blades), aumentou densidade trmica
Sobrecarregam sistemas de refrigerao

Datacenter verde
Custos de eletricidade e refrigerao
representam at 44% do TCO de um datacenter
Custo para fornecer energia e resfriar servidores
durante 3 anos atualmente 1,5x maior do que
custo de compra de softwares para servidores
O problema atual no s pagar pelos
servidores, ter verba para pagar pela energia
e resfriamento
Algumas empresas no conseguem instalar
novos servidores pois no h energia adicional,
seja qual for o preo

Datacenter verde
Demanda por energia para servidores duplicou
de 2000 para 2005
Energia utilizada para servidores, resfriamento e
infraestrutura de apoio foi responsvel por 1,2%
de todo o uso de eletricidade nos EUA neste
perodo
Nos EUA diversas fornecedoras de energia
oferecem descontos em contrapartida a uma
maior eficincia energtica por parte dos
consumidores
Na Austrlia, grandes consumidores devem
apresentar plano de avaliao e ao

Datacenter verde
Para caminhar em direo a um datacenter verde:

Mudanas energticas e de resfriamento

Virtualizao
Hardware e software eficientes em termos de energia
Iniciativas de gerenciamento de energia e cargas de
trabalho

Datacenter verde
Passos iniciais para datacenter verde
Avaliao de melhores prticas
Auditoria energtica

Certamente aparecero inmeras oportunidades para

melhoria da eficincia energtica
Grandes projetos de infraestrutura
Upgrade de resfriadores
Upgrade do sistema de UPS

Melhorias simples e baratas

Bloqueio de aberturas p/ cabos para impedir sada de ar frio
Remoo de bloqueios de cabos sob o piso que impeam
circulao de ar
Desligamento de servidores sem carga de trabalho
Desligamento de unidades de ar-condicionado em reas
refrigeradas em excesso

Datacenter verde
Aplicar enfoque modular no projeto futuro com
relao energia e resfriamento
Necessidades do negcio provavelmente iro
mudar ao longo do tempo
Permitir fcil expanso ou modificao

Datacenter verde
Melhorias no layout de racks e salas podem contribuir
com investimento inicial baixo
Organizar equipamentos de TI em configurao de
corredor quente e corredor frio
Posicionar equipamento de forma a tornar possvel o
controle do fluxo de ar entre alas quentes e frias
O ar quente no deve circular novamente pelas entradas de
resfriamento dos equipamentos de TI

Utilizar opes complementares de resfriamento de baixo

custo gua ou outros refrigeradores
Aumentar eficincia de resfriamento com trocadores de
calor de porta traseira ou sistemas de racks embutidos
para dissipar calor

Datacenter verde
Estudos da IBM demonstraram que servidores
blade reduzem as necessidades de energia e
resfriamento em 25% a 40%
Alm da economia de espao!

Virtualizao pode melhorar a eficincia

energtica do datacenter
Menos servidores so necessrios
Diferena de consumo/calor de entre servidores
utilizados 100% do tempo ou 15% pequena
Servidores sem uso podem ser desligados

Bibliografia
ANIXTER. Datacenter Infrastructure Resource Guide.
Glenview: Anixter, 2008.
CHALASANI, Sri. TIA-942: Data center standards. 2010.
FURUKAWA. Guia de recomendao para um data
center. Curitiba: Furukawa, 2009.
IBM. O Datacenter verde. Somers: IBM, 2007.
TELECOMMUNICATIONS Industry Association.
TIA-942: Telecommunications Infrastructure Standard for
Data Centers. Arlington: TIA, 2005.
http://www.fiberoptics4sale.com/wordpress/cabling-adata-center-to-tia-942-standard/