Electric Power and Air Conditioning

Consumption

Ramon: Potência elétrica = demanda = capacidade instalada

• Rack grande: 300 W/node X 40 nodes = 12 kVA X 1.4 (Coeficiente de Segurança) = 16.8 kVA
• Rack pequeno: 300 W/node X 24 nodes = 7.2 kVA X 1.4 (Coeficiente de Segurança) = 10.1 kVA

Air Conditioning

• 1 BTU per hour = 0.29307107 Watts (vide http://www.aip.org/avsguide/refguide/refrigeration.html)
• VA = Watts/PF com PF ~ 1 para computadores (vide http://www.onewilshire.com/resource_center/colo_toolkit/ExplainingWattsandVoltAmps.htm)
• 1 BTU = Watts X 3.412 = kVA X 34.120

24 Nodes = 10.1 kVA X 3.412 = 34.460 BTU's ~ 36.000 BTU's

Description

O quadro de distribuição de energia elétrica do SPRACE é alimentado por 3 fases de 120V, cada uma protegida por um fusível de 160A, e distribui 2 fases + terra para um total de 20 tomadas, instaladas abaixo do piso falso da sala de servidores.

Dessas 20 tomadas, 13 delas alimentam os no-breaks: 12 no-breaks na sala de servidores e um no-break externo (que alimenta o servidor sprace e uma estação de trabalho). Os disjuntores do quadro de distribuição são de 20 A x 380V, e protegem cada uma das 20 tomadas. A numeração dos disjuntores está marcada na fiação interna ao quadro, começando em 01 no canto superior esquerdo, e terminando em 20 no canto superior direito, sendo que os ímpares estão à esquerda e os pares à direita, olhando o quadro de frente (conforme mostra o esquema).

O no-break externo (do servidor sprace) está ligado no disjuntor 7; Os no-breaks do rack 1 estao ligados nos disjuntores 9 e 10; Os no-breaks do rack 2 estao ligados nos disjuntores 11 e 12; Os no-breaks do rack 3 estao ligados nos disjuntores 14 e 15; Os no-breaks do rack 4 estao ligados nos disjuntores 16 e 17.

De acordo com esse levantamento, e verificando a distribuição das fases no quadro de força, notei que:

• Nas fases 1 e 2 há dois no-breaks: o no-break da sprace e o no-break de baixo do rack 3
• Nas fases 2 e 3 há três no-breaks: os no-breaks do rack 2 e o no-break de baixo do rack 4
• Nas fases 1 e 3 há quatro no-breaks: os no-breaks do rack 1, o no-break de cima do rack 3 e o no-break de cima do rack 4.

Para fazer uma melhor distribuiçao da carga (i.e., 3 no-breaks em cada par de fases), bastaria mudar o no-break de cima do rack 3 da tomada 15 para a tomada 13. Falta ainda determinar no piso falso quem sao cada uma das tomadas, e conferir se as tomadas 13 e 15 estao próximas.

Os no-breaks APC têm uma série de itens configuráveis. Uma das configurações possíveis é chamada "Capacidade mínima antes de voltar a ligar", que faz com que o no-break carregue suas baterias até uma percentagem especificada antes de ser religado (default é 0 - religa imediatamente, e pode ser configurado para 15, 50 ou 90% de carga nas baterias). Os no-breaks estão configurados de forma que eles façam uma carga de 15% nas baterias antes de religar os servidores, uma tentativa de evitar o surto de corrente que desarma os disjuntores quando a energia é restabelecida após uma queda prolongada.

A capacidade de corrente nominal de cada no-break em regime é de 16A; os disjuntores estão com a especificação correta (20A). O que provoca o desarme é o surto de corrente quando volta a força, pois cada no-break religa 8 servidores ao mesmo tempo, quando as baterias ainda estão descarregadas.

Quanto à possibilidade de controle remoto dos servidores (ligar/desligar, dar reset, monitorar as temperaturas internas e até velocidades das ventoinhas), a Supermicro tem uma plaquinha que se instala dentro do servidor, que permite realizar essas tarefas remotamente, através da rede, e de forma independente do sistema operacional, de acordo c/ o padrão IPMI da Intel (http://www.intel.com/design/servers/ipmi/). Cada plaquinha dessas custa em torno de US$ 50.

Todos os servidores do cluster do SPRACE têm mainboards da Supermicro, então é possível instalar essas plaquinhas em todos eles. Os servidores da fase 3 já virão com estas plaquinhas instaladas. O link a seguir tem mais detalhes sobre essa plaquinha p/ mainboards da Supermicro: http://www.supermicro.com/products/accessories/addon/AOC-IPMI20-E.cfm