Usando cabos de energia Y em um datacenter

17

Sempre presumi que o uso de cabos Y da PDU para PSUs redundantes no mesmo servidor era uma prática totalmente aceitável, no entanto, recentemente conversei com alguém que disse que seu colo não permitiria.

Não sou eletricista, mas me parece que, como as PSUs são redundantes, elas não estão desenhando ao mesmo tempo. Se for esse o caso, parece que o uso de um cabo Y em duas PSUs não corre o risco de extrair a ampacidade nominal do cabo ou da tomada individual.

Perdi alguma coisa aqui? Por que um colo optaria por proibir cabos de energia Y em racks de servidor?

MDMarra
fonte
1
Você pode conectar-se a um exemplo de cabo?
Ewhite
9
Hum, parece que realmente precisamos de uma cartilha "Power for Sysadmins" do início ao fim aqui. Algumas dessas respostas abriram uma nova lata de vermes
MDMarra
3
Eu suspeitava fortemente que eles tinham algum idiota no passado, pegando uma única porta C13 da PDU e "distribuindo" para 5 servidores ou algo que explodiu a PDU ... E agora eles têm uma regra contra os divisores Wye.
Chris S
1
Este Q deve ser adicionado à lista "Canonical". YMMV ...
Deer Hunter
4
@DeerHunter Eu não acho que essa pergunta deva ser canônica por si só, mas uma cartilha "Power for Sysadmins" com certeza parece uma boa idéia para uma nova canônica.
precisa

Respostas:

19

Também não sou eletricista, mas acho que pelo menos você perderá a possibilidade de manter seu servidor em funcionamento ao fazê-lo. Pelo contrário, se você conectar cada PSU a uma fonte de energia diferente, seu servidor ainda terá uma fonte de energia disponível (espero).

Khaled
fonte
12
Este. Os cabos Y não representam um risco elétrico, eles representam um risco de redundância desde então.
Lee Harrison
Então você está falando sobre ter várias PDUs em um rack? Isso não é realmente viável em muitos casos, especialmente se você estiver usando PDUs verticais.
precisa saber é o seguinte
Depende do rack, suponho. Somos uma empresa pequena, com 2 gabinetes de servidor altos e ambos acomodam fontes de alimentação redundantes por ter trilhos de alimentação independentes em cada lado do gabinete. É claro que a sala do servidor precisará ser conectada corretamente para tirar vantagem disso também.
Lee Harrison
@MDMarra: Talvez você tenha um risco se as PSUs estiverem trabalhando no modo de balanceamento de carga e ocorrer uma falha. Nesse caso, a energia aumentará no outro PSU ainda ativo. Veja este post .
Khaled
@ Khaled, mas isso ainda não resultará em consumo de energia inseguro, até onde eu saiba.
precisa saber é o seguinte
16

Eu nunca os usei porque eles são um único ponto de falha, na melhor das hipóteses.

Cada servidor que implanto em um datacenter real tem cada PSU conectada a uma PDU diferente no rack, cada qual conectada a um no-break independente diferente, em circuitos diferentes, idealmente alimentados a partir de diferentes fontes de alimentação.

Se o no-break, a PDU ou o circuito do seu cabo Y cair, as PSUs redundantes serão inúteis, portanto, na melhor das hipóteses, é um desperdício e, na pior das hipóteses, uma falsa sensação de redundância.

EDITAR:

Mencionarei apenas que estou falando de no-breaks de 1U ou 2U de menor capacidade montados no rack do servidor, em vez das unidades de no-break muito maiores e muito mais caras que montam um rack próprio. Definitivamente, essas são projetadas para serem altamente redundantes por si mesmas, sem a necessidade de uma unidade secundária.

HopelessN00b
fonte
A maioria dos ambientes em que trabalhei tem um Symmetra ou no-break semelhante que consome vários racks. Na verdade, não vejo muitos lugares com UPSs redundantes dessa escala, mas também não tenho muita exposição ao lado "poder" das coisas - portanto, esta pergunta. Eu também realmente nunca vi uma PDU com falha (não que isso não aconteça, tenho certeza). Quando você atinge essa escala, as pessoas realmente têm vários Symmetras para alimentar várias PDUs?
precisa saber é
@MDMarra Sim, veja minha edição, eu tenho uma visão de túnel - ainda não vi ninguém configurar um grande sistema UPS como o tipo que você menciona em uma segunda unidade para redundância. Se / quando unidades adicionais desse tamanho forem adicionadas, trata-se de capacidade extra, não de redundância extra.
precisa
4
@MDMarra Eu faço muito design e construção de datacenter. Raramente existem vários sistemas UPS para redundância. Os grandes sistemas UPS podem operar com vários níveis de falhas (baterias, controladores de energia) e voltarão graciosamente a apenas redirecionar a energia da rede elétrica, se necessário. A energia da rede será assumida pelo gerador, se necessário. Normalmente, o no-break é apenas um retificador / protetor contra surtos de tensão e cobre a tomada da rede elétrica ao gerador. O no-break terá vários circuitos de saída que alimentam as PDUs no (s) rack (s). Cada servidor se conecta a 2 circuitos diferentes.
quer
@ Tony Hmmm, muito boa informação. Eu gostaria de ter formulado a questão de uma forma que esta poderia ser uma resposta e não um comentário para que você possa obter algum representante fora dele :)
MDMarra
@MDMarra :-) Estou indo bem sem os pontos :-) Mas uma pergunta / resposta canônica sobre as melhores práticas para o poder da sala do servidor parece estar em ordem. (E não vamos esquecer aterramento questões em que um.)
Tonny
8

A principal razão pela qual esses itens são mal vistos é devido à redundância, falta deles. O uso desse cabo significa que todas as entradas de energia do servidor estão sendo alimentadas pelo mesmo circuito. Quando esse circuito morre (ou a PDU à qual está conectado, eu já tive isso), o mesmo ocorre com o servidor. A Colos recomenda vivamente os circuitos Primário e Secundário por esse motivo e deseja ver servidores multi-PSU conectados a dois circuitos.

No passado, eu tinha um grupo de máquinas que vinham com um único cabo Y de três vias e três cabos de energia normais para um grande sistema de 3 PSU (7U, se bem me lembro). O data center em que eu estava trabalhando na época (cerca de 1999) não tinha tomadas suficientes para esse tipo de coisa, então acabamos usando o cabo Y; 2 pernas do Y em um no-break e um cabo de alimentação reto para o terceiro PSU ao segundo no-break. Felizmente, os sistemas de 3 PSUs são muito menos comuns agora.

Balanceamento de carga da PSU, ou está alternando?

Existem diferenças em como as fontes de alimentação lidam com o carregamento. Como vários benchmarks da fonte de alimentação mostraram, a eficiência máxima é alcançada quando você obtém mais de 50% de carga . Há ganhos a serem obtidos para executar tudo em um PSU, é mais provável que seja eficiente. É por esse motivo que alguns fabricantes de servidores extraem toda a corrente de um servidor através de uma única PSU e alternam para a outra quando ocorre uma falha ou um capricho; um sistema de 230 watts obterá a melhor eficiência de seus PSUs duplos de 400 watts executando toda a carga em apenas um PSU.

Esses sistemas de chaveamento utilizam apenas uma fonte de alimentação e, portanto, um circuito se usar circuitos de energia totalmente separados por vez.

A desvantagem dos sistemas de comutação é que a carga pode se mover imprevisivelmente na comunidade de PSUs conectadas a um determinado circuito. Se um número suficiente deles jogar seu peso em um único circuito, pode sobrecarregá-lo. Esse é um projeto de energia ruim, pois você deseja projetar as coisas para que você possa perder um circuito completo e manter as coisas funcionando, mas ainda é algo que atrapalha os engenheiros de sistemas.

Os servidores de balanceamento de carga extraem quantidades iguais de corrente de ambas as PSUs. Isso fornece previsibilidade na carga do circuito, embora ainda possa causar disjuntores se os engenheiros de sistemas carregarem seus circuitos acima de 50% e um circuito morrer forçando as PSUs a extrair 100% de um circuito, que agora excede sua classificação. Mais uma vez, o design de energia ruim, mas é um erro comum.

Carregamentos de inicialização

Existem dois tipos de carregamento de inicialização:

  1. Tudo corre bem até que o BIOS (ou a Inicialização do SO ou o carregamento do aplicativo) recupere e tudo acalme.
  2. Inrush carregamento atual à direita como as coisas são ligadas.

O primeiro é algo com o qual todos estamos familiarizados. Essa matriz SAS de 120 discos pode consumir apenas 4000 Watts ao executar normalmente, mas se todas as prateleiras de discos reiniciarem ao mesmo tempo, poderá consumir 6500 Watts.

O mesmo vale para servidores. Os fãs correm a toda velocidade, sim. CPUs rodam a toda velocidade por um tempo, sim. A RAM é executada em tensão total durante a postagem, sim. É provável que consuma o máximo possível durante os primeiros estágios do POST, mas diminui rapidamente à medida que o BIOS transfere as coisas para o sistema operacional e os regimes de energia assumem o controle. Um servidor que normalmente consome 110 Watts durante o uso normal pode consumir temporariamente até 200 W nas primeiras fases.

É neste carregamento temporário que a maioria das pessoas pensa quando diz coisas como "ele executa as fontes de alimentação na inicialização". Essas fontes de alimentação de 400 Watts conectadas a um servidor que consome 230W em um dia agitado não consomem 400 Watts, elas consomem 230W ... combinadas.

O segundo não é bem conhecido, mas quando as pessoas o encontram, ficam preocupadas . Isso é corrente de irrupção e leva alguns milissegundos durante os quais o consumo pode ser bem maior do que normalmente é. A corrente de irrupção para dispositivos de TI com conversores CA para CC (quase todos) neles quase sempre acontece duas vezes:

  • Uma vez quando o cabo está conectado, quando o estágio de pré-energia obtém energia. É nesta fase que permite que o botão liga / desliga na frente ligue o dispositivo.
  • Uma segunda vez quando o estágio principal de distribuição é ligado e inicia o dispositivo.

Por causa dos tempos, isso só se torna um fator ao restaurar a energia para um circuito morto. Todos os dispositivos que ligam exatamente ao mesmo tempo podem fazer coisas estranhas à energia desse circuito, e isso pode causar danos por si só. Fazer uma inicialização faseada alivia isso.

Essa é a outra área em que as pessoas pensam quando dizem coisas como "fontes de alimentação executam com força total na inicialização", pois cada PSU possui sua própria corrente de energização. Mas como eu disse, isso dura alguns milissegundos e vem em duas etapas.

sysadmin1138
fonte
As PSUs de servidor são otimizadas para um ponto diferente na curva de carga que as de consumo? Para o último pico, a eficiência é normalmente de ~ 50% e cai em ambos os lados desse ponto. O teste Ex # 3 aqui é o ponto de 50%. jonnyguru.com/… Resultados semelhantes foram mostrados para as outras avaliações na parte superior da página principal; e na maioria, se não em todas as avaliações que eu vi sobre PSUs de qualidade.
Dan Neely
@ DanNeely Você está certo, eu estava lembrando das curvas erradas. Atualizará.
sysadmin1138
4

Nosso Colo local também não gostava deles. Tínhamos um gabinete compartilhado e só era permitido utilizar uma única porta PDU para nosso servidor PSU duplo. O colo não gostou por razões de redundância, mas para uma máquina não crítica, foi perfeitamente aceitável para nós. Não há grandes problemas de energia do ponto de vista elétrico.

É por isso que nosso colo não gostou:

  1. Se a PDU morre, o servidor está morto
  2. Se o cabo ficar frito, seu servidor está morto

Aqui está o porquê de eu gostar:

  1. Caixa não crítica à missão
  2. Forneceu energia para ambas as PSUs, dando-me redundância na caixa
  3. Eu não estava tão preocupado com o tempo de inatividade potencial com base na falha da PDU, nem com o cabo enlouquecendo. (veja nº 1).

O colo não teve nenhum problema com eles falando eletricamente. O empate era idêntico, a caixa usava apenas o necessário, independentemente do número de PSUs que consomem energia. No entanto, logo após comprar este cabo com minha caixa Dell, a Dell parou de oferecer publicamente os cabos à venda.

Brent Pabst
fonte
4
If the PSU dies the server is dead- Você quis dizer PDU lá?
precisa saber é o seguinte
Na IMO, o colo / datacenter não deve exigir o que é essencialmente uma questão operacional. Se eu optar por usar um cabo Y, essa é a minha escolha, independentemente da redundância ou falta dela.
precisa saber é o seguinte
@joeqwerty Concordo plenamente, se o data center for responsável pelo tempo de atividade da caixa, no entanto, eu aceitaria totalmente a necessidade deles de exigir o uso de 2 cabos retos. Esse não foi o meu caso e, em um cenário de gabinete compartilhado, o cabo Y era uma escolha muito melhor.
Brent Pabst
Eu acho que o "PSU" no ponto 3 também deve ser "PDU", resultando nos seguintes pontos: você considera o risco de falha do cabo ou da PDU muito menor do que o risco de falha do PSU que parece certo para mim. Eu já vi muito mais falhas de PSU do que falhas de cabo. Como não fiz muito trabalho baseado em rack, não posso comentar sobre as taxas de falha da PDU.
precisa
@joeqwerty Para mim, e pela minha experiência, parece que em algum momento no passado alguém tinha um cabo Y conectado a um servidor de PSU duplo (talvez até o técnico do datacenter o fez) e, em seguida, um circuito morreu e um ponto pontudo- O chefe de cabelos soltou ao controlador de domínio que o poder "redundante" pelo qual eles pagavam (no servidor e nos circuitos duplos no rack) não funcionava, eles violavam o SLA, etc. etc. apenas proíba os cabos do que se preocupar se as pessoas entenderam o resultado de como elas estão sendo usadas, especialmente se isso foi feito por seus próprios técnicos internos.
gregmac
3

Quando um servidor é inicializado, os dois PSU iniciam na potência máxima para fazer uma verificação do sistema. Isso consome o dobro da potência operacional normal. Agora que a energia é mais um problema, os circuitos que entram no seu gabinete são muito específicos. Eles não querem que você desarme um disjuntor, caso precise reiniciar o servidor.

Além disso, alguns edifícios de escritórios não permitem fazer isso por causa do código de incêndio. Você está dobrando a energia que poderia ser consumida em uma tomada.

NeerPatel
fonte
1
Você tem alguma documentação que mostre que ligar um servidor com duas PSUs de 750W causará um consumo de 1500W?
precisa saber é o seguinte
2
Seu efeito está certo (ou próximo disso), mas acho que sua causa está errada: os servidores consomem mais energia na inicialização porque têm "coisas de inicialização" a fazer: girando discos, ligando a verificação do ventilador, carregando capacitores etc. - Não conheço nenhum PSU que faça teste de alias. Fazer isso exigiria uma carga para testar com (grande resistor honkin) e hardware de comutação que eu nunca vi em uma fonte de alimentação. Se você já viu um animal assim, eu gostaria de ouvir sobre isso.
voretaq7
1
@ voretaq7 Mas, mesmo assim, essa carga adicional deve ficar bem abaixo da classificação de uma única PSU no sistema. Certamente, há um aumento no consumo, mas não é um aumento inseguro.
precisa saber é o seguinte
@MDMarra Isso depende de quantos discos você precisa girar e quão inteligente é o controlador - eu vi uma caixa que produzia um pico de 2-3 Amp (com potência de 208V - então ~ 450-500W mais o 150ish normal) porque suas instruções de rotação do disco eram "todos os 16 discos FREAKIN AGORA" . (Essa configuração não durou muito.) Geralmente, embora você esteja certo - não estamos falando de "tração total nas duas fontes de alimentação" (pelo menos eu nunca vi isso ser tão ruim)
voretaq7
@MDMarra Sei por experiência pessoal que a maioria dos servidores HP Proliant consumirá brevemente (3 a 8 segundos) a carga total nos dois PSUs na inicialização. Alguns modelos Dell Poweredge também fazem isso.
Tonny 07/01
3

Um colo que ofereça dois circuitos de energia redundantes em seu gabinete pode estar interessado em equilibrar os dois circuitos.

Pode ser por isso que eles não gostam de você conectar servidores com PSUs duplas a um único circuito, independentemente se isso for feito com um cabo Y ou com dois cabos conectados à mesma PDU.

Oliver
fonte
4
Talvez, mas se estiver pagando pelos circuitos, deve ser minha escolha como os escolho, com carga equilibrada ou não. Desde que eu não exceda a capacidade permitida de nenhum dos circuitos, o colo / datacenter não deve ter nada a dizer sobre como os uso.
joeqwerty
Se eles sentirem a necessidade de manter esses dois circuitos equilibrados, eu ficaria preocupado que eles não sejam tão redundantes quanto deveriam. Afinal, a qualquer momento, se um cair, o outro deve estar pronto para carregar a carga completa instantaneamente.
kasperd
2

Estando no negócio de hospedagem e hospedagem por um bom tempo, posso lhe dar as três melhores razões pelas quais uma empresa de hospedagem não permitiria isso.

Dinheiro, dinheiro e dinheiro

Pense em quanto custa um único circuito de 15 ou 20 Amp, as empresas de hospedagem preferem comprar um segundo para failover e cobrar muito dinheiro duas vezes por mês.

Alex
fonte
Bem, não tenho certeza se isso é verdade - você pode conectar dois cabos no mesmo circuito da mesma maneira que você pode conectar um cabo Y.
precisa
Claro que você pode, mas acabará ficando sem espaço para os plugues. Isso significa uma segunda PDU. Acredite, esse negócio tem a ver com duas coisas: 1) Espaço 2) Poder. O que quer que faça você consumir mais de um ou de outro, eles tentarão.
Alex #
Tudo bem, mas executar sua PDU sem plugues não requer a concessão de um segundo circuito, então não tenho certeza de como isso está relacionado à obtenção de lucros pelo colo / host.
HopelessN00b
Mas isso faz com que você use mais 1 U, se não 2. Para clientes que alugam um armário 1/4 ou até 1/2, isso pode ser suficiente para que eles sejam atualizados para 1/2 ou um gabinete completo.
7283 Alex
-2

Estou realmente surpreso que ninguém aqui não tenha percebido que você pode ter duas PDUs de 20 amperes funcionando com energia diferente e, em seguida, conecte um plugue de cabo em dois servidores diferentes e conecte à primeira PDU e, em seguida, conecte outro plugue de cabo à segunda fonte de alimentação dos dois servidores e execute-o na segunda PDU. Agora você tem redundância e menos bagunça no cabo de alimentação.

d3vmono
fonte