Conselhos para mudar uma sala de máquinas para um novo local?

15

Nossa empresa está se mudando para novos escritórios em alguns meses e sou responsável por cuidar da mudança dos servidores de desenvolvimento na empresa. a maioria dos equipamentos de desenvolvimento está em armários de 5, 42U + rack para equipamentos de comutação / roteamento. Como a maioria das pessoas faz esse tipo de coisa? Mova todo o gabinete ou extraia os componentes individuais e mova os racks para o vazio.

qualquer aconselhamento sobre preparação e desligamento antes da mudança seria bem-vinda

MikeJ
fonte
obrigado a todos que comentaram minha pergunta. Tentei aprovar todos os que adicionaram algo ao meu entendimento sobre o que estou enfrentando nas próximas semanas. Felizmente, isso vai sem problemas (pensamento positivo, eu sei).
MikeJ

Respostas:

24

Nós fizemos alguns movimentos com racks. Aqui está o que tirei da experiência:

Antes:

  • rotular tudo. Ambos os finais. E o slot do rack também está conectado.
  • diagrama tudo.
  • se você tiver dados importantes, agende um backup completo para concluir de 6 a 12 horas antes da mudança. No mínimo, valide o último backup completo que você possui.
  • planeje tirar tudo do rack durante a mudança. Retire, no mínimo, metade da massa, de cima para baixo - isso significa deixar o topo vazio. Em um rack com um no-break na base, significa que você está retirando provavelmente 2/3 dos servidores. Tudo o que for deixado em rack DEVE ter trilhos e estar seguro nos trilhos (movimento inferior a 0,5 mm e tolerante a qualquer orientação - inclusive de cabeça para baixo e de frente para baixo - era a nossa margem). Movemos prateleiras completas e prateleiras semi-cheias, e as prateleiras sempre precisam ser inclinadas / giradas, e é absolutamente assustador ver sua vida sendo pendurada em uma doca de carregamento de concreto.
  • Em nossa experiência, as portas dianteiras e traseiras são mais decorativas do que suportadas, e deixá-las acesas pode tornar o deslocamento das estantes muito estranho, porque todos os bons pontos de retenção de mãos não estão disponíveis. Planeje remover as portas durante a mudança real. Isso força os motores a levantar, puxar, empurrar e puxar o rack pelas partes mais fortes. Normalmente, os painéis laterais podem permanecer acesos, mas esteja preparado para removê-los se os motores acharem que tê-los fora ajudaria.
  • contratar alguém com um caminhão seguro para o transporte. NÃO faça você mesmo. Você pode pensar que está seguro, mas sua companhia de seguros provavelmente pensará o contrário. A segunda última coisa que você deseja é se envolver em uma onda de três acusações entre a companhia de seguros de seu empregador e sua companhia de seguros.
  • contrate alguém segurado para pegar, mover, largar fisicamente e (durante um acidente) largar seu equipamento para você. NÃO faça você mesmo. A última coisa que você quer fazer é se machucar ou se envolver em uma lesão no colega de trabalho.
  • certifique-se de que seus segurados se especializem em movimentos de alta tecnologia e possam fornecer cobertores, invólucros anti-estáticos e, se necessário, engradados.

Durante a mudança:

  • backups são bons, certo?
  • desconecte o fio você mesmo. Puxe TODOS os fios desconectáveis. Cada fio deve ser rotulado e entrar em uma caixa que seja bem rotulada.
  • deixe que os caras fortes e bem segurados façam as extrações do servidor no rack. Supervisione o embrulho pessoalmente.
  • fique fora do caminho dos caras fortes e bem segurados quando eles carregam e descarregam.
  • supervisionar o desembrulhamento e reinserção nos racks. Se houver QUALQUER pergunta sobre a condição de um servidor, mencione-a e observe que ela foi mencionada.
  • Se o trabalho estiver demorando um pouco, tenha café e / ou rosquinhas disponíveis para os caras. Se apropriado (e se eles fizeram um bom trabalho), a cerveja gelada para depois do trabalho também vai bem.

Aprimoramento físico:

  • dobre sua estimativa de tempo para colocar as coisas de volta nos trilhos.
  • tenha um plano de construção. Um bom plano de criação inclui uma lista de verificação de todos os serviços, servidores e um plano de teste.
  • validar, validar, validar.
  • verifique os servidores que possam ter sido danificados durante o transporte, conforme indicado acima.
  • não deixe a gerência barata quando se trata de alimentos, se você estiver trabalhando durante as refeições. Técnicos famintos cometem erros. Se a proposta for longa e complicada, agende um horário para sair da sala por 90 minutos para uma refeição real.

Depois de:

  • uma cerveja gelada para você também pode ser apropriada.
David Mackintosh
fonte
Isso é ótimo. Gostaria de ter tido um ano atrás!
22630 Kara Marfia
3
Além de todas as etiquetas, eu também gosto de tirar fotos.
John Gardeniers
19

Eu estou com Kevin em desbloquear e desconectar. Os racks com os quais trabalhei e que são construídos para serem enviados carregados geralmente têm órtese adicional e devem ser anexados a uma base fixa (como um palete) durante o transporte. Geralmente, os servidores também têm algum tipo de mecanismo de bloqueio. Se você não está movendo algo que não foi construído para ser movido carregado , não .

Eu acrescentaria isso à resposta de Kevin:

Parte da documentação é saber por que as várias conexões e cabos estão lá. Você pode fazer todas as anotações, tirar todas as fotos, etc, que desejar, mas no final do dia, se você não entender por que algo está lá, corre o risco de não saber o que testar para estabelecer , depois da mudança, que você "conseguiu tudo".

Esta é uma oportunidade de ouro para, ao documentar o "o que está conectado ao quê" da mudança, pergunte-se "por que isso está conectado a isso"?

Já tive muitos casos do "Vou corrigir isso aqui e mudar temporariamente uma atribuição de VLAN" que se transforma em uma configuração semi-permanente que ninguém documentou volta para me morder ao mover o equipamento anos depois.

Antes de qualquer equipamento entrar em um veículo pessoal, descubra como o seguro da empresa está lidando com sinistros em caso de danos durante o transporte.

Faça backup de tudo antes de começar a se mover. Suponha que todo o equipamento será destruído durante a mudança porque (se você estiver dirigindo em vias públicas, pelo menos) poderia ser. Não é necessário dizer que a mídia de backup não deve se mover com o equipamento de infraestrutura!

Evan Anderson
fonte
3
+100 por não mover a mídia de backup com a engrenagem.
Pausado até novo aviso.
1
Uma das minhas matras principais "Suponha que tudo que for temporário será permanente". Mais frequentemente do que não, é.
Chris Thorpe
11

Extraia os componentes individuais e mova os racks para o vazio. Isso também tem a vantagem de permitir que você reconecte as coisas em uma configuração ideal e obtenha sua fiação exatamente da maneira que deseja. Apenas certifique-se de documentar tudo antes, durante e depois. Tire fotos digitais para ajudar.

Kevin Kuphal
fonte
2
+1 para as imagens digitais.
kmarsh
5

Realocamos dois racks de servidores cerca de 60% cheios há cerca de três anos atrás.

Foi a coisa mais assustadora que testemunhei há muito tempo.

Tudo estava bem no final, mas os operadores tiveram que inclinar o rack para tirá-lo da porta em nosso antigo local. Eles eram muito grandes e muito fortes e, para minha sorte, o rack não caiu - mas posso dizer, eu estava estressado só de assistir.

Se você precisar mover os racks completamente, certifique-se de poder rolar os racks pelas portas, sem precisar incliná-los em todas as portas que encontrar durante a movimentação. se você precisar inclinar, esqueça e comece a descarregar servidores :-)

Pessoalmente, eu recomendaria esvaziar os racks primeiro, ou como Kevin sugeriu, obter novos racks em seu novo local. Talvez isso também permita flexibilidade para mover os sistemas em etapas, em vez de todos de uma vez. Claro que isso pode não funcionar, dado o seu ambiente específico.

Richard West
fonte
+1 Eu ia perguntar ao autor: "Você já viu alguém tentar mover um rack completo? É assustador!" Pode haver MUITO peso (sem mencionar peças quebráveis) em um rack totalmente carregado.
KPWINC 04/08/09
1
com os idiotas que se moviam as prateleiras vazias, estou feliz que mudou o hardware real de forma independente
MikeJ
5

Compre um criador de etiquetas incrível e rotule tudo como se estivesse ficando louco. Depois desmonte e mova peça por peça.

Isso é tudo.

Brandon
fonte
meu antecessor era doido - todos os servidores são rotulados com nome, ip é reservered. e até etherenet com código de cores cabeado, dependendo de qual linha o servidor está no gabinete.
MikeJ
4

Você também pode considerar uma mudança parcial. Por exemplo, você pode mover o equipamento de backup primeiro - se for um backup ao vivo, pode até redirecionar os usuários para os sistemas de backup enquanto os sistemas principais estão sendo movidos.

Você também pode iniciar a mudança com os sistemas de uma equipe ou com parte dos sistemas de várias equipes primeiro. Corrija os problemas que esses sistemas enfrentam enquanto a equipe ainda pode trabalhar com suas máquinas na sala antiga.

atk
fonte
3

antes de mover o equipamento, prepare o que puder antes do tempo. se você quiser um rack organizado, planeje onde cada servidor irá e corte os novos cabos de rede em comprimento e os rotule. instale quaisquer switches extras e pdu's também. Desta forma, ao se mover, você precisa apenas de cabos de alimentação e servidores.

ao mover, se você estiver movendo equipamentos de produção, controladores de domínio, servidores de email, servidores de terminal ou qualquer coisa em que os usuários geralmente exijam o tempo de atividade de 24x7x365, faça o desligamento por último e inicialize primeiro. Mova o equipamento mais tarde da noite e, se você tiver muito para se movimentar, pegue algumas mãos extras (os amigos trabalharão para pizza) e peça emprestado / alugue uma van. Se o seu chefe estiver paranóico com relação à segurança, entre em contato com o xerife local sobre uma escolta policial.

faça seu equipamento crítico de negócios primeiro e teste. equipamentos secundários, como servidores de backup ou dc de backup, podem esperar um pouco. trabalhar da noite para o dia dá tempo de apresentar e testar as coisas sem interferir no

estas são algumas das coisas que aprendi movendo 2 racks no valor de servidores em uma noite.

Keith
fonte
2

Mova-o vazio (ou instale novos e instale cabos no novo local primeiro). Os servidores são surpreendentemente pesados. Mesmo que você quisesse, duvido que possa mover 42U de eletrônicos densamente compactados de uma só vez.

markdrayton
fonte
mais eu pensei sobre isso, movê-lo vazio parece o caminho a percorrer, mas descarregar os servidores de nível superior do rack parece muito assustador.
MikeJ 5/08/09
Tirar grandes servidores da parte superior de um rack é um trabalho de duas ou talvez três pessoas. Quero dizer, posso manter um servidor de 4U acima da cabeça ... mas posso fazê-lo enquanto libero os trilhos e os realinhamos? NÃO! Mesmo a mão de obra terceirizada é mais barata que um servidor descartado.
9788 Laura Thomas
Idéia de produto: talha de motor reconfigurado para instalação do servidor ...
Chris K
2

Sou a favor das respostas já existentes sobre rotulagem e desempacotamento. A outra coisa que eu acrescentaria é que, se possível, não mova todas as 5 prateleiras de equipamentos em um dia. Dessa forma, você só precisa tentar filmar um rack de equipamento em um único dia.

Laura Thomas
fonte
por mais legal que seja, não estou conseguindo esse luxo. Eu tenho que estar em baixo, fora, enviado (cerca de 15 quarteirões da cidade) e entre uma sexta e segunda.
MikeJ 5/08/09
Uau. Espero que você tenha muita ajuda. Documente como um louco. Sua arquitetura de rede está mudando? Caso contrário, eu me certificaria de ter bons backups das minhas configurações de switch e de que cada servidor voltasse ao mesmo rack nas mesmas portas do switch. Esperamos que isso evite problemas estranhos "Colocamos isso em sua própria vlan em 2007, mas esquecemos de documentar" problemas.
5309 Laura Thomas
2

Eu fiz isso há alguns meses atrás. Aqui estão minhas dicas:

  1. Durma muito. Acabei trabalhando 32 das 36 horas, começando às 8h da sexta-feira e terminando às 22h do sábado.
  2. Tivemos a sorte de ter quase tudo configurado em um cluster de alta disponibilidade, para que pudéssemos mover metade do equipamento para o novo controlador de domínio à vontade durante o dia, alternar o DNS para o novo controlador de domínio e, em seguida, mover o restante do equipamento à medida que o DNS estiver propagando .
  3. Se você deseja alterar os IPs, aumente o TTL no seu domínio com antecedência, para que a propagação aconteça mais rapidamente.
  4. Faça uma lista de verificação muito detalhada das etapas dispostas em ordem cronológica. Você estará fisicamente e mentalmente exausto, ter uma lista de verificação deixa pouco espaço para erros.
  5. A parte mais importante: faça backups e planos de serviço em tudo. Não tivemos solavancos ou escorregões durante a mudança, mas perdemos 2 discos rígidos, um cartão de memória RAM e uma placa DRAC. Provavelmente a vibração foi movida, mas poderia ter sido simplesmente acionar tudo.

Eu não fiz nada além de preparar o trabalho nas duas semanas anteriores, e pagou grandes dividendos.

Justin Ellison
fonte
2

Eu já tive que lidar com o desligamento de um data center com mais de 200 sistemas, mas sem a parte de mudança. (Para instalar um comutador de transferência de carga e substituir todas as baterias na sala do no-break) Eu vou ter que lidar com a mudança entre edifícios no próximo ano, no entanto, mas são apenas 7 racks.

Então, além do que outros já disseram:

  • Claro, existem os backups e os testes. Se puder, obtenha hardware extra ou adapte novamente qualquer hardware de teste para poder pré-posicionar serviços críticos. (DNS, NTP, syslog, qualquer outra coisa que outros sistemas possam precisar voltar.) Você também pode considerar colocar as peças de reposição que você possui (cabos, unidades, fontes de alimentação etc.) para que também estejam prontas para serem enviadas.

  • Teste toda a energia antes de estar pronto para a mudança - e certifique-se de que não é apenas "sim, o calor está quente", pois seus no-breaks ficam em um ponto morto neutro e, em seguida, você precisa tentar rastrear um eletricista de emergência.

  • Se você tiver várias conexões de rede entre os racks (por exemplo, para um único 'rack de rede', considere ter todas as quedas de rede já preparadas para os racks ... perfure (e teste!) Os painéis de patch que você pode colocar no rack e no cabo, e evite lidar com a rede longa executada em cima de todo o resto.

  • Procure pontos únicos de falha e verifique se você tem um sobressalente ou pode ignorá-lo - tivemos o nosso servidor de terminal morto, o que significava que precisávamos pegar os poucos terminais wyse que tínhamos para construir dois carros de choque que pudéssemos arrastar do servidor ao servidor para verificar os que não estavam aparecendo limpos.

  • Verifique se você tem todos os números de suporte do seu fornecedor disponíveis. Se você tiver um contrato de suporte de alto nível, poderá ver se eles enviarão um engenheiro com peças de reposição para o caso de ocorrerem problemas. Alguns podem até exigir que seu pessoal esteja lá para supervisionar as coisas ou anularão seu contrato de suporte.

  • Recrute um gerente (alguém que tem interesse próprio com bastante influência na empresa, mas não é diretamente necessário para recuperar tudo) para ficar encarregado de impedir que outras pessoas da gerência incomodem sua equipe. Eles não parecem entender isso quando você está tentando lidar com coisas que deram errado, toda vez que perguntam quanto tempo vai demorar, eles estão quebrando sua concentração. O gerente também pode ser responsável por garantir que as pessoas tenham comida e sua fonte preferida de cafeína, além de poder retirá-las quando estiverem de pé e precisar que estejam fazendo mais mal do que bem (embora isso aconteça fora de um sistema de correio reconstruir com alguns de nós trabalhando 12-16hr dias por 16 dias seguidos)

  • Se seus administradores de sistemas tiverem longas viagens de ida e volta, peça à empresa que alugue alguns quartos de hotel próximos para eles, para que você não perca de 2 a 3 horas por dia em viagens. (novamente, a partir da reconstrução do sistema de correio).

  • Se você é realmente paranóico, eu pediria dois caminhões em movimento ou faria duas viagens e não transportaria os sistemas primários com seus backups. Ou, se o tempo é um problema, desmonte os racks mais críticos primeiro e envie-os na primeira viagem, enquanto outra pessoa termina de desmontar os racks menos críticos para uma segunda viagem.

  • Para as bonecas, a empresa de mudanças deve estar preparada (como já foi dito, use uma empresa de mudanças ), mas você também pode alugar as que transportam geladeiras de uma empresa de suprimentos, se elas estiverem sendo usadas apenas para o transporte segurado, e não preparado para mover um rack meio cheio.

  • Se você tem pessoas suficientes para trabalhar em turnos alternados para fazer as coisas, verifique se há alguma sobreposição para que as pessoas saibam o que realmente está acontecendo, e não apenas seguindo cegamente uma lista de verificação.

  • Se você tiver armários e não duas prateleiras, e as portas fecharem sem esmagar os cabos, eu provavelmente tentaria deixar o máximo de cabos possível, além do que tinha que ser puxado para clarear a parte superior do rack. (ok, a única vez que discordo do que já foi dito)

  • ... e depois planeje um tempo de recuperação. Graças aos longos dias de preparação para a gerência, que nos deram apenas duas semanas de aviso prévio (que eles sabiam há meses, apenas não se deram ao trabalho de contar aos administradores), nosso Xyplex saindo e passando horas na sala de máquinas gritando sobre os fãs dos dois gabinetes da EMC, fiquei doente e fiquei fora por uma semana. Provavelmente também valeria a pena adiar um administrador de sistema ou dois no domingo, para que eles estejam prontos para trabalhar na segunda-feira, lidando com os problemas que os usuários receberem.

Adição:

Então, depois de fazer outro movimento, algumas coisas a considerar:

  • Se você estiver se mudando durante um período frio do ano, insista para que a empresa de mudança traga um caminhão aquecido e não deixe coisas para fora em uma doca de carregamento a frio, onde você terá mudanças térmicas repentinas que podem quebrar a solda juntas. (movemos a maioria dos racks cheios e os envolvemos em plástico bolha e cobertores móveis para isolá-los)

  • verifique o tamanho do caminhão que a empresa de mudanças vai usar, para que não tragam algo muito grande que possa facilmente chegar à sua doca de carregamento.

  • coloque cones ou outros itens na noite anterior para garantir que ninguém decida estacionar onde afetaria a capacidade do semi-reboque que a empresa de mudança trouxe de poder chegar à doca de carregamento.

  • se um dos fornecedores de hardware insistir em trazer seu próprio caminhão em movimento e receber uma caixa de embalagem para mover o rack com antecedência, pergunte-lhes se a empresa de mudança está planejando trazer um caminhão que possa lidar com itens tão altos quanto sua caixa . (felizmente, estávamos apenas mudando dentro do nosso campus, então eles cederam ao deixar o rack mover sem grade)

  • se você tiver requisitos estranhos (como a rampa para o piso elevado se estende pela porta e algumas das prateleiras são altas demais para passar pela porta se a rampa estiver no lugar), certifique-se de atrair as pessoas reais que farão o empacotamento das prateleiras para vir e pesquisar a situação, não apenas o gerente. (tivemos sorte, pois eles estavam movendo uma sala de máquinas no chão mais de uma semana antes de nós ... então descobrimos que o modo como eles estavam planejando levantar as prateleiras do piso elevado não ia funcionar, dois de nós arrancamos uma seção do piso elevado antes do dia da mudança)

Joe H.
fonte
1
"e verifique se é apenas 'sim, o calor está quente'" - s / apenas apenas / não apenas /
Pausado até novo aviso.
1

Se você deseja mover o rack inteiro, considere algo como isto: http://powermate.info . Nós compramos um que pode lidar com até 1500 libras, e é um salva-vidas para aquelas portas curtas !.

Chad Huneycutt
fonte
Interessante, mas você quase conseguiu um -1 porque o site vinculado começou a reproduzir áudio quando eu cliquei nele.
David Mackintosh
lol, eu esqueci completamente sobre isso, mas você não pode downvote A-Team :) (Flashblock go!)
Chad Huneycutt
1
Uma mesa elevatória ou elevador de carga pode ser útil para baixar equipamentos removidos dos níveis superiores de um rack, se você conseguir um com alcance suficiente.
Pausado até novo aviso.
1

Imprima seus documentos de movimentação (e fotos digitais) e grave-os em um CD, pelo bem da paranóia. Coloque uma cópia extra em algum lugar seguro. Seu laptop pode falhar.

Além disso, faça uma lista de verificação principal do tamanho de um pôster para cada final da jogada e coloque-a na parede no local apropriado. Então, quando alguém pede status, tudo o que você precisa fazer é apontar.

Use código de cores e ícones sempre que possível em todos os seus documentos / etiquetas. Pense em Garanimals .

Não se esqueça de aplicar rótulos nas prateleiras onde você removeu algo.

Pausado até novo aviso.
fonte