DevOps

Desentupimento na Vila Carrão evita vazamentos nos equipamentos de CI/CD

Como o desentupimento preventivo na Vila Carrão protege servidores de CI/CD contra vazamentos e garante pipelines estáveis para equipes de desenvolvimento.

Você já parou para pensar que um ralo entupido no banheiro do andar de cima pode derrubar todo o seu pipeline de deploy? Parece exagero, mas vazamentos hidráulicos estão entre as causas mais subestimadas de indisponibilidade em ambientes de integração e entrega contínua. Quando a água encontra o caminho até racks de servidores, switches ou storages, o prejuízo vai muito além do hardware molhado: builds falham, releases travam e a confiança da equipe no processo automatizado abala.

Na Vila Carrão, região com infraestrutura urbana consolidada e adensamento comercial crescente, o risco é real. Prédios antigos convivem com novas torres corporativas, e a rede de esgoto muitas vezes não acompanhou o ritmo de verticalização. Para times de desenvolvimento que mantêm servidores de CI/CD on-premise ou em escritórios híbridos, a prevenção hidráulica deixa de ser “assunto do facilities” e vira requisito de engenharia de confiabilidade.

A anatomia de um incidente hidráulico em ambiente de CI/CD

Um entupimento na coluna principal de esgoto gera refluxo. A água suja sobe pelos ralos de banheiros, copas e áreas de serviço, transbordando para o forro. Se houver passagem de cabos ou shafts técnicos próximos — o que é padrão em lajes corporativas —, a água escorre por gravidade até o rack de rede ou a sala de servidores. O resultado: curto-circuito em fontes redundantes, oxidação de backplanes, falha em discos NVMe e, em casos extremos, incêndio elétrico.

O tempo médio para recuperação (MTTR) de um incidente desse tipo costuma superar 12 horas, considerando secagem, troca de componentes, validação de integridade de dados e reindexação de artefatos no registry. Compare isso com uma janela de manutenção preventiva de 2 horas em horário não comercial. A equação de custo-benefício é óbvia, mas ainda assim muitas equipes tratam o tema como “problema do condomínio”.

Mapeamento de risco: onde a água pode chegar

O primeiro passo é obter a planta hidráulica do andar e do edifício. Identifique:

  1. Colunas de esgoto e águas pluviais que cruzam o forro da área técnica
  2. Ralos e pontos de água em banheiros, copas e áreas de manutenção adjacentes
  3. Shafts de passagem de cabos de rede e energia entre lajes
  4. Bandejas de contenção sob racks (muitas vezes inexistentes ou danificadas)
  5. Sensores de vazamento instalados — ou a ausência deles

Com esse mapa, classifique cada ponto como risco alto, médio ou baulo. Priorize a instalação de sensores de água com alarme sonoro e integração ao seu sistema de monitoramento (Zabbix, Datadog, Prometheus/Alertmanager). Um alerta no Slack ou PagerDuty aos 30 segundos de detecção muda completamente o desfecho.

Estratégias de prevenção integradas ao ciclo de DevOps

A manutenção hidráulica preventiva deve entrar no mesmo ritmo dos seus ciclos de release. Sugiro:

  • Sprint 0 de infraestrutura: a cada 6 sprints, inclua uma tarefa de “Inspeção hidráulica preventiva” no backlog de plataforma. O dono do item é o Tech Lead de Infra ou o SRE de plantão.
  • Janela de deploy: agende a limpeza de caixas de gordura e inspeção de colunas na mesma janela de manutenção mensal dos servidores. Aproveite o downtime planejado.
  • Definition of Done de infra: nenhum rack vai para produção sem bandeja de contenção testada, sensor de vazamento ativo e procedimento de emergência documentado no runbook.

Essa abordagem transforma a prevenção em prática de engenharia, não em favor administrativo. Para times que usam GitOps, o próprio repositório de manifests pode versionar os checklists de inspeção como código.

O papel da automação na detecção precoce

Sensores de vazamento baratos (ESP32 + sensor de água + MQTT) podem ser integrados ao seu stack de observabilidade em poucas horas. Exemplo de payload JSON para o Alertmanager:

{
  "labels": {
    "alertname": "WaterLeakDetected",
    "severity": "critical",
    "location": "rack-ci-cd-03",
    "team": "platform"
  },
  "annotations": {
    "summary": "Vazamento detectado no rack de CI/CD",
    "description": "Sensor de piso elevado acionado. Verificar imediatamente.",
    "runbook_url": "https://wiki.internal/runbooks/water-leak-rack"
  }
}

Com isso, o mesmo fluxo que avisa sobre CPU alta ou disco cheio passa a avisar sobre água no chão. A resposta deixa de ser reativa e vira procedimento padrão.

Procedimento de emergência: o runbook que salva o pipeline

Todo time de plataforma precisa de um runbook de “Incidente Hidráulico em Sala Técnica” com passos claros:

  1. Detecção: Alerta automático ou relato visual
  2. Isolamento elétrico: Desligar PDU do rack afetado (botão EPO ou breaker dedicado)
  3. Contenção física: Lonas plásticas, panos absorventes, baldes — kit de emergência ao lado do rack
  4. Acionamento: Facilities + Desentupidora 24h com SLA de 60 min + Gestor de TI
  5. Comunicação: Post no canal #incidents com template padronizado
  6. Preservação de evidências: Fotos, vídeos, horários para análise de causa raiz e seguro
  7. Recuperação: Secagem controlada (desumidificadores), inspeção visual de oxidação, testes de integridade (memtest, smartctl, validação de checksum de artefatos)
  8. Pós-incidente: RCA em 5 dias úteis, ações corretivas no backlog

Treine esse runbook em game days trimestrais. Quem já executou sob estresse simulado erra menos na hora real.

Integração com a gestão de facilities e fornecedores

Não basta chamar qualquer desentupidora na hora do pânico. Cadastre fornecedores homologados com:

  • Atendimento 24/7 com tempo de resposta contratual
  • Equipamento de hidrojateamento de alta pressão (não apenas mola)
  • Seguro de responsabilidade civil para danos a equipamentos
  • Laudo técnico pós-serviço com fotos e relatório de causa raiz
  • Conhecimento da topologia hidráulica do edifício (ou disposição para mapear na primeira visita)

Mantenha o contrato e contatos no mesmo repositório dos runbooks, versionados. Uma dica prática: peça ao síndico ou administradora a planta atualizada das colunas de esgoto e águas pluviais. Muitos condomínios não têm, mas podem contratar levantamento topográfico hidráulico — custo baixo perto do risco.

Casos reais e lições aprendidas

Em um cliente na região da Vila Carrão, um entupimento na coluna do banheiro PNE do andar superior alagou o forro e atingiu dois racks: um de banco de dados PostgreSQL (réplica síncrona) e outro de runners GitLab. O alerta de vazamento não existia. A equipe só percebeu quando o monitoramento de latência do banco disparou — a água já tinha oxidado o backplane do storage. Recuperação: 14 horas, perda de 40 min de WAL não replicado, rollback manual de 3 deploys.

Após o incidente, implementamos sensores em todos os racks, bandejas de contenção vedadas, e contratamos inspeção semestral com https://www.dezjatodesentupidora.com.br. Em 18 meses, zero incidentes hidráulicos. O investimento em prevenção foi 3% do custo do incidente único.

Outro caso: startup em coworking na mesma região. Vazamento de ar-condicionado (dreno entupido) molhou switch de core. Como não havia redundância de caminho de rede (single path para o provedor), todo o escritório ficou offline por 6h. Lição: redundância de rede e prevenção de vazamento andam juntas.

Checklist rápido para implementar esta semana

  • Listar todos os racks e salas técnicas do seu ambiente
  • Verificar se cada um tem sensor de vazamento ativo e monitorado
  • Confirmar existência de bandejas de contenção íntegras
  • Localizar kit de emergência (lonas, panos, fita veda-rosca, baldes)
  • Agendar reunião com facilities para revisar planta hidráulica
  • Incluir tarefa de inspeção preventiva no backlog de plataforma

Pequenas ações hoje evitam grandes paralisações amanhã.

Proteger a infraestrutura que roda seus pipelines de CI/CD contra vazamentos não é detalhe operacional — é engenharia de confiabilidade na prática. Mapeie riscos, automatize detecção, documente runbooks e homologue fornecedores antes de precisar deles. Seu tempo de build agradece, sua equipe agradece, e seu SLA de deploy agradece. Comece hoje pelo sensor de vazamento no rack mais crítico.

Checklist prático

0 de 9 concluídos

Perguntas frequentes

Por que um entupimento na Vila Carrão pode afetar meus equipamentos de CI/CD?

Vazamentos provenientes de encanamentos entupidos podem atingir salas de servidores ou racks de rede, causando curtos-circuitos e danos permanentes aos equipamentos que executam pipelines de integração e entrega contínua.

Qual a frequência ideal para manutenção preventiva de encanamentos em escritórios de tecnologia?

Recomenda-se inspeção semestral para redes de esgoto e pluviais, com limpeza preventiva anual. Ambientes com alto fluxo de pessoas ou cozinhas industriais podem exigir intervalos menores, como a cada trimestre.

Como identificar sinais precoces de risco de vazamento perto da infraestrutura de TI?

Fique atento a manchas de umidade em paredes e tetos, odores de esgoto, lentidão no escoamento de pias e ralos, e infiltrações próximas a shafts técnicos. Esses indícios antecedem falhas graves.

O que fazer ao detectar um vazamento ativo sobre equipamentos de CI/CD?

Desligue imediatamente a energia do rack afetado, isole a área com lonas plásticas, acione a equipe de facilities e chame uma desentupidora especializada. Documente o incidente para análise de causa raiz posterior.

A manutenção hidráulica preventiva impacta a disponibilidade dos pipelines de deploy?

Sim. Paradas não planejadas por danos físicos a servidores de build geram indisponibilidade muito maior que janelas de manutenção agendadas. A prevenção hidráulica é parte da estratégia de alta disponibilidade.