Code Group
Engenheiro DataOps Sênior
Remoto
(Qualquer lugar)
Faixa de Remuneração
Não informada
Nível de Experiência
Sênior
Requisitos
Tarefas e Responsabilidades
Engenheiro(a) de Plataforma de Dados Sênior (DataOps) | Databricks + AWS
📍 Modelo: Remoto
📄 Contratação: PJ ou Cooperado
Sobre a oportunidade
Você vai ser o dono operacional da plataforma Databricks em AWS de uma empresa do setor financeiro, com autonomia para automatizar, monitorar e otimizar custos. O time de dados já trabalha com cultura SRE, e você chega para levar a plataforma para o próximo nível.
O que você vai fazer
- Administrar a conta e os workspaces Databricks: usuários, grupos, service principals, SCIM/SSO, cluster policies, SQL warehouses e serverless
- Operar o Unity Catalog no dia a dia (grants, external locations, storage credentials, onboarding de novos domínios)
- Gerir a infraestrutura AWS da plataforma via Terraform (VPC/PrivateLink, S3, IAM, KMS, Secrets Manager, CloudWatch)
- Construir e manter CI/CD de pipelines com Databricks Asset Bundles e Git, com promoção dev → hml → prod
- Orquestrar e monitorar workflows (Lakeflow Jobs, Airflow/MWAA) com SLI/SLO, alertas e runbooks
- Implantar observabilidade e dashboards de saúde e custo (system tables, Datadog, Grafana, Prometheus)
- Atuar com FinOps: tagging, budgets, right-sizing e redução de DBU e de custo AWS
- Automatizar testes e checagens de qualidade no deploy, junto com o time de Qualidade
- Garantir segurança e compliance: auditoria de acessos, segredos, rede privada, backups e DR
- Planejar upgrades de runtime, novas features da plataforma e capacity
O que buscamos
- 5+ anos em engenharia de dados, DevOps ou SRE, com 2+ anos administrando Databricks em produção
- AWS sólido: IAM, S3, VPC, KMS, EC2, CloudWatch
- Terraform (providers AWS e Databricks) e Git
- CI/CD aplicado a dados (Asset Bundles, CLI ou API do Databricks)
- Python e SQL
- Unity Catalog na prática: permissões, external locations e system tables
Vai ser um diferencial se você tiver
- Noções de Spark e Delta Lake para troubleshooting e tuning
- Glue, Lambda ou MWAA
- Datadog, Grafana ou Prometheus
- Experiência com monitoração, alertas e gestão de incidentes
- Kubernetes ou Ansible
- Certificações AWS (Solutions Architect, DevOps Engineer) ou Databricks Platform Administrator
- Vivência no setor financeiro ou em bureau de crédito, e conhecimento de LGPD
- Uso de IA generativa no dia a dia de trabalho
Só na Code Group você encontra as melhores oportunidades de TI com tecnologias inovadoras. O nosso foco principal - Recrutamento & Seleção e Hunting, e temos orgulho em ter clientes e parceiros com o mesmo objetivo: Pessoas engajadas. Buscamos profissionais inovadores que sejam movidos por desafios e focados em resultados. Se identificou?!
Compartilhar vaga:
Compartilhar vaga: