Ingeniero de DevOps Kafka

Sobre el Desafío

Estamos construyendo el Common Data Backbone (CDB) — la plataforma de datos estratégica de nuestra empresa que posibilita el descubrimiento, gobernanza e integración en todo nuestro ecosistema global de datos geoespaciales. El CDB conecta múltiples servicios en la nube y aplicaciones finales a través de Apache Kafka, actuando como la solución principal de integración para la orquestación de eventos y servicios.

Para acelerar el desarrollo y la implementación del CDB, estamos buscando un(a) Ingeniero(a) DevOps Kafka experimentado para expandir y madurar nuestra infraestructura Kafka en AWS. Su enfoque principal será garantizar la seguridad, la gestión del ciclo de vida, el ajuste de rendimiento (tuning) y la confiabilidad de los clústeres para que Kafka opere bajo estándares corporativos de excelencia.

Principales Responsabilidades

• Arquitectura y Operación: Diseñar, implementar y mantener clústeres Kafka seguros y de alta disponibilidad en AWS (ya sea vía MSK o gestión propia).
• Capacidad y Rendimiento: Realizar planificación de capacidad (capacity planning), ajuste de rendimiento (tuning) y escalado proactivo de la plataforma.
• Automatización: Automatizar la infraestructura y las configuraciones utilizando Terraform y prácticas de GitOps.
• Observabilidad: Implementar la cultura de monitoreo con métricas, dashboards en Grafana y alarmas en CloudWatch.
• Resiliencia y Continuidad: Desarrollar runbooks para respuesta a incidentes, recuperación ante desastres (disaster recovery) y actualizaciones sin interrupción (rolling upgrades); realizar pruebas de resiliencia y garantizar estrategias de RPO/RTO.
• Seguridad y Cumplimiento: Garantizar el alineamiento con requisitos de seguridad y auditorías (ISO 27001).
• Colaboración: Apoyar a los equipos de desarrollo difundiendo las mejores prácticas de Kafka para microservicios en .NET y trabajos de streaming en Databricks.
• Mejora Continua: Enfocarse en la optimización de costos, confiabilidad y madurez operativa de la pila tecnológica.

Requisitos y Calificaciones

• Experiencia: Más de 4 años actuando en roles de DevOps/SRE, con al menos 2 años de experiencia práctica (hands-on) en la operación de Kafka a gran escala.
• Dominio de Kafka: Sólido conocimiento en la arquitectura interna de Kafka (particiones, replicación, ISR, controller quorum, KRaft).
• Ecosistema AWS: Fuerte experiencia con servicios AWS (VPC, EC2, MSK, IAM, Secrets Manager y redes).
• Seguridad en Redes/Datos: Experiencia práctica con TLS/mTLS, SASL/SCRAM, ACLs y diseño de clústeres seguros.
• Infraestructura como Código (IaC): Proficiencia en Terraform (preferible).
• CI/CD y Monitoreo: Familiaridad con pipelines de CI/CD para automatización de temas/clústeres y uso de Grafana, CloudWatch y agregadores de logs.
• Automatización: Habilidad con scripts (Bash, Python) para creación de herramientas y automatizaciones internas.
• Comunicación: Excelente capacidad de documentación técnica y comunicación interpersonal.
• Certificación: Certificación válida en Kafka.