Ingeniero sitio profesional de operaciones de TI

Descripción de la oferta

Más de 10 años de experiencia
Estamos contratando a un administrador de Databricks y un ingeniero de confiabilidad del sitio que contribuirá a construir y respaldar una infraestructura confiable, de alta capacidad y alto rendimiento dentro de AWS y Databricks que respalde nuestra misión de reinventar el aprendizaje para millones de estudiantes en todo el mundo. Estamos buscando a alguien que ya tenga experiencia con Databricks como solución de transformación de datos que pueda ayudarnos a brindarle soporte, hacerlo confiable, hacerlo eficiente, reducir costos y mejorar la eficiencia. Usamos AWS para respaldar nuestros trabajos de Databricks, por lo que la experiencia con AWS también es imprescindible.

Acerca de usted:
• Eres un buen comunicador, tanto verbal como escrito
• Te encanta resolver problemas
• Te responsabilizas de la calidad de tus esfuerzos individuales
• Tienes experiencia comprobada en todos los aspectos de Databricks E2
• Tienes experiencia como profesional de SRE/Devops trabajando en arquitecturas AWS de n niveles
• Eres experto en crear, revisar, probar e implementar infraestructura definida por Terraform, incluidos los módulos de Terraform
• Tienes un buen conocimiento de Docker y estrategias de contenedorización para código de aplicación
• Tratas a las personas con respeto, tienes un buen sentido del humor y no eres abrasivo
• Estás leyendo y aprendiendo constantemente. Siempre eres un consumidor de conocimiento.
• Haces un seguimiento y no dejas tareas sin hacer.

Calificaciones
• Es imprescindible tener una amplia experiencia con Databricks E2 o
catálogo de Unity
o lago de eventos/lago de datos
o tablas delta/lagohouse
o espacios de trabajo, trabajos, clústeres de Databricks e2
o clústeres spark
• Es imprescindible tener experiencia con Terraform
• Sólida familiaridad con sistemas de telemetría como New Relic o Datadog, incluidas habilidades para consultar registros y datos métricos. Trabajaremos para que los entornos de Databricks sean "observables" y el candidato participará en ese esfuerzo.
• Sólidas habilidades para la resolución de problemas, triaje, análisis de causa raíz e ingeniería de sistemas
• Experiencia demostrada en la creación y gestión de infraestructura de producción de gran escala en la nube
• Comprensión de los fundamentos de Git
• Comprensión de los roles y permisos de AWS IAM
• Experiencia en scripts de Bash, Python o Scala

Es bueno tener
• Licenciatura en Ciencias de la Computación (o campo técnico relacionado y/o experiencia equivalente en la industria) preferida
• Experiencia práctica en Apache Spark

Sus contribuciones incluirían:
• Garantizar la repetibilidad, trazabilidad y transparencia de nuestra automatización de infraestructura (infraestructura como código, monitoreo como código)
• Participar en el aprendizaje continuo del ecosistema de AWS
• Apoyar las rotaciones de guardia para tareas operativas que no se han abordado con la automatización, con la vista puesta en corregir problemas que resulten en alarmas de guardia
• Mantener la telemetría que mejora la visibilidad del rendimiento de nuestras aplicaciones y las métricas comerciales y mantener la carga de trabajo operativa bajo control
• Desarrollar, comunicar, colaborar y monitorear procesos estándar para promover la salud y la sostenibilidad a largo plazo de las tareas de desarrollo operativo.
• Apoyar prácticas de desarrollo de software saludables, incluido el cumplimiento de la metodología de desarrollo de software ágil, la realización de revisiones de código, empaquetado de trabajo y entrega continua
• Observar y documentar los niveles de producción de estado estable, los patrones de crecimiento
• Monitorear constantemente los costos de la plataforma Databricks y asesorar sobre posibles caminos para reducir los costos.
• Coordinar mejoras del software y la infraestructura existentes para cumplir con los objetivos de resiliencia
• Mejorar nuestra base de conocimiento en torno a Databricks E2

Nuestra pila de nube incluye:
• Tecnología de nube de AWS: AWS (S3, EC2, ECS, EKS, SQS, Elasticache Redis, Elasticache Memcache, RDS, Aurora RDS, Open Search, Dynamodb, Athena, Route53, WAF, IAM, Cloudfront, equilibrio de carga, ACM, VPC, Lambda, API Gateway, puntos finales de VPC, tablas de enrutamiento, SES, SNS, Bedrock, Glue y más)
• Análisis de datos: Databricks E2
• Infraestructura como código: Terraform principalmente con algo de Cloudformation ocasional
• RDBMS: Mysql, PostgreSQL, Aurora, incluidas las tecnologías de agrupación de conexiones
• Almacenamiento en caché: Redis, Memcache, Dynamodb
• Programación: Python, Bash, Scala, Terraform
• Orquestación de contenedores: AWS ECS
• Telemetría: NewRelic, CloudWatch, Datadog
• Compilación/Ejecución: Github Actions, Artifactory, CircleCI, GitHub Enterprise
• Seguridad: Rapid7 InsightAppSec, Crowdstrike, Kentik, 1Password, DivvyCloud (Insight Cloudsec), Security Scorecard
• Gestión de tareas: JIRA
• Documentación: Confluence, Office365, Sharepoint

Requerimientos

• Educación mínima: Educación superior - Licenciatura
• 5 años de experiencia
• Edad: entre 30 y 45 años

Palabras clave: engineers, ingeniera, ing, engineer, experto, profesional, professional, expert, operations, operaciones

Hace 7 días (actualizada)