Eitacies Inc
Ingeniero Senior de Plataforma de Datos
Tiempo completo • AZ EITACIES Inc
Replies within 24 hours
Beneficios:
- 401(k)
Ingeniero Senior de Plataforma de Datos
En el lugar en Phoenix, AZ
Descripción del puesto
Estamos contratando a un Ingeniero Senior de Plataforma de Datos para un puesto presencial en Phoenix, AZ.
Este puesto requiere una sólida experiencia práctica en la construcción y operación de canales de datos en Google Cloud Platform.
Responsabilidades clave:
- Diseñar y mantener los DAGs de flujo de aire para flujos de trabajo de datos de producción
- Desarrollar y optimizar trabajos de Spark / PySpark en Dataproc
- Construir y optimizar transformaciones SQL complejas
- Desarrollar APIs REST usando FastAPI Python para soportar servicios de datos
- Implementar marcos robustos de calidad de datos y validación
- Monitorizar el rendimiento de la pipeline, las tentativas y el cumplimiento de SLA
Habilidades requeridas:
- 6+ años de experiencia en ingeniería de datos
- Fuertes habilidades de programación en Python
- Experiencia de producción con Apache Spark PySpark
- Experiencia con el desarrollo de DAG de Airflow
- Experiencia práctica con GCP (se prefiere Dataproc, BigQuery, almacenamiento en la nube)
- Experiencia construyendo APIs usando FastAPI
- Sólidos conocimientos de SQL y modelado de datos
- Experiencia implementando comprobaciones de calidad de datos (validación de esquemas, comprobaciones de recuento de filas, detección de anomalías)
(si ya tienes un currículum en Indeed)