Ingeniero de Big Data

Responsabilidades/Tareas:

• Hacer una contribución importante a la implementación de nuestra iniciativa de big data en tiempo real.
• Construir y automatizar canalizaciones de procesamiento de datos productizadas en la plataforma de big data de AWS.
• Ayudar a mejorar nuestro proceso de desarrollo y estándares a través de la tutoría y el liderazgo ejemplar.
• Investigar y desarrollar modelos de aprendizaje estadístico para el análisis de datos.
• Implementar nuevas metodologías estadísticas u otras metodologías matemáticas según sea necesario para modelos o análisis específicos.
• Ayudar a definir e implementar contratos de ingestión de datos.
• Crear un entorno de datos para respaldar a nuestros equipos de análisis de datos, informes y ciencia de datos.

Conocimientos, habilidades y capacidades:

• Comprensión profunda de la tecnología moderna de big data, incluyendo Hadoop y Spark.
• Habilidades de modelado de datos y aprendizaje automático.
• Conocimiento de patrones y prácticas arquitectónicas de transmisión y agregación de datos en tiempo real.
• Competencia en lenguajes de programación como Python, Scala y Java.
• Familiaridad con SQL y bases de datos SQL.

Educación/Experiencia:

• Título universitario en ciencias de la computación, ciencia de datos o campos relacionados.
• Familiaridad con el proceso de desarrollo ágil.
• Experiencia previa en el desarrollo de productos de datos requerida.
• Experiencia práctica con transmisión de datos en tiempo real, agregación y presentación altamente preferida.
• Experiencia previa en el desarrollo de canalizaciones de ETL en producción requerida.
• Al menos un año de experiencia con la nube de AWS u otra plataforma en la nube.