Data Engineer

Data Engineer

Full Time 49500 - 60500 € / año (est.) Híbrido
Sigma Software

De un vistazo

  • Tareas: Únete a un proyecto innovador en energía sostenible como Data Engineer.
  • Empresa: Sigma Software, líder en ingeniería de datos y tecnología avanzada.
  • Beneficios: Salario competitivo, oportunidades de aprendizaje continuo y trabajo remoto.
  • Otra información: Ambiente dinámico con oportunidades de crecimiento profesional.
  • Por qué este empleo: Contribuye a iniciativas científicas revolucionarias mientras trabajas con tecnologías modernas.
  • Cualificaciones: Experiencia en ingeniería de datos y habilidades en colaboración en equipo.

El salario previsto está entre 49500 - 60500 € por año.

Únete a un proyecto que está dando forma al futuro de la energía sostenible a través de la ingeniería de datos de vanguardia y la innovación científica. Buscamos un Ingeniero de Datos para ayudar a construir plataformas de datos escalables nativas de la nube para un cliente de tecnología avanzada que trabaja en una de las iniciativas de energía de fusión más ambiciosas del mundo.

Trabajarás con tecnologías modernas de datos distribuidos, incluyendo Databricks, Apache Spark, AWS y Azure, mientras resuelves complejos desafíos de ingeniería en un entorno intensivo en investigación. En Sigma Software valoramos la excelencia en la ingeniería, las asociaciones a largo plazo y el aprendizaje continuo. Esta es una oportunidad para contribuir a iniciativas científicas innovadoras mientras trabajas con tecnologías modernas y equipos globales altamente capacitados.

PROYECTO

El proyecto se centra en construir y evolucionar una plataforma de datos moderna basada en la nube que apoye la investigación científica, la analítica y los flujos de trabajo operativos en el dominio de la energía de fusión. El equipo desarrolla soluciones de procesamiento de datos distribuidos escalables mientras asegura altos estándares de calidad de datos, linaje, gobernanza, reproducibilidad y fiabilidad operativa.

Trabajarás en estrecha colaboración con científicos e ingenieros para apoyar la experimentación, la analítica y los flujos de trabajo de aprendizaje automático en un entorno de I+D altamente innovador.

Descripción del Trabajo

  • Diseñar, desarrollar y mantener plataformas y tuberías de datos escalables y fiables para casos de uso analíticos y operativos.
  • Construir flujos de trabajo de procesamiento de datos distribuidos utilizando Apache Spark, pySpark y Databricks.
  • Desarrollar y evolucionar soluciones de datos nativas de la nube aprovechando los servicios de Azure y AWS.
  • Modelar y optimizar estructuras de datos para analítica, informes y consumo posterior.
  • Integrar datos de múltiples fuentes heterogéneas asegurando la calidad, consistencia y trazabilidad de los datos.
  • Implementar controles de calidad de datos, validación de esquemas, seguimiento de linaje y procesos de monitoreo.
  • Optimizar el rendimiento, escalabilidad, fiabilidad y eficiencia de costos de las tuberías de datos y la infraestructura.
  • Colaborar estrechamente con científicos, analistas y equipos de ingeniería para traducir requisitos comerciales y de investigación en soluciones técnicas.
  • Contribuir a procesos de CI/CD, automatización de infraestructura y mejores prácticas de ingeniería.
  • Investigar e introducir nuevas tecnologías y enfoques dentro del ecosistema de ingeniería de datos.

Requisitos

  • Más de 3 años de experiencia comercial en Ingeniería de Datos.
  • Más de 2 años de experiencia práctica en producción con Databricks.
  • Fuerte experiencia con Delta Lake, incluyendo arquitectura medallón y optimización de tablas.
  • Dominio avanzado de Python, pySpark y SQL.
  • Conocimiento práctico profundo de los componentes de Databricks, incluyendo Unity Catalog, Lakeflow Jobs / Workflows y optimización de trabajos.
  • Experiencia práctica con servicios de AWS, incluyendo S3, IAM, KMS, y al menos uno de AWS Batch, ECR, EventBridge, Lambda o API Gateway.
  • Experiencia diseñando tuberías de datos impulsadas por eventos y asíncronas.
  • Fuerte conocimiento de Infraestructura como Código y prácticas de CI/CD.
  • Experiencia práctica con Terraform y Paquetes de Activos de Databricks.
  • Experiencia trabajando con flujos de trabajo de Git, revisiones de solicitudes de extracción y pruebas automatizadas.
  • Comprensión de enfoques de autenticación segura como OIDC y principios de servicio.
  • Experiencia práctica con MLflow, seguimiento de experimentos, registro de modelos y prácticas de reproducibilidad.
  • Fuerte comprensión de calidad de datos, linaje, contratos de esquema y conceptos de procedencia.
  • Experiencia con marcos de calidad de datos como Great Expectations, Soda, pyDeequ o Databricks DQX.
  • Experiencia monitoreando y optimizando la fiabilidad de la plataforma de datos y los costos en la nube.
  • Nivel de inglés intermedio alto o superior.

SE VALORARÁ:

  • Experiencia empaquetando cargas de trabajo usando Docker y ejecutando cargas de trabajo por lotes en AWS.
  • Familiaridad con ECR y soluciones de procesamiento de datos en contenedores.
  • Experiencia con bibliotecas de optimización de experimentos como scikit-optimize, BoTorch, Ax o scipy.
  • Comprensión de técnicas de ingeniería de características de ML y prevención de filtraciones.
  • Experiencia trabajando en entornos regulados o de alta seguridad.
  • Conocimiento de gobernanza de datos, cumplimiento y requisitos de residencia de datos.
  • Experiencia deshabilitando o restringiendo herramientas/funciones asistidas por IA en entornos seguros.

Data Engineer empresa: Sigma Software

Sigma Software se dedica a la ingeniería de datos en el ámbito de la energía de fusión, ofreciendo oportunidades para trabajar con tecnologías modernas como Databricks y Apache Spark. La empresa valora la excelencia en la ingeniería, las asociaciones a largo plazo y el aprendizaje continuo, lo que permite a los empleados contribuir a iniciativas científicas innovadoras en un entorno colaborativo.

Sigma Software

Datos de contacto:

Equipo de selección de Sigma Software

Consejo de los expertos de StudySmarter🤫

Creemos que así podrías conseguir Data Engineer

✨Conéctate a Comunidades de Ciencia de Datos

Participa en foros y comunidades online como Kaggle o GitHub, donde puedes compartir proyectos de ciencia de datos y mostrar tus habilidades. Esto no solo te ayuda a aprender más, sino que también te da visibilidad ante reclutadores que están buscando talento.

✨Asiste a Meetups y Conferencias

Las conferencias de ciencia de datos y los meetups locales son una excelente manera de conocer a personas en la industria. Intenta asistir a eventos como PyData o Data Science Meetups en tu ciudad; así podrás establecer conexiones importantes y enterarte de oportunidades laborales como la de Data Engineer en Sigma Software.

✨Demuestra tus Habilidades con Proyectos Personales

Crea un portafolio en línea donde puedas presentar proyectos realizados por ti. Asegúrate de incluir muestras de tu trabajo en Python, R, o cualquier otra herramienta que domines. Esto hará que te destaques cuando postules a Data Engineer en Sigma Software.

✨Conéctate con Profesionales en LinkedIn

Haz uso de LinkedIn para seguir a empresas de ciencia de datos y conectar con quienes trabajan en ellas. Este tipo de estrategia puede abrirte puertas, ya que muchos reclutadores revisan perfiles antes de decidir a quién invitar a entrevistas para roles como Data Engineer.

Creemos que necesitas estas habilidades para triunfar como Data Engineer

Ingeniería de Datos
Apache Spark
Databricks
AWS
Azure
Python
pySpark

Algunos consejos para tu solicitud 🫡

Destaca tus habilidades técnicas:En el mundo de la ciencia de datos, es fundamental que tu CV incluya herramientas y lenguajes de programación específicos. No te olvides de mencionar tus conocimientos en Python, R o SQL, y cualquier experiencia relevante con bibliotecas como Pandas o TensorFlow. ¡Esto le dará un gran empujón a tu perfil ante Sigma Software!

Proyectos y experiencias prácticas:Además de tu formación académica, es clave incluir proyectos anteriores donde hayas aplicado tus habilidades en ciencia de datos. Asegúrate de mencionar cualquier trabajo que hayas hecho, ya sea en la universidad o de manera independiente. Esto demuestra tu capacidad para resolver problemas reales y tu motivación para aprender en un entorno profesional.

Céntrate en resultados cuantificados:En tu carta de presentación y CV, incluye logros que puedas cuantificar. Por ejemplo, si has dirigido un proyecto que mejoró la eficiencia en un XX%, esto no solo impresiona, sino que demuestra tu capacidad para generar resultados concretos. Esto es especialmente atractivo para un puesto a tiempo completo en Sigma Software.

Personaliza tu carta de presentación:No te limites a copiar y pegar una carta estándar. Haz que tu carta sea única para Sigma Software. Comenta por qué te apasiona la ciencia de datos y cómo encajas en la misión de la empresa. Aunque el CV es importante, una carta que muestre tu motivación y visión puede hacer la diferencia.

Cómo prepararte para una entrevista de trabajo en Sigma Software

✨Prep para preguntas técnicas de datos

Sabemos que en el campo de la ciencia de datos es común que te hagan preguntas técnicas. Prepárate para discutir tus conocimientos en estadística, análisis de datos y programación en Python o R. Además, asegúrate de poder explicar tus proyectos anteriores y el proceso detrás de ellos, ¡es vital que muestres tu pensamiento crítico!

✨Demuestra tus habilidades con un portfolio impactante

Tener un portfolio que muestre tus proyectos de ciencia de datos es esencial. Asegúrate de incluir ejemplos de análisis complejos, visualización de datos e incluso modelos predictivos que hayas desarrollado. ¡Esto no solo muestra tu competencia técnica, sino que también puede dar pie a una conversación más profunda durante la entrevista!

✨Prepárate para discutir casos de uso de datos

En una entrevista para un puesto de ciencia de datos, a menudo te preguntarán sobre estudios de caso o situaciones del mundo real. Practica cómo explicar cómo aplicarías técnicas de análisis para resolver problemas específicos que podrían enfrentar en Sigma Software. Esto demuestra que entiendes la aplicabilidad de tus habilidades.

✨Muestra tu entusiasmo y curiosidad

Como candidato a un puesto a tiempo completo, es crucial que muestres tu pasión por la ciencia de datos y tu deseo de aprender. Comparte tus intereses en las últimas tendencias de la IA o el machine learning, y menciona proyectos futuros que te gustaría explorar. Esto puede hacer que te destaques entre otros candidatos.