Senior Data Engineer

Senior Data Engineer

Full Time 49500 - 60500 € / año (est.) Remoto
Jobgether

De un vistazo

  • Tareas: Diseña y construye plataformas de datos escalables y eficientes.
  • Empresa: Compañía innovadora que ofrece trabajo remoto y un entorno colaborativo.
  • Beneficios: Salario competitivo, trabajo remoto y oportunidades de desarrollo profesional.
  • Otra información: Oportunidades de innovación y colaboración internacional en un equipo dinámico.
  • Por qué este empleo: Impacta directamente en la infraestructura de datos y mejora la calidad de los productos.
  • Cualificaciones: Experiencia en ingeniería de datos y habilidades en Python y PostgreSQL.

El salario previsto está entre 49500 - 60500 € por año.

Esta posición está listada en nombre de una empresa asociada, que gestiona todas las aplicaciones y los siguientes pasos. Nuestra pareja está buscando un Ingeniero de Datos Senior basado en España. Como Ingeniero de Datos Senior, serás responsable de la plataforma de datos, dando forma a su arquitectura y asegurando un rendimiento fiable desde el desarrollo hasta la producción. Construirás tuberías escalables que transforman grandes volúmenes de datos de APIs, webhooks, archivos y scraping web en información confiable lista para productos. Una prioridad clave será evolucionar los flujos de trabajo secuenciales existentes hacia una plataforma moderna que soporte procesamiento concurrente, ingestión impulsada por eventos y ejecución por lotes orquestada.

Responsabilidades:

  • Propiedad de la Arquitectura de la Plataforma de Datos: Diseñar, construir y operar una plataforma de datos de grado de producción desde la arquitectura inicial hasta el despliegue, optimización y mantenimiento continuo.
  • Construcción de Tuberías de Ingesta Multi-Fuente: Desarrollar sistemas de ingestión concurrentes para APIs de proveedores, webhooks, archivos y scraping web, incorporando limitación de tasa, manejo de errores y procesamiento fiable a gran escala.
  • Desarrollo de Flujos de Trabajo por Lotes y Basados en Eventos: Implementar tuberías programadas, retrocesos históricos y gestión de dependencias utilizando herramientas de orquestación como Airflow, Dagster o Prefect.
  • Asegurar Recuperación Fiable de Fallos: Implementar reintentos, colas de mensajes muertos, mecanismos de repetición controlada y upserts idempotentes para recuperarse de fallos sin generar registros duplicados o corromper datos.
  • Establecer Arquitectura de Datos Crudos a Curados: Preservar cargas originales de fuentes, incluyendo JSON de proveedores, en Google Cloud Storage (GCS), luego transformar y estandarizar datos usando dbt.
  • Fortalecer Calidad y Gobernanza de Datos: Definir contratos de datos, reglas de validación automatizadas, pruebas de tuberías, políticas de retención y sistemas de monitoreo.
  • Optimizar Rendimiento de Bases de Datos: Diseñar y mantener esquemas de PostgreSQL, consultas y estrategias de carga incremental.
  • Integrar Enriquecimiento y Extracción AI: Incorporar proveedores de enriquecimiento de terceros y extracción estructurada basada en modelos de lenguaje grande (LLM).
  • Asegurar Trazabilidad de Datos: Mantener una clara línea entre los datos fuente y los registros curados.
  • Impulsar Mejora Continua: Identificar oportunidades para mejorar el rendimiento, fiabilidad, mantenibilidad y eficiencia de la infraestructura.

Requisitos:

  • Experiencia en Ingeniería de Datos de Extremo a Extremo: Experiencia comprobada construyendo plataformas de datos de producción desde cero.
  • Orquestación de Flujos de Trabajo: Experiencia práctica con Airflow, Dagster, Prefect o Temporal.
  • Google Cloud y dbt: Experiencia práctica con Google Cloud Platform (GCP) y dbt.
  • Arquitectura Basada en Eventos: Experiencia desarrollando sistemas asíncronos y basados en eventos.
  • Programación en Python: Fuertes habilidades en Python, especialmente en solicitudes HTTP asíncronas.
  • SQL y PostgreSQL: Conocimiento avanzado de SQL y experiencia práctica con PostgreSQL.
  • Calidad y Modelado de Datos: Experiencia diseñando contratos de datos y capas de almacenamiento.
  • Experiencia en Web Scraping: Experiencia práctica construyendo y manteniendo tuberías de scraping de producción.
  • Propiedad Independiente: Capacidad para tomar decisiones técnicas sólidas y gestionar proyectos complejos.
  • Experiencia en Startups o Equipos Pequeños: Experiencia trabajando en un entorno de startup o equipo de ingeniería ágil.
  • Resolución de Entidades: Familiaridad con la coincidencia de registros de empresas e individuos.
  • Procesamiento de Datos Basado en LLM: Experiencia utilizando modelos de lenguaje grandes para extracción de datos estructurados.
  • Tecnologías de Datos Adicionales: Familiaridad con BigQuery y Dataform es un plus.
  • Habilidades de Comunicación: Capacidad para comunicar conceptos técnicos claramente.

Beneficios:

  • Trabajo totalmente remoto: Trabaja de forma remota desde ubicaciones elegibles en Europa y América Latina.
  • Propiedad técnica: Lidera la arquitectura y evolución de una plataforma de datos.
  • Pila tecnológica moderna: Trabaja con Python, PostgreSQL, GCP, dbt, sistemas basados en eventos.
  • Impacto de extremo a extremo: Construye infraestructura fundamental que apoya directamente la funcionalidad del producto.
  • Autonomía en ingeniería: Toma posesión de desafíos técnicos y da forma a soluciones escalables.
  • Oportunidades de innovación: Explora procesamiento de datos avanzado y técnicas de extracción basadas en LLM.
  • Colaboración internacional: Trabaja con un equipo distribuido en múltiples regiones.
  • Flexibilidad en compensación: Las expectativas salariales se discuten en USD mensualmente.

Senior Data Engineer empresa: Jobgether

Como empleador, ofrecemos un entorno de trabajo remoto que fomenta la colaboración y el crecimiento profesional en el ámbito de la ciberseguridad. Nuestros empleados disfrutan de un equilibrio entre la vida laboral y personal, así como oportunidades continuas de desarrollo y formación en un sector en constante evolución. Además, nuestra cultura de innovación y apoyo permite a cada miembro del equipo contribuir significativamente a la defensa cibernética, haciendo de nuestra empresa un lugar atractivo para aquellos que buscan un impacto real en su carrera.

Jobgether

Datos de contacto:

Equipo de selección de Jobgether

Consejo de los expertos de StudySmarter🤫

Creemos que así podrías conseguir Senior Data Engineer

✨Conéctate a Comunidades de Ciencia de Datos

Participa en foros y comunidades online como Kaggle o GitHub, donde puedes compartir proyectos de ciencia de datos y mostrar tus habilidades. Esto no solo te ayuda a aprender más, sino que también te da visibilidad ante reclutadores que están buscando talento.

✨Asiste a Meetups y Conferencias

Las conferencias de ciencia de datos y los meetups locales son una excelente manera de conocer a personas en la industria. Intenta asistir a eventos como PyData o Data Science Meetups en tu ciudad; así podrás establecer conexiones importantes y enterarte de oportunidades laborales como la de Senior Data Engineer en Jobgether.

✨Demuestra tus Habilidades con Proyectos Personales

Crea un portafolio en línea donde puedas presentar proyectos realizados por ti. Asegúrate de incluir muestras de tu trabajo en Python, R, o cualquier otra herramienta que domines. Esto hará que te destaques cuando postules a Senior Data Engineer en Jobgether.

✨Conéctate con Profesionales en LinkedIn

Haz uso de LinkedIn para seguir a empresas de ciencia de datos y conectar con quienes trabajan en ellas. Este tipo de estrategia puede abrirte puertas, ya que muchos reclutadores revisan perfiles antes de decidir a quién invitar a entrevistas para roles como Senior Data Engineer.

Creemos que necesitas estas habilidades para triunfar como Senior Data Engineer

Python
Data Engineering
SQL
Problem-Solving Skills
Communication Skills
Data Pipeline Development
API Integration

Algunos consejos para tu solicitud 🫡

Destaca tus habilidades técnicas:En el mundo de la ciencia de datos, es fundamental que tu CV incluya herramientas y lenguajes de programación específicos. No te olvides de mencionar tus conocimientos en Python, R o SQL, y cualquier experiencia relevante con bibliotecas como Pandas o TensorFlow. ¡Esto le dará un gran empujón a tu perfil ante Jobgether!

Proyectos y experiencias prácticas:Además de tu formación académica, es clave incluir proyectos anteriores donde hayas aplicado tus habilidades en ciencia de datos. Asegúrate de mencionar cualquier trabajo que hayas hecho, ya sea en la universidad o de manera independiente. Esto demuestra tu capacidad para resolver problemas reales y tu motivación para aprender en un entorno profesional.

Céntrate en resultados cuantificados:En tu carta de presentación y CV, incluye logros que puedas cuantificar. Por ejemplo, si has dirigido un proyecto que mejoró la eficiencia en un XX%, esto no solo impresiona, sino que demuestra tu capacidad para generar resultados concretos. Esto es especialmente atractivo para un puesto a tiempo completo en Jobgether.

Personaliza tu carta de presentación:No te limites a copiar y pegar una carta estándar. Haz que tu carta sea única para Jobgether. Comenta por qué te apasiona la ciencia de datos y cómo encajas en la misión de la empresa. Aunque el CV es importante, una carta que muestre tu motivación y visión puede hacer la diferencia.

Cómo prepararte para una entrevista de trabajo en Jobgether

✨Prep para preguntas técnicas de datos

Sabemos que en el campo de la ciencia de datos es común que te hagan preguntas técnicas. Prepárate para discutir tus conocimientos en estadística, análisis de datos y programación en Python o R. Además, asegúrate de poder explicar tus proyectos anteriores y el proceso detrás de ellos, ¡es vital que muestres tu pensamiento crítico!

✨Demuestra tus habilidades con un portfolio impactante

Tener un portfolio que muestre tus proyectos de ciencia de datos es esencial. Asegúrate de incluir ejemplos de análisis complejos, visualización de datos e incluso modelos predictivos que hayas desarrollado. ¡Esto no solo muestra tu competencia técnica, sino que también puede dar pie a una conversación más profunda durante la entrevista!

✨Prepárate para discutir casos de uso de datos

En una entrevista para un puesto de ciencia de datos, a menudo te preguntarán sobre estudios de caso o situaciones del mundo real. Practica cómo explicar cómo aplicarías técnicas de análisis para resolver problemas específicos que podrían enfrentar en Jobgether. Esto demuestra que entiendes la aplicabilidad de tus habilidades.

✨Muestra tu entusiasmo y curiosidad

Como candidato a un puesto a tiempo completo, es crucial que muestres tu pasión por la ciencia de datos y tu deseo de aprender. Comparte tus intereses en las últimas tendencias de la IA o el machine learning, y menciona proyectos futuros que te gustaría explorar. Esto puede hacer que te destaques entre otros candidatos.