Ver oferta completa

DATA ENGINEER

Descripción de la oferta de empleo

En Logicalis Spain estamos buscando a varios perfiles de Data Engineer, con conocimientos de python, pyspark, AWS EMR Serverless y Apache Airflowpara el área de Data & Analytics y para el área de Data de uno de nuestros principales clientes del sector seguros. REQUISITOS FUNCIONALES:Como Data Engineer Senior, serás responsable de diseñar, construir y optimizar pipelines de datos escalables y eficientes que soporten grandes volúmenes de datos. Utilizarás tecnologías clave como Python, PySpark y AWS EMR Serverless para procesar y analizar datos masivos, y gestionarás la automatización de flujos de trabajo con Apache Airflow.Trabajarás en estrecha colaboración con otros equipos técnicos, como ingenieros de software y científicos de datos, para garantizar la entrega oportuna de datos limpios y accesibles para los modelos analíticos y de machine learning.RESPONSABILIDADES:Diseñar y desarrollar pipelines de procesamiento de datos utilizando Python y PySpark para grandes volúmenes de datos.Implementar y gestionar clústeres escalables utilizando AWS EMR Serverless para procesar y analizar datos de manera eficiente.Automatizar flujos de trabajo de datos complejos mediante Apache Airflow, garantizando la orquestación y ejecución confiable de tareas.Optimizar el rendimiento de los pipelines y asegurar la integridad, calidad y disponibilidad de los datos en tiempo real.Monitorear el rendimiento de las soluciones de datos y resolver cualquier incidente relacionado con los pipelines de datos o la infraestructura en AWS.Implementar buenas prácticas de almacenamiento y procesamiento de datos en la nube, enfocándose en la optimización de costos y rendimiento.Documentar procesos y flujos de trabajo de datos, asegurando que el equipo tenga un acceso claro y consistente a los recursos de datos.REQUISITOS TÉCNICOS: Más de 5 años de experiencia trabajando en ingeniería de datos, con un fuerte enfoque en la construcción y optimización de pipelines de datos.Sólida experiencia en programación con Python y uso avanzado de PySpark para el procesamiento de datos distribuidos.Experiencia en la configuración y gestión de entornos basados en AWS EMR Serverless para el procesamiento de grandes volúmenes de datos.Conocimiento profundo de Apache Airflow para la automatización y orquestación de flujos de trabajo de datos.Experiencia en el diseño y uso de AWS (S3, Lambda, Glue, etc.) para almacenamiento, procesamiento y análisis de datos en la nube.Experiencia en la optimización de consultas y procesamiento de datos, asegurando eficiencia y escalabilidad.Habilidades sólidas en la resolución de problemas y la optimización de procesos de ingesta y procesamiento de datos.Experiencia trabajando en entornos colaborativos y ágiles.BENEFICIOS> Incorporación inmediata a compañía líder del sector IT con un alto grado de expertise en el área de Data & Analytics dónde nos encontramos en pleno proceso de expansión.> Estabilidad laboral a través de contrato indefinido con amplias oportunidades de desarrollo profesional y crecimiento en la compañía.> Modalidad de trabajo remoto, con flexibilidad para ir puntualmente a la oficina (Madrid o Barcelona).> Paquete retributivo muy competitivo acorde a la valía del candidato.> Posibilidad de acogerse a planes de retribución flexible (tarjeta restaurante, tarjeta transporte y tarjeta guardería).> Seguro médico y GYMPASS.> Planes de formación adaptados a cada perfil (cursos técnicos, certificaciones oficiales, formación de idiomas...).> Portal de descuentos especiales para empleados.
Ver oferta completa

Detalles de la oferta

Empresa
  • Logicalis Spain
Localidad
  • En toda España
Dirección
  • Sin especificar - Sin especificar
Fecha de publicación
  • 25/12/2024
Fecha de expiración
  • 25/03/2025
Data Collection Project Tahoe - Dutch or French Speaker
TransPerfect DataForce

Our division focuses on gathering, enriching and processing data for machine learning in different ai domains... we offer high-quality data for human-machine interaction to some of the most prestigious technology companies in the world... position: data contributor project location: barcelona, spain......

Basketball Data Collector
IMG AREBA

Img arena is looking for sports fans in spain to collect live data from basketball games... this position is not remote, so your presence at the venue would be required to ensure accurate and timely data collection... benefits 45€ for each event covered freelancer agreement for 1 year with the possibility......

Data Governance Analyst
LLYC

Parte de tus funciones serán: desarrollo e implementación de políticas de datos seguridad y cumplimiento datos maestros y metadatos gestión de calidad de datos evaluación y mitigación de riesgos formación y capacitación reportes innovación y mejora continua requisitos del puestoqué valoramosbuscamos......

CALL 14-2024-1 Research Engineer for a Cloud 5G/6G Lab
Centre Tecnològic de Telecomunicacions de Catalunya

*cvs and any other information gathered during this process will be handled confidentiallywho are we?• the center tecnològic de telecomunicaciones de catalunya (cttc) is a non-profit public sector research institution dedicated to fundamental and applied research activities, focused mainly on technologies......

QA Engineer
Involve rh

Confidencial cuenta con una posición como qa engineer para garantizar la calidad del software mediante pruebas exhaustivas para identificar y corregir errores antes de su lanzamiento al mercado... automatizar pruebas utilizando herramientas como selenium o appium... habilidades: automatización de pruebas......

Data Collection Project Tahoe - Dutch or French Speaker
TransPerfect DataForce

Com/project/tahoe-nl?/fill?id313=df035 join our data collection project tahoe in barcelona, ​​spain! project overview: purpose: collect voice recordings to improve speech recognition technologies... there are no restrictions on your permanent residence or visa for this study... com/project/tahoe-nl?/fill?id313=df004......

Data Collection Project - Barcelona (Brazilian Portuguese)
TransPerfect DataForce

제목: 데이터 수집 프로젝트 타호 직위: 데이터 제공자 프로젝트 위치: 스페인 바르셀로나 (현장, 예약된 약속에 따라) 작업 기간: 최대 2시간 참여 모델: 일회성 작업, 작업 기반 신청 버튼: https://dataforcecommunity... 지금 가입하여 음성 인식 기술 발전에 기여하세요! 질문이 있으시면 *****@***** 으로 연락해 주세요... 과제 a: 지정된 인력과 대본을 읽고 짧은 대화를 나누는 오디오 녹음 세션(2시간) - 과제 b: 대본 읽기 오디오 녹음 세션(1시간)requisitos del puesto요구......

ADMINISTRATIVE DEPARTMENT
Rainsteal Oil & Gas, UK.

Requisitos del puestoroustabouts / roughnecks, welders / mechanics, rig operators / drillers, engineers (petroleum and mechanical) health and safety officer, superintendent smp, smp supervisor, document controller clerk, community superintendent, training / hrd superintendent; smp engineer, mine engineer......

Administrative and techinical department
RAINSTEAL OIL & GAS

Be ready to work in the uk... business analyst, payroll manager, marketing specialist, administration supervisor, human resourcesofficer, financial analyst, senior marketing analyst, logistics coordinator / expert, procurement officer,secretary / office assistants / office clerks / front desk clerks......

Administrative and technical department
RAINSTEAL OIL & GAS

Be ready to work in the uk... business analyst, payroll manager, marketing specialist, administration supervisor, human resourcesofficer, financial analyst, senior marketing analyst, logistics coordinator / expert, procurement officer,secretary / office assistants / office clerks / front desk clerks......