Data engineer AWS Python Apache Iceberg

À propos de ce poste

Missions principales 1. Conception et développement de pipelines de données Concevoir, développer et maintenir des pipelines ETL/ELT pour collecter, transformer et charger des données massives (batch et streaming). Utiliser Apache Kafka pour la gestion des flux de données en temps réel. Implémenter des solutions de stockage optimisé avec Apache Iceberg (tables ACID, time travel, partitionnement). Automatiser les processus de traitement de données à grande échelle. 2. Intégration et optimisation des données Travailler avec des formats de données JSON (parsing, validation, transformation). Optimiser les performances des pipelines (vitesse, scalabilité, fiabilité) sur AWS (Glue, Lambda, EMR, Kinesis).…

Ceci est un résumé.

Vous voulez savoir si vous correspondez ? Comparez votre CV à cette offre — gratuit, en 30 secondes.

Salaires Ingénieur — France

Basé sur 3 044 offres indiquant la rémunération.

Estimé à partir des rémunérations affichées sur nos sources — montants bruts annuels indicatifs, pas une offre.

Compétences les plus demandées en France

D'après 265 offres en France précisant leurs exigences, voici les compétences les plus demandées par les employeurs.

• Project Management40% des offres
• AutoCAD20% des offres
• Lean18% des offres
• CATIA14% des offres
• Revit9% des offres
• MATLAB8% des offres
• SAP7% des offres
• Quality Assurance6% des offres

Offres similaires

• Technical Project Manager - Engineering Delivery · Diabolocom
• Ingénieur Réseaux Sécurité support L2/L3 Palo Alto · Nomios
• Mechatronic Engineer - Automation Test Equipment · Signal Processing Engineer (RF Processing & Analytics)
• Embedded Software Engineer - GCS · Signal Processing Engineer (RF Processing & Analytics)
• Ingénieur(e) développement logiciel - Backend - Sécurité - Login (f/m/d) · Decathlontechnology
• Applied AI Engineer · Jobgether