Data engineer AWS Python Apache Iceberg

Added
8 days ago
Type
Full time
Salary
Upgrade to Premium to se...

Related skills

json docker aws etl sql
JobCopilot logo
Meet JobCopilot: Your Personal Al Job Hunter
Automatically Apply to Your Dream Jobs While You Sleep
Try it now →

📋 Description

  • Concevoir, développer et maintenir des pipelines ETL/ELT pour collecter, transformer et charger des
  • Utiliser Apache Kafka pour la gestion des flux de données en temps réel
  • Implémenter des solutions de stockage optimisé avec Apache Iceberg (tables ACID, time travel
  • Automatiser les processus de traitement de données à grande échelle
  • Travailler avec des formats de données JSON (parsing, validation, transformation)
  • Optimiser les performances des pipelines (vitesse, scalabilité, fiabilité) sur AWS (Glue, Lambda

🎯 Requirements

  • Bac+5 en informatique, data science, mathématiques appliquées ou école d’ingénieur
  • 6 ans minimum en Data Engineering, avec une expertise avérée sur AWS, Python, Apache Kafka, Apache
  • Maîtrise des formats de données (JSON, Parquet, Avro)
  • Expérience en modélisation de données et en SQL avancé
  • Connaissance des bonnes pratiques DevOps (Docker, Kubernetes, Terraform)
  • Capacité à travailler en équipe pluridisciplinaire
Get alerts for new remote data jobs
A weekly email with new matches. Unsubscribe anytime.
Share job

Meet JobCopilot: Your Personal AI Job Hunter

Automatically Apply to Data Jobs. Just set your preferences and Job Copilot will do the rest — finding, filtering, and applying while you focus on what matters.

Related Data Jobs

See more Data jobs →