Data engineer orienté back end (Python) PostgreSQL - AWS - Airflow (IT) / Freelance
Dans le cadre d'une migration de GCP à AWS, nous recherchons un ingénieur cloud senior pour accompagner ntore client. Voici les missions :
Concevoir, construire et maintenir des pipelines de données de niveau production qui alimentent les indicateurs et modèles.
Industrialiser les prototypes de recherche de l'équipe en systèmes de production fiables et évolutifs.
Construire et maintenir des services backend exposant des indicateurs et des produits de données.
Assumer la responsabilité du cycle de vie des systèmes que vous construisez, y compris l'infrastructure, le déploiement et la surveillance, en collaboration avec les Ingénieurs Ops.
Exploiter et maintenir les pipelines et les services en production, y compris le débogage, la résolution d'incidents et les améliorations de performances.
Participer à la migration de GCP vers AWS et contribuer au démantèlement progressif des anciens pipelines et de l'infrastructure.
Garantir la qualité, la fiabilité et la reproductibilité des données à travers les pipelines et les services.
Travailler en étroite collaboration avec les économistes, les scientifiques et les Ingénieurs Ops pour assurer la livraison fluide de nouveaux indicateurs et modèles en production.
Améliorer l'expérience développeur, la documentation et les outils internes pour rendre les systèmes plus faciles à exploiter et à maintenir.
Profil candidat:
Compétences requises :
Programmation : Python, bash, APIs HTTP sans état (stateless), conception d'architecture, construction et exploitation de processus et services.Bases de données : PostgreSQL, modélisation de données (Snowflake est un plus).
Orchestration : Airflow.
Cloud : AWS (GCP est un plus) : ECS, RDS, S3, API Gateway, IAM, calcul (SageMaker IA, MWAA, JupyterLab, etc.).
Infrastructure as Code (IaC) : Terraform.CI/CD : CircleCI ou similaire.
Monitoring : Datadog ou outil similaire
You are fluent in english ??