Mission :
Objectifs de la mission et tâches
Nous souhaitons intégrer un Data Engineer experimenté qui nous aidera à reprendre l'existant (flux Talend), le challenger et le moderniser. Mais aussi répondre aux nouveaux besoins.
Pour remplir à bien sa mission, notre Data Engineer devra :
- Comprendre un modèle de donnée et s'en servir.
- Etre capable de comprendre l'existant (2 flux Talend), de le maintenir et de le challenger.
- Maîtriser les bases de données et les outils de transfo.
- Faire le lien entre le besoin fonctionnel et la réalisation technique
- être autonome et pro-actif
Notre stack technique (non exhaustive) est la suivante :
- Datawarehouse Redshift (AWS)
- Datalake : S3 (AWS)
- Transfo : Talend+++, Spark+++
- Intégration : Talend TAC, Airflow managé AWS
- Langage : SQL+++,Python +++, Java +
Livrables
Build:
Respect des engagements de sprint
Qualité des développements
Partage des savoirs faires
Run:
Satisfaction utilisateur
Respect du SLA
Amélioration continue de la qualité et de la disponibilité de données.
Une attention particulière sera apportée à :
- La maitrise du SQL et son application sous Redshift
- Le développement et la qualité du code
- Un niveau de Savoir Faire sur Talend et sur spark avec airflow
- Une autonomie et une force de proposition sur les sujets Data
Le client: est une SSII spécialisée dans le placement des ressources humaines.
Durée indicative: 1 années
Tarif journalier indicatif: 350-450 €
Type de mission: Freelance en régie/ 75% en télétravail
Démarrage: ASAP
Lieu: Lille
Projet numéro 30847 : "DATA ENGINEER"