Emagine recherche pour l’un de ses clients grand compte un data engineer orienté GCP
Lieu : Paris
Démarrage: début avril
Télétravail : 3 jours par semaine
Contexte :
Au sein de la direction des données, le service data engineerie a pour missions de concevoir, de réaliser et d’exploiter la mise en œuvre opérationnelle des use cases Data de l'entreprise
Mission :
Participer à la mise en œuvre des use cases métier au sein de notre plateforme GCP (Google Cloud Platform) : En collaboration avec l’équipe interne data engineer et des data project leader (7 personnes) Création /Optimisation/ évolution des pipelines d’alimentation et de transformation des données pour les uses cases spécifiques à l’activité du client.
• Suivi d’avancement au travers de tickets Jira. Intégrer la scrum team data engineer
• Développement de pipeline de transformation de la donnée en vue des différents cas d’usages métier,
• De la création de datasets dans lesquels seront mises à disposition les données,
• Documenter chaque use case sous confluence : création de page ou mise à jour en lien avec les demandes jira • De réaliser les tests unitaires (techniques) des pipelines avant passage en validation fonctionnelle
• Versionner correctement le code source sous GT
• De collaborer avec les équipes IT (DSI) pour l’implémentation de nouvelles fonctionnalités ou service associés à l’usage de la donnée.
Compétences requises :
• Bonne connaissance des environnements Data : Principalement Cloud GCP(Google Cloud Platform) : BigQuery, Composer (Airflow), GCS, Cloud function etc…
• Coding : Python, SQL (Spark, Scala sont un plus)
• Environnement Devops : Git, Maven, Git, Jenkns, Intelij
3 à 5 d’expérience demandée en tant que data engineer avec un solide background de développeur serait apprécié
Anglais : lu, écrit requis.
Intéressé ? Contactez moi au 0677716508
