Ingénieur Big Data – Caen

À propos de Digiwin

Avec une vision 360°, nos 120 experts accompagnent la transformation digitale de nos clients sur des enjeux Business, Collaborateurs et Citoyens. ​ 
Nos domaines d’excellence couvrent les sites Web à fort trafic, les Digital Workplace et les applications métiers & mobiles. ​ 
Nous intervenons sur toute la chaine de valeur : Conseil, Organisation projet, Design, Intégration, Développement, Conduite du changement, Maintenance et Hébergement (cloud privé/public). 

Vous avez envie de participer à construire le « devenir » de nos clients ? Nous recherchons des talents audacieux pour rejoindre notre équipe. 

Description de l'offre

Pour accompagner un de ses clients Caennais, Digiwin Rouen recherche un ingénieur Big Data.

Vos missions au quotidien :

Au sein de notre agence digitale, vous intégrerez des projets délivrés par notre centre de services ou interviendrez en mission pour nos clients Normands.

Vous prenez entièrement en charge la conduite de projets et particulièrement :

• Participation à la conception des traitement d’ingestion ou de valorisation de données en Pyspark à partir d’expression de besoin ou de règles de gestion métier
• Réalisation de scripts de traitement de données ou encapsulation de scripts en Pyspark
• Réalisation de pipeline Oozie pour l’ordonnancement des étapes du traitement
• Versioning et centralisation des codes sources sous Git
• Réalisation ou adaptation des chaines de livraison CI/CD
• Variabilisation des scripts produits pour être conforme aux exigences CI/CD Big Data
• Elaboration et réalisation des tests unitaires, avec la constitution si nécessaire de jeux de donnée

Les composants techniques principaux utilisés :

• Spark (Python)
• HDFS
• Hive
• Hbase
• Oozie
• Yarn
• Atlas
• Jenkins
• Kafka
• Kerberos

Profil recherché

Vous êtes à la recherche d’une nouvelle opportunité professionnelle sur le périmètre de Caen, n’attendez plus, postulez !

Informations supplémentaires :
Poste basé à Caen
Démarrage : septembre 2023
Durée : > 6 mois
Télétravail 2 à 3 jours par semaine

Intéressé·e ?