Data engineer Expert (H/F)
Dans le cadre de la migration d'une application métier vers Google Cloud Platform (GCP), nous recherchons un(e) Data Engineer expérimenté(e), capable de concevoir, adapter et déployer des pipelines de données robustes et scalables dans un environnement distribué. Le projet implique la transformation d'un système de traitement de données on-premise vers un environnement cloud moderne, en garantissant la continuité de service, la performance et la sécurité. Le/la Data Engineer interviendra sur les tâches suivantes : Migration & Refonte
- Évaluer l'existant : architecture data, flux ETL, référentiels, performances.
- Redéfinir et réimplémenter les pipelines dans un écosystème GCP.
- Participer à la migration des traitements Hadoop vers Spark sur cloud.
- Développer et automatiser les scripts nécessaires à l'intégration continue des données (CI/CD).
- Développer des traitements de données robustes et performants.
- Assurer la qualité et la traçabilité des données tout au long des étapes de migration.
- Intégrer les traitements dans des outils d'ordonnancement (Control-M).
- Déployer les flux via des outils d'intégration (Bamboo, Git).
- Assurer la génération de rapports et tableaux de bord via Power BI, Spotfire ou BO.
- Collaborer avec les équipes BI pour garantir la cohérence de la chaîne de reporting.
- Gérer le monitoring et le support des flux de données migrés.
- Participer à l'amélioration continue de l'architecture de traitement.
- Documenter les processus dans Confluence et suivre les tickets Jira.
- Java (REST API, Hadoop MapReduce)
- Apache Spark
- Scripting : Shell / Python / Bash
- Google Cloud Platform (BigQuery, Cloud Storage, Dataflow, Composer)
- Control-M
- Bamboo
- Power BI
- Business Objects
- TIBCO Spotfire
- MongoDB
- SQL (PostgreSQL, MySQL…)
- Teradata
- BigQuery
- Git
- Unix / Linux
- Jira, Confluence
- Méthodologie Agile (Scrum / Kanban)
Emplois Recommandés
Chargé de Marketing Digital H/F
Description de l'offre Description La Mut' recrute un Chargé de marketing digital H/F en stage afin de rejoindre son équipe située à Nice (06).En tant que stagiaire en marketing digital, vous a…
Sports Community Manager Germany (M/F/D)
Job Description Winamax offers an online platform that allows over 6 million members in France, Spain and Germany to indulge in their passion for poker and sports betting. As one of the most inn…
Agent de quai administration (H/F)
DOMINO RH Nice recherche pour le compte de notre client un Agent de quai administration (H/F), situé à SAINT ISIDORE au PAL Vous serez en charge de : - zonage, - Flashage, - Gestion des…
Employé commercial Frais libre service H/F
Votre mission principale : optimiser le parcours d'achat des clients Indispensable au fonctionnement de l'équipe, vous assurez la bonne tenue des rayons. Grâce à votre implication, les stocks sont…
Auditeur Sénior F/H
Weetalent recherche pour son client, un cabinet d'audit structuré à Nice, un Auditeur Sénior F/H. Missions : Vous encadrerez une équipe de collaborateurs et prendrez en charge des missions d'audi…
Alternance assistant ressources humaines et paie - Nice (F/H)
Description de l'offre L’ISCOD, spécialiste de la formation en Digital Learning, recherche pour son entreprise partenaire, Groupe international dans l'energie, la construction, un(e) assistant res…
Accueil barrière (H/F) - Port de plaisance / Nice
Présentation de l'entreprise\n Le Groupe Protector est l’entreprise Azuréenne leader dans le domaine de la sécurité. Nous intervenons au niveau départemental (alpes-maritimes), en mettant en œuvre…
Alternance Alternance Chargé.e de Recrutement - Nice (F/H)
Description de l'offre Description En plus d'une formation interne sur les outils et méthodes de l'entreprise, votre montée progressive en compétences vous permettra de vous impliquer sur diffé…
Secrétaire (H/F)
Pour répondre à notre forte croissance, nous recherchons une Secrétaire (H/F) pour notre siège basé à Nice. Au sein de notre service facturation, vous devrez assurer la gestion complète des dossier…
CUISINIER H/F
Nous recrutons cuisinier (H/F), ayant a minima un CAP, même avec peu d'experience Nous proposons CDI ou CDD au choix, cuisine produits frais, fait maison, carte courte. Dans bistrot chic, cui…