Développeur Talend 8 / Cloudera CDP / Spark 3 - Référent Technique Data @ Niort - Freelance

Contexte

Dans le cadre du renforcement de son équipe Socles Data / DataHub, un acteur majeur du secteur de l'assurance recherche un Expert Talend expérimenté pour contribuer à la sécurisation, au maintien en conditions opérationnelles, à l'évolution et à la modernisation de sa plateforme Data. Mission freelance à Niort, TJM annoncé : 440 € HT.

La mission s'articule autour de deux axes complémentaires :

• Axe prioritaire : assurer l'expertise technique Talend, accompagner les équipes de développement et fiabiliser les traitements Data dans un environnement Big Data.
• Axe complémentaire : contribuer aux développements, à la maintenance et aux évolutions techniques du Socle Générique, notamment en Java / Spring Boot.

L'enjeu principal consiste à garantir la robustesse des développements Talend, leur compatibilité avec l'écosystème Cloudera CDP / Spark 3 et l'homogénéité des pratiques de développement.

1. Expertise Talend — cœur de mission

Référent technique et accompagnement des équipes

• Assurer le rôle de référent technique sur Talend 8.
• Apporter une expertise avancée aux équipes utilisatrices et accompagner leurs développements Talend.
• Analyser, diagnostiquer et résoudre les anomalies rencontrées sur les traitements ETL.
• Accompagner les Tech Leads dans leurs choix techniques.
• Diffuser les bonnes pratiques, les standards de développement et les recommandations d'industrialisation.

Expertise Big Data et compatibilité des environnements

• Maîtriser les spécificités des traitements Talend Big Data et Spark.
• Participer aux travaux de compatibilité entre Talend, Cloudera CDP et Spark 3.
• Identifier et résoudre les problématiques techniques liées à l'exécution des traitements Data.
• Contribuer à la fiabilisation et à la modernisation des traitements dans l'écosystème Cloudera.

Maintenance et évolution des référentiels Talend

• Maintenir et faire évoluer les projets de référence CORE et HOWTO.
• Intervenir sur les variables de contexte, les joblets, les métadonnées et les patterns de développement.
• Analyser et manipuler la structure interne des projets Talend, notamment les fichiers .item et .properties.
• Comprendre les composants Talend, leurs attributs et leurs mécanismes de configuration.
• Participer à la maintenance et à l'évolution des composants custom Talend.
• Créer, documenter et suivre les Cases Talend auprès du support éditeur lorsque nécessaire.

2. Contribution au Socle Générique

• Participer aux développements en Java / Spring Boot.
• Analyser et corriger les anomalies applicatives et techniques.
• Contribuer aux évolutions et à la maintenance du socle.
• Participer à l'amélioration des pratiques d'industrialisation et des chaînes de build.

Stack technique

• ETL / Intégration Data : Talend 8, Talend Big Data, joblets, composants custom
• Big Data : Cloudera CDP, Spark 3, Hadoop
• Développement : Java, Spring Boot
• Build / Industrialisation : Maven, Git, CI/CD
• Base de données : SQL
• Référentiels Talend : CORE, HOWTO, .item, .properties, métadonnées, variables de contexte
• Support technique : diagnostic ETL, Cases Talend, accompagnement Tech Leads

Profil recherché

• Expertise confirmée sur Talend, idéalement Talend 8, dans un écosystème Cloudera.
• Expérience significative dans la conception, le développement, la maintenance et le diagnostic de traitements ETL.
• Très bonne compréhension de l'architecture et du fonctionnement interne des projets Talend.
• Bonne maîtrise du développement Java.
• Bonnes connaissances de Spark et des problématiques liées aux traitements Big Data.

Ce qui te ferait sortir du lot (côté sécurité)

Zeroday : sur un poste comme celui-ci, ce qui fait la différence côté sécurité —

• sortir les mots de passe des jobs Talend : variables de contexte alimentées par un gestionnaire de secrets, jamais de credentials en dur dans les composants ni dans les fichiers .properties versionnés ;
• appliquer le moindre privilège aux comptes de service qui exécutent les jobs sur Cloudera (Kerberos), plutôt qu'un compte technique unique à droits larges sur le cluster ;
• surveiller les dépendances des composants custom et du socle Java / Spring Boot : une bibliothèque ancienne dans une chaîne de build Maven est une porte d'entrée connue ;
• tracer qui exécute quoi : sur une plateforme Data d'assurance, les journaux d'exécution sont aussi des preuves d'audit.