Ingénieur Infrastructure Data - Bigdata Hadoop Mysql Kafka H/F - collectivite

Information importanteType de contrat: FreelanceTaux journalier : Salaire selon profilLocalisation : Nancy, FranceDate de démarrage :2 à 4 semainesMode de travail : HybridePublié le : 7 juillet 2026Le besoinVous intégrez une équipe en charge de l'infrastructure de gestion de la donnée d'un acteur bancaire en ligne à très forte volumétrie, sur un système d'information majoritairement construit en briques open source.L'équipe couvre l'intégralité du cycle de vie des plateformes data - conception, déploiement, administration, supervision - sans séparation build/run ni logique de procédures cloisonnées. Vous n'êtes pas administrateur de bases de données au sens classique : vous concevez, scalez, sécurisez et industrialisez les moteurs de données. L'optimisation de requêtes reste marginale.Volumétrie de référence : 180 instances MySQL avec sharding, cluster Hadoop d'environ 3 Po, stockage objet S3 de plusieurs pétaoctets.Vos missions :Traitement N3 des incidents de production sur l'ensemble des briques de gestion de la donnéeIndustrialisation des moteurs de données via déploiement automatisé (Terraform, sur VM pré-outillées EDR/hardening)Conception et exploitation des mécanismes de haute disponibilité, scalabilité, réplication et sharding à l'échelleDéfinition et exécution des stratégies de backup/restauration sur gros volumesTraitement de l'obsolescence : montée de version MySQL vers 8.x sur l'ensemble du parcQualification et industrialisation de nouvelles briques techniquesPilotage de la couche système sous-jacente et des couches d'exposition (ex. Consul)Suivi des KPIs de production et mise en oeuvre d'actions correctivesTraitement des sujets de sécurité sur les plateformes dataInterface quotidienne avec les équipes de développement et l'infrastructureEnvironnement technique :Socle commun : Linux (Debian/RHEL) niveau confirmé à avancé, Terraform/Ansible/Puppet, CI/CD, Git, Docker, Kubernetes (RKE2) en trajectoire GitOps (ArgoCD)Bigdata/Hadoop (coeur du poste) : Hadoop, Hive, Hue, Yarn, Zeppelin, Spark Streaming - niveau confirméAutres : Cassandra, Kafka, Airflow niveau confirmé ; MySQL niveau avancé ; suite ELKSupervision : Zabbix, Prometheus, Grafana, LokiProfil recherchéExpérience confirmée sur l'écosystème Hadoop (Hadoop, Hive, Hue, Yarn, Zeppelin, Spark Streaming) - c'est le coeur du poste, pas une brique parmi d'autres. On attend une pratique réelle de l'administration et du dépannage de cluster Hadoop en production, pas une simple utilisation applicativeSolide culture infrastructure système Linux (Debian/RHEL) et appétence marquée pour l'open sourceExpérience réelle et vécue de la production - vous avez géré de vrais incidents, pas seulement exécuté des procédures cadrées. C'est le critère le plus discriminant du posteMaîtrise conceptuelle de la gestion de la donnée à l'échelle : scalabilité, haute disponibilité, sharding, fonctionnement des brokers (Kafka, RabbitMQ)Capacité à expliquer et dépanner en profondeur un cluster Hadoop et les briques associées en condition dégradée - pas seulement à utiliser des outilsPosture transversale complète : conception, déploiement, administration, supervision, sur l'ensemble des briques data dont Hadoop. Toute posture silo (DBA pur, ops système pur) est éliminatoireVeille technologique active, culture infrastructure généraleSéniorité non bloquante : un profil junior avec des concepts Hadoop/data solides et de la motivation réelle est recevable

• Docker
• MySQL
• Gestion des données
• Zabbix
• Veille technologique
• Hive
• Kubernetes
• Terraform
• Git
• Ansible
• Sauvegarde des données
• Grafana
• KPI
• Cassandra
• Hadoop
• ELK
• KAFKA
• Prometheus