Nous recherchons un Ingénieur Big Data Senior Freelance pour rejoindre l’équipe Data Engineering de notre client, un acteur majeur du secteur de la grande distribution. Le projet consiste à concevoir, développer et maintenir des solutions de traitement de données massives en utilisant les technologies Big Data et les outils Google Cloud Platform (GCP). Le candidat retenu sera responsable de la mise en place et de l’optimisation des pipelines de données, de l’analyse des performances et de l’amélioration continue des solutions existantes.

Responsabilités principales :

• Concevoir et développer des pipelines de données massives sur GCP, en utilisant BigQuery, BigTable, Spark, Kafka, Avro et d’autres technologies Big Data.
• Optimiser les performances des pipelines de données, en identifiant les goulots d’étranglement et en mettant en place des solutions d’amélioration.
• Assurer la qualité et la fiabilité des données, en mettant en place des mécanismes de surveillance et de détection des anomalies.
• Collaborer étroitement avec les équipes métier et les équipes d’ingénierie pour comprendre les besoins en données et proposer des solutions adaptées.
• Participer à la conception et à la mise en œuvre de l’architecture de données, en veillant à la conformité aux normes de sécurité et de confidentialité.
• Contribuer à la documentation technique et aux bonnes pratiques de développement.

Compétences techniques requises :

• Maîtrise des technologies Cloud de Google Cloud Platform (GCP) pour la gestion des données, l’orchestration et le déploiement des solutions Big Data.
• Expertise approfondie de BigQuery et BigTable pour le stockage, la manipulation et l’analyse de données à grande échelle.
• Maîtrise des langages de programmation Scala ou Java pour le développement de solutions Big Data, avec une expérience significative dans l’un des deux.
• Expérience pratique avec l’écosystème Hadoop et ses outils associés comme Spark et Apache Kafka pour le traitement distribué de données.
• Conception et implémentation de pipelines de données complexes en utilisant des outils comme Apache Kafka et Avro pour la gestion des flux de données.
• Compréhension des bases de données NoSQL, notamment Cassandra et BigTable, pour le stockage et la récupération de données non structurées.
• Expérience avec les moteurs de recherche comme Elasticsearch pour la recherche et l’analyse de données textuelles.
• Maîtrise des outils de CI/CD et des pratiques de développement logiciel pour l’automatisation du déploiement et de l’intégration continue.
• Expérience pratique avec les outils de déploiement et d’orchestration comme Jenkins, GitLab, Kubernetes, Docker et Ansible.
• Connaissance des concepts d’Agilité (Scrum, Sprint Planning, Backlog).

Compétences comportementales :

• Excellente communication écrite et orale en français pour des interactions fluides avec le métier.
• Esprit d’analyse et d’amélioration continue, capacité à évaluer le code et ses impacts, et à remettre en question les solutions existantes pour les améliorer.
• Capacité de prise de recul, aptitude à évaluer les problématiques avec objectivité et à proposer des solutions d’amélioration.
• Capacité à respecter les délais tout en maintenant des standards élevés.
• Esprit d’équipe, capacité à collaborer efficacement avec les membres de l’équipe pour atteindre des objectifs communs.

Profil recherché :

• Diplômé(e) d’un Bac+5 en école d’ingénieur ou équivalent universitaire avec une spécialisation en informatique, ou justifiant d’une expérience significative équivalente.
• Expérience de plus de 7 ans en GCP.
• Une expérience dans le secteur du commerce de détail ou de la grande distribution serait un plus.

Conditions du poste :

• Type de contrat : Freelance.
• Durée : 6 mois renouvelable (220 à 225 jours-homme).
• Localisation : Casablanca, Maroc.
• Rémunération : à négocier en fonction de l’expérience et des compétences.

Ce poste offre l’opportunité de travailler sur des projets de grande envergure, d’utiliser les dernières technologies Big Data et Cloud, et de contribuer à la transformation digitale d’un acteur majeur du secteur de la grande distribution. Si vous êtes passionné par les données massives, que vous avez une solide expérience sur GCP et que vous souhaitez relever des défis techniques complexes, nous vous invitons à postuler.