AI Data-Engineer 100% Greenfield F/H

Senior Data Engineer – Databricks / AWS | Projet Greenfield international Et si ton prochain projet Data commençait vraiment de zéro ? Pas de plateforme vieillissante à maintenir. Pas de dette technique héritée. Ici, l'objectif est de construire une nouvelle architecture Data, pensée pour durer et évoluer à l'international. Chez CAPFI , nous accompagnons un acteur majeur d'un secteur stratégique dans la refonte de son système d'information. Au programme : la création d'une plateforme Data Lakehouse sur Databricks et AWS , destinée à unifier les données de plusieurs pays et à préparer de nouveaux usages autour de l'intelligence artificielle. Un projet ambitieux, des choix techniques structurants et surtout, une vraie place pour tes idées. 🚀 Ce que tu vas construire Tu rejoindras une équipe technique impliquée dans la conception d'une plateforme Data internationale. Ton objectif : transformer des données complexes et dispersées en une architecture fiable, performante et exploitable à grande échelle. Concrètement, tu seras amené(e) à : • Concevoir et développer des pipelines Data robustes et scalables avec Python, SQL et Databricks. • Participer aux choix d'architecture du Lakehouse et à la structuration des données selon une approche Medallion • Construire des flux de données batch et événementiels, notamment avec Kafka. • Garantir la qualité, la sécurité et la gouvernance des données tout au long de leur cycle de vie. • Industrialiser les traitements sur AWS et contribuer à leur performance. • Participer à la mise en production et au monitoring dans une logique « You build it, you run it ». • Préparer les fondations Data nécessaires aux futurs cas d'usage IA. Ici, tu ne te contenteras pas d'exécuter des spécifications : tu participeras à la construction de la plateforme et à ses orientations techniques. 🛠️ Ton environnement technique Stack principale • Databricks, Spark, Python, SQL • AWS (S3, Glue, Athena) • Architecture Lakehouse et Medallion Écosystème complémentaire • Kafka et architectures événementielles • GitHub, Copilot et outils d'assistance au développement • Intégration de solutions IA / LLM 🎯 Le profil qu'on recherche Tu disposes d'une solide expérience en Data Engineering et tu aimes autant concevoir des architectures que les faire fonctionner. Ce qui fera la différence : • Une expérience significative sur Databricks et les architectures Lakehouse. • Une très bonne maîtrise de Python, SQL et Spark. • Une expérience concrète des environnements Cloud AWS. • Une bonne compréhension des enjeux de performance, de qualité et de gouvernance des données. • La capacité à prendre du recul, proposer des solutions et échanger avec des interlocuteurs techniques et métiers. Une expérience sur Kafka, les architectures distribuées ou les projets Data intégrant de l'IA sera particulièrement appréciée. Au-delà de la stack, nous recherchons surtout quelqu'un qui aime construire, partager ses idées et prendre des responsabilités techniques. 🤝 Pourquoi rejoindre CAPFI ? Parce qu'un projet intéressant, c'est essentiel. Mais l'environnement dans lequel tu évolues l'est tout autant. CAPFI, c'est une société de conseil IT à taille humaine, qui accompagne des acteurs majeurs de la banque, de la finance, des médias, de l'industrie et des services. Notre ambition : associer des projets techniques stimulants à un véritable accompagnement humain. En nous rejoignant, tu pourras : • Intervenir sur des projets structurants auprès de grands comptes. • Évoluer au contact d'experts techniques et métiers. • Partager tes connaissances au sein de communautés de compétences. • Construire ton parcours professionnel avec un accompagnement de proximité. 📍 Les informations pratiques • Contrat : CDI chez CAPFI • Localisation : Île-de-France • Télétravail : 2 à 3 jours par semaine selon les modalités du projet • Secteur : Energies • Expérience : 5 ans minimum en tant que Data Engineer • Langues : français et anglais professionnel 💬 Et maintenant ? Tu te reconnais dans ce projet, même si tu ne coches pas absolument toutes les cases ? Échangeons ! Pas besoin d'un long discours : raconte-nous ce que tu as construit, les technologies que tu maîtrises et ce que tu aimerais retrouver dans ton prochain challenge. Nous serons ravis d'en discuter avec toi.