Data Engineer Streaming (Java / Kafka Stream / Spark) Jean-Michel.io

Tu es passionné(e) par la Data Engineering et tu aimes concevoir des plateformes de streaming capables de traiter des flux de données en temps réel ? Java, Scala, Kafka et les architectures orientées événements font partie de ton quotidien ?
Rejoins la Guild Data Factorii en tant que Data Engineer Java / Kafka et participe à des projets stratégiques de transformation data au sein d'un environnement technique de pointe.

Mais qu'est-ce que l'équipe Data Factorii adresse ?

En tant que Data Engineer H/F, tes missions seront de :

• Concevoir et développer des traitements de données distribués : construire, maintenir et faire évoluer des applications de streaming performantes avec Kafka Streams, capables de gérer de très grands volumes tout en garantissant leur fiabilité.

• Développer des architectures orientées événements (Event-Driven) : participer à la conception de plateformes de streaming temps réel exploitant Kafka et Pub/Sub.

• Développer des services et API robustes : concevoir, développer et maintenir des composants applicatifs en Java et/ou Scala, en t'appuyant sur SpringBoot.

• Contribuer aux traitements ELT/ETL : participer au développement et à l'évolution des traitements de transformation de données au sein des pipelines existants.

• Orchestrer les traitements de données : planifier, monitorer et fiabiliser les pipelines via Apache Airflow / Cloud Composer.

• Industrialiser les développements Data : automatiser les déploiements et garantir la qualité des livrables grâce à Git et aux pipelines CI/CD (GitLab CI).

• Collaborer avec les équipes techniques et métiers : travailler en étroite collaboration avec les équipes de développement, de production et les différents interlocuteurs métier afin de proposer des solutions adaptées aux enjeux business.

• Participer à l'amélioration continue : être force de proposition sur les évolutions techniques, les performances des traitements et les bonnes pratiques de développement.

Concrètement, qu'est-ce qu'on demande ?

En 1er, un savoir-être en phase avec notre culture :

• Tu es curieux(se) et passionné(e) par les technologies Data.

• Tu apprécies le travail en équipe et sais collaborer dans des environnements agiles.

• Tu fais preuve de rigueur, d'autonomie et d'un fort esprit d'analyse.

• Tu es force de proposition et aimes relever des défis techniques.

En 2nd, un bagage technique solide :

• Une expérience de 5 ans minimum en tant que Data Engineer.

• Une maîtrise confirmée de Java et/ou avec une bonne connaissance de Scala.

• Une expérience significative en développement de traitements de streaming avec Kafka Streams.

• Une bonne maîtrise des architectures de data streaming (Kafka, Pub/Sub).

• Une bonne maîtrise de Spring Boot pour le développement d'API et de services.

• Une expérience en traitement de données ETL/ELT.

• Une expérience avec Apache Airflow / Cloud Composer.

• Une maîtrise des outils Git, des chaînes CI/CD (GitLab CI) et des environnements Linux.

• Une expérience des méthodologies Agile / Scrum.

Les petits plus qui feront la différence :

• Une connaissance d'Apache Spark pour les traitements batch et distribués.

• Une expérience avec BigQuery, Bigtable et Elasticsearch.

• Une expérience en développement d'API avec Scalatra et en déploiement d'applications sur Kubernetes.

• Une bonne compréhension des enjeux de performance, de scalabilité et d'industrialisation des traitements Data à grande échelle.

• Une expérience des bonnes pratiques d'observabilité (monitoring, logging, alerting) serait appréciée.

Et surtout, tu as envie de participer à des projets ambitieux où la Data est au cœur de la stratégie des entreprises ?

Alors rejoins Data Factorii et construisons ensemble les plateformes Data de demain !

Ce que nous t'offrons ?

• Un salaire attractif qui évolue en fonction de ton expérience et de tes compétences.

• Des projets Data à forte valeur ajoutée, au sein d'environnements techniques modernes et innovants.

• Une montée en compétences continue sur les technologies Big Data et Cloud les plus recherchées du marché.

• Une mutuelle et un titre de transport pris en charge à 100 %.

• Du télétravail partiel pour favoriser un bon équilibre entre vie professionnelle et personnelle.

• Et surtout, l'opportunité de rejoindre une équipe d'experts passionnés par la Data et les nouvelles technologies.

skiils est un cabinet de conseil spécialisé en IA, qui place l'Humain, la stratégie et l'innovation au cœur de la transformation des entreprises. Notre MISSION ? Fédérer et connecter les meilleurs talents à vos enjeux métiers pour garantir l'impact durable de vos projets technologiques, Data et IA. Notre ADN ?Une communauté de talents engagés et fédérés par des Guild Master : une équipe Tech animée par des Techs ! Chez skiils, nous pensons que l'IA et l'innovation passent avant tout par le déploiement d'une équipe collaborative. Pourquoi skiils ? •Une forte expertise dans le pilotage de projets technologiques, Data et IA complexes.•L'accompagnement de projets ambitieux servant les enjeux IA et d'innovation d'une clientèle Grands Comptes.•Une relation directe, transparente et durable avec les équipes.•Des valeurs fortes, incarnées au quotidien : Excellence, Passion et Audace.