Data Engineer ou Architecte Data H/F - 93

Dans le cadre de l'évolution d'une plateforme Data stratégique, nous recherchons un Data Engineer ou Architecte Data pour intervenir sur des problématiques d'architecture, d'ingestion et d'optimisation autour de Databricks sur Azure.

Vos missions

Vous interviendrez en tant que référent technique sur la plateforme Data :

- Conception et modélisation des flux de données
- Choix d'architecture sur Databricks
- Audit et optimisation de code (Spark / Python)
- Résolution de problématiques de performance, scalabilité et coûts
- Mise en place et amélioration des pipelines CI/CD
- Automatisation des tâches d'exploitation (catalogues, habilitations, provisioning)
- Mise en place de monitoring (DataDog)
- Réalisation de POC et veille technologique

Vous contribuerez également à la production des livrables d'architecture (HLD / LLD) et au suivi projet en méthodologie Agile.

Environnement technique

- Microsoft Azure (Serverless, Storage Gen2, AKS)
- Databricks (Unity Catalog)
- Apache NiFi & Zookeeper
- Spark / Python
- PostgreSQL
- Git / GitLab
- Power BI
- DataDog
- Méthodologie Agile Scrum

Profil recherché

- Minimum 4 ans d'expérience en Data Engineering ou Architecture Data
- Très bonne maîtrise de Databricks et Azure
- Expérience sur plateformes d'ingestion et data lake
- Capacité à prendre de la hauteur sur l'architecture globale
- Esprit force de proposition
- Une expérience R&D ou IA sur Databricks est un plus

Niveaux acceptés

- Data Engineer Expérimenté
- Data Engineer Senior
- Architecte Data Expérimenté
- Architecte Data Senior

Forte de 28 ans d'existence, Ciorane est une société de services en Ingénierie Informatique qui se caractérise par un positionnement économiquement équitable et socialement responsable.