Accueil / Data Engineering
Sourcing Data & plateformes

Des consultants Data Engineering adaptés à votre environnement

Nous identifions, qualifions et positionnons des Data Engineers, Lead Data Engineers et Architectes Data capables de concevoir, fiabiliser et industrialiser vos flux de données.

Profils ciblés

Une qualification alignée sur la maturité de votre plateforme Data

Le bon profil dépend autant de l’architecture existante et des volumes traités que des contraintes d’exploitation, de qualité et de mise en production.

Data Engineer

Développement de pipelines batch ou temps réel, transformation, tests, optimisation et mise à disposition des données.

Lead Data Engineer

Conception, standards de développement, performance, accompagnement de l’équipe et sécurisation des choix techniques.

Architecte Data

Trajectoire Data, Lakehouse, architectures médaillon, intégration au SI, gouvernance technique et industrialisation.

SparkScalaPySparkDatabricksKafkaAirflowAzureAWSSQLDataOps
Points de qualification

Ce que nous vérifions avant de présenter un profil

Nous distinguons la connaissance déclarative d’un outil de l’expérience réellement acquise en conception, optimisation et production.

1

Architecture et volumes

Sources, formats, fréquence, volumétrie, dépendances, stockage et contraintes de restitution.

2

Maîtrise technique

Partitionnement, shuffle, performance Spark, qualité, reprise sur incident et observabilité des traitements.

3

Industrialisation

CI/CD, orchestration, tests, sécurité, gestion des environnements et capacité à travailler avec les métiers.

Besoins couverts

Du pipeline à la plateforme Data

Construction et refonte

  • Data Lake et Lakehouse
  • Architecture bronze, silver et gold
  • Migration et modernisation d’ETL

Temps réel et événements

  • Streaming Kafka
  • Ingestion et exposition
  • Résilience et supervision

Performance et qualité

  • Optimisation Spark
  • Contrôles et tests Data
  • Automatisation DataOps

Un besoin Data à qualifier ?

Transmettez-nous le contexte, la stack, la séniorité, la localisation et la date de démarrage.

contact@silene-consultant.fr