Un cabinet de conseil spécialisé recherche un ingénieur de données expérimenté pour un poste clé au sein d’une importante institution bancaire. Basé à Dallas, au Texas, ou à Tulsa, en Oklahoma, ce rôle consiste à concevoir et optimiser des pipelines de données en temps réel, essentiels au fonctionnement des activités de l’entreprise.
L’ingénieur de données sélectionné sera responsable de la transformation de données brutes à grande vitesse en informations exploitables, en utilisant des technologies de pointe telles qu’Apache Kafka et Apache Flink. Il devra posséder une solide expérience dans la création et la maintenance de pipelines de données de qualité production, avec un accent particulier sur les systèmes en temps réel.
Les compétences requises incluent une expertise approfondie d’Apache Kafka et d’Apache Flink, notamment en gestion des états, en tolérance aux pannes et en sémantique temporelle. Une connaissance approfondie des services cloud AWS (S3, MSK, Glue, Athena, EMR, DynamoDB, etc.) est également indispensable, ainsi qu’une maîtrise de langages de programmation tels que Python, Java ou Scala.
Le candidat idéal sera familier avec les technologies Big Data modernes (Spark, Airflow, Iceberg, SQL) et les systèmes distribués. Des compétences en résolution de problèmes et une capacité à gérer des systèmes complexes sont également attendues.
Les principales responsabilités incluent la conception, le développement et le déploiement d’applications de streaming robustes et à faible latence, l’optimisation des systèmes événementiels basés sur Kafka, et l’intégration des données traitées dans AWS S3, potentiellement au format Apache Iceberg. L’optimisation des performances et la mise en place d’une surveillance robuste sont également des aspects importants du poste.
Une expérience dans le secteur financier est un atout, mais pas une condition obligatoire. Le poste requiert une collaboration étroite avec des data scientists, des ingénieurs logiciels et des parties prenantes commerciales pour traduire les besoins fonctionnels en solutions de traitement de données fiables. Le respect des meilleures pratiques en génie logiciel, notamment les tests automatisés et les pipelines CI/CD, est également essentiel.
Heitmeyer Consulting s’engage à promouvoir l’égalité des chances et encourage tous les candidats qualifiés à postuler. Les décisions d’embauche seront prises sans discrimination fondée sur l’origine ethnique, le sexe, le handicap, le statut de vétéran ou toute autre caractéristique protégée par la loi.
Pour postuler à cet emploi, cliquez ici
À lire aussi
