Lead Data Engineer
A top-tier trading firm is looking for an experienced Data Engineer to strengthen the data stack supporting its Chicago research group and help evolve a modern Lakehouse-style architecture. You'll work with tools like Databricks, Spark, and Delta Lake to turn experimental research workflows into stable, scalable production systems.
As a key engineering presence in Chicago, you'll shape local data strategy while partnering with global research and platform teams. Your work will power real-time analysis, predictive modeling, and critical decisions across the trading lifecycle.
What You'll Do
- Build and maintain reliable ETL/ELT pipelines using Spark, Structured Streaming, Databricks, and internal high‑performance tooling
- Convert research prototypes into durable, high‑performance production workflows
- Create reusable templates, patterns, and documentation for power users
- Define and champion data engineering best practices
- Mentor junior engineers and promote strong DataOps habits
What You'll Get
- Direct influence on data systems that drive elite research and real-time trading
- A central role in shaping U.S. Lakehouse engineering and contributing to global architecture
- Ownership over complex workflows and cross-team templates
- Close collaboration with quants and traders to unlock data-driven insights
- Partnership with exceptional engineers across Chicago, Amsterdam, and Sydney
Additional benefits include:
- Working with colleagues from 40+ nationalities
- 401(k) with 50% employer match
- Comprehensive medical, dental, vision, mental health, disability, and life coverage
- 25 vacation days plus market holidays
- Office perks including daily meals, snacks, events, clubs, and sports leagues
Who You Are
- 5+ years of experience delivering scalable data pipelines
- Expert in Python, Spark, and Databricks
- Familiar with Delta Lake, streaming platforms like Kafka, and distributed compute
- Comfortable with cloud-native data design (preferably AWS) and cost-aware architectures
- Proficient with relational databases and modern orchestration tools
- Bonus: experience in C++ or Rust, and familiarity with MLOps or MLflow
- Strong communicator who leads projects independently and mentors others
- Bachelor's or Master's in Computer Science, Engineering, or a related field
FAQs
Herzlichen Glückwunsch – wir wissen, dass es ein großer Schritt ist, sich die Zeit für eine Bewerbung zu nehmen. Wenn Sie sich bewerben, werden Ihre Angaben direkt an den zuständigen Berater weitergeleitet, der aktiv nach passenden Talenten sucht. Aufgrund der hohen Nachfrage können wir uns möglicherweise nicht bei allen Bewerbern zurückmelden. Wir behalten Ihren Lebenslauf und Ihre Daten jedoch stets in unserer Datenbank und melden uns bei Ihnen, sobald wir ähnliche Positionen sehen oder Fähigkeiten identifizieren, die das Wachstum von Unternehmen vorantreiben können.
Ja. Auch wenn diese Position nicht perfekt zu Ihrem nächsten Karriereschritt passt, hilft uns Ihre Bewerbung dabei, Ihre Fachkenntnisse und Ziele besser zu verstehen. So stellen wir sicher, dass Sie bei der passenden Gelegenheit auf unserem Radar sind.
Wir arbeiten auf unterschiedliche Weise: Zum einen veröffentlichen wir die aktuell verfügbaren Positionen auf unserer Website. Häufig können wir jedoch aus Gründen der Vertraulichkeit nicht alle Vakanzen ausschreiben. Darüber hinaus arbeiten wir mit Kunden zusammen, die einen stärkeren Fokus auf Fähigkeiten legen und darauf, was erforderlich ist, um ihr Unternehmen zukunftssicher aufzustellen.
Aus diesem Grund empfehlen wir, Ihren Lebenslauf zu registrieren, damit Sie auch für Positionen berücksichtigt werden können, die noch nicht geschaffen wurden.
Ja, wir unterstützen Sie bei der Optimierung Ihres Lebenslaufs und der Vorbereitung auf Vorstellungsgespräche. Von individueller Beratung über die gezielte Vorbereitung auf Interviews bis hin zu Gehalts- und Vertragsverhandlungen stehen wir Ihnen während Ihres gesamten nächsten Karriereschritts zur Seite.