Databricks Data Engineer
A leading trading firm is looking to bring on a strong data engineer with Databricks expertise. As markets become increasingly data‑driven and competitive, our ability to ingest, process, and deliver high‑quality data at scale is essential. In this role, you will own and operate a business‑critical Databricks platform used across our global trading organization.
You'll drive platform standards, introduce new capabilities, and help shape the long‑term technical direction of Databricks. This is a high‑impact engineering position with significant autonomy, strong cross‑team visibility, and the opportunity to directly influence how our research and trading teams consume data.
Core Focus
- Design, build, and operate Databricks workspaces and multi‑environment deployments at scale
- Manage workspace configuration, cluster policies, job settings, access controls, and platform governance
- Lead the rollout of new platform features (e.g., Unity Catalog, UC Volumes, cluster policy enhancements, security updates)
- Establish and enforce standards for reliability, security, data governance, and cost controls
- Continuously improve the platform's performance, scalability, automation, and developer experience
- Build and maintain Databricks and cloud infrastructure using Terraform, including reusable, version‑controlled modules
- Create automated operational tooling in Python and shell for workspace, cluster, and job lifecycle management
- Develop repeatable deployment patterns across dev/test/prod environments following IaC best practices
- Design and maintain CI/CD pipelines for infrastructure and Databricks configuration
- Implement automated checks, policy validations, and safe promotion of changes across environments
- Support Git‑based workflows, peer review processes, and high‑governance deployment workflows
- Ensure that all platform changes meet standards for reliability, auditability, and risk tolerance
- Troubleshoot platform‑level issues across compute, jobs, networking, access, and integration points
- Improve observability, metrics, alerting, and operational dashboards for Databricks
- Manage core system configuration, cloud networking, IAM, and access boundary controls
- Partner with security, infrastructure, research, and trading teams to provide a stable, performant platform
- Implement and manage RBAC, SCIM/IdP integration, secrets management, and zero‑trust principles
- Ensure platform compliance with internal controls, operational standards, and audit requirements
- Participate in incident response, post‑mortems, and reliability improvement initiatives
- Balance rapid delivery withcarefulgovernance-this role interacts with systems where incorrect changes can have downstream trading impact
- Strong understanding of risk tolerance, peer review requirements, and deployment safeguards is essential
- You will directly own a mission‑critical platform central to research, analytics, and trading operations
- Opportunity to shape the platform roadmap, introduce new Databricks capabilities, and drive foundational architectural decisions
- Growth path into broader platform leadership, technical ownership, or architect‑level responsibilities
- Work in a world‑class engineering environment with exceptionally strong peers, rigorous technical standards, and support for continuous improvement
FAQs
Herzlichen Glückwunsch – wir wissen, dass es ein großer Schritt ist, sich die Zeit für eine Bewerbung zu nehmen. Wenn Sie sich bewerben, werden Ihre Angaben direkt an den zuständigen Berater weitergeleitet, der aktiv nach passenden Talenten sucht. Aufgrund der hohen Nachfrage können wir uns möglicherweise nicht bei allen Bewerbern zurückmelden. Wir behalten Ihren Lebenslauf und Ihre Daten jedoch stets in unserer Datenbank und melden uns bei Ihnen, sobald wir ähnliche Positionen sehen oder Fähigkeiten identifizieren, die das Wachstum von Unternehmen vorantreiben können.
Ja. Auch wenn diese Position nicht perfekt zu Ihrem nächsten Karriereschritt passt, hilft uns Ihre Bewerbung dabei, Ihre Fachkenntnisse und Ziele besser zu verstehen. So stellen wir sicher, dass Sie bei der passenden Gelegenheit auf unserem Radar sind.
Wir arbeiten auf unterschiedliche Weise: Zum einen veröffentlichen wir die aktuell verfügbaren Positionen auf unserer Website. Häufig können wir jedoch aus Gründen der Vertraulichkeit nicht alle Vakanzen ausschreiben. Darüber hinaus arbeiten wir mit Kunden zusammen, die einen stärkeren Fokus auf Fähigkeiten legen und darauf, was erforderlich ist, um ihr Unternehmen zukunftssicher aufzustellen.
Aus diesem Grund empfehlen wir, Ihren Lebenslauf zu registrieren, damit Sie auch für Positionen berücksichtigt werden können, die noch nicht geschaffen wurden.
Ja, wir unterstützen Sie bei der Optimierung Ihres Lebenslaufs und der Vorbereitung auf Vorstellungsgespräche. Von individueller Beratung über die gezielte Vorbereitung auf Interviews bis hin zu Gehalts- und Vertragsverhandlungen stehen wir Ihnen während Ihres gesamten nächsten Karriereschritts zur Seite.