Senior Data Architect (Kubernetes/Python/Databricks) (m/w/d)Senior Data Architect (Kubernetes/Python/Databricks) (m/w/d)
Senior Data Architect (Kubernetes/Python/Databricks) (m/w/d) - Remote (Onshore aus D.) Rahmeninformationen Referenz: 180965 Start: 2027-01-01 Dauer: 31.12.2027 Standort: Remote (Onshore aus D.) Arbeitsumfang: part-time110 PT Sprachen: Deutsch (Muttersprachliches Niveau/C2) Ihre Qualifikationen Bitte NUR bewerben, wenn ALLE MUSS-Anforderungen erfüllt sind!
Erfahrung in Python-basierter Datenverarbeitung und Datenmodellierung sowie praktische Erfahrung mit SQL und relationalen Datenbanken - Mindestens 5 Jahre Architektur- und Betriebserfahrung mit produktiven Kubernetes-/OpenShift-Plattformen im AWS-Umfeld - 3 Referenzen Erfahrung im Aufbau, in der Weiterentwicklung und im Betrieb von Azure-Databricks- und MLOps-Plattformen unter Berücksichtigung von Data Governance - 2 Referenzen Erfahrung in der Entwicklung und Integration Kafka-basierter Streaming-Anwendungen, einschließlich ereignisbasierter Datenverarbeitung und Anbindung bestehender Fachanwendungen - 2 Referenzen Projekterfahrung mit Daten und Anwendungen im Eisenbahnbetrieb, einschließlich Personaldisposition und Bearbeitung von Dispositionskonflikten - 2 Referenzen SOLL-Anforderungen: Zertifizierung in Databricks (Databricks Data Engineering) Mehrjährige Erfahrung in der
Containerisierung und Bereitstellung von Python-Anwendungen mit Docker, einschließlich automatisierter Build- und Deployment-Prozesse - Mindestens 3 Jahre Erfahrung mit eigenverantwortlich erbrachten, abgegrenzten Betriebsleistungsbausteinen für KI-Plattformen unter Nutzung von GitOps, GitLab CI/CD und Grafana-Monitoring Erfahrung mit Security by Design, insbesondere RBAC, OIDC, Secrets-Management und Container-Härtung - 2 Referenzen
Ihre Aufgaben
- Weiterentwicklung der Plattformarchitektur Analyse und Weiterentwicklung der Ziel- und Referenzarchitektur der hybriden Daten- und KI-Plattform unter Berücksichtigung von Microsoft Azure, Azure Databricks, DBMC/DBCS sowie der On-Prem-KI-Infrastruktur. Architektur und Weiterentwicklung von Azure Databricks Konzeption und Weiterentwicklung von Workspace-, Umgebungs-, Compute-, Netzwerk-, Identitäts- und Berechtigungsstrukturen sowie Unity Catalog und weiterer zentraler Databricks-Plattformfunktionen. Architektur der bestehenden KI-Plattform und On-Prem-Infrastruktur Konzeption und Weiterentwicklung containerisierter Daten- und KI-Plattformkomponenten auf DBMC/DBCS sowie Kubernetes-/k3s-basierter GPU- und CPU-Workloads auf der On-Prem-KI-Infrastruktur einschließlich der erforderlichen Schnittstellen und Integrationen.
Migration und Modernisierung bestehender Lösungen Analyse bestehender Daten-, ETL-/ELT-, Machine-Learning- und KI-Lösungen sowie Entwicklung geeigneter Ziel- und Übergangsarchitekturen für deren Modernisierung, Integration oder Migration auf die strategischen Plattformkomponenten. MLOps und KI-Plattformfähigkeiten Konzeption standardisierter Architekturen für Training, Experiment Tracking, Modellversionierung, Deployment, Model Serving, Inference und Monitoring über Cloud-, Container- und On-Prem-Ressourcen. Automatisierung und standardisierte Bereitstellung Konzeption wiederverwendbarer Infrastructure-as-Code-, CI/CD- und GitOps-Verfahren, insbesondere unter Nutzung von Terraform, Databricks Asset Bundles, GitLab CI/CD, Ansible und FluxCD.
Governance, Security und Betriebsfähigkeit Entwicklung technischer Standards und Guardrails unter Berücksichtigung von IT-Sicherheit, Datenschutz, Berechtigungen, Governance, Observability, Skalierbarkeit, Verfügbarkeit, Betriebsfähigkeit und Kosten. Technologieberatung und technische Entscheidungsgrundlagen Bewertung neuer Plattformtechnologien und -funktionen sowie Erarbeitung und Dokumentation von Lösungsvarianten, Architekturentscheidungen, Referenzarchitekturen und technischen Empfehlungen für die Weiterentwicklung der Daten- und KI-Plattform. Für unseren Kunden suchen wir aktuell eine/n
Arbeitgeber
Mehr Stellen finden
Ähnliche Stellen bei anderen Arbeitgebern
Weitere Stellen bei Westhouse Group
Alle 27 Stellen



Senior Scrum Master (mit Zertifizierung) KEINE FREIBERUFLER (m/w/d)
Frankfurt am MainVollzeit
85.000–105.000 € brutto/Jahr

Senior Microsoft Dynamics 365 CRM / CE Developer – C# & Azure (m/w/d)
EssenVollzeit
75.000–95.000 € brutto/Jahr

Senior IT Consultant – 5 Jahre Transport & Logistik, SAFe, TAF/TAP TSI (m/w/d)
Frankfurt am Main
75.000–95.000 € brutto/Jahr

Senior Java Entwickler für Transport und Dispositionssysteme (m/w/d)
Frankfurt am MainTeilzeit

Senior Business Analyst/Requirements Engineer (GIS & GenAI)(nur festangestellte Berater) (m/w/d)
Frankfurt am Main
75.000–95.000 € brutto/Jahr

Senior Java Entwickler mit CENELEC Know How in der Softwareentwicklung (m/w/d)
Berlin
75.000–95.000 € brutto/Jahr
