Senior Data Platform Engineer
Werde Teil eines modernen Softwareunternehmens, das eine cloudbasierte Datenplattform betreibt, und übernimm Verantwortung für die Administration, Überwachung und Optimierung einer Big-Data-Umgebung in AWS. Du arbeitest mit modernsten Technologien wie Kafka, Flink, NiFi und DynamoDB und sorgst durch 3rd-Level-Support und Bereitschaftsdienst für hohe Verfügbarkeit.
Deine Aufgaben:
- Administration, Überwachung und Optimierung einer Big-Data-Plattform in der AWS-Cloud
- Verwaltung und Wartung von Cloudera On-Cloud-PaaS-Diensten und AWS-nativen Technologien (z. B. Kafka, Flink, NiFi, Iceberg Tables, DynamoDB)
- Bereitstellung und Automatisierung von Infrastruktur in AWS mit Terraform und ArgoCD
- Durchführung von Updates, Upgrades und Incident-Management für Plattformkomponenten
- Beratung von Entwickler:innen bei der Auswahl geeigneter Services für Geschäftsanwendungsfälle
- Bereitstellung von 3rd-Level-Support, inklusive Fehleranalyse, Troubleshooting und Bereitschaftsdienst zur Gewährleistung der Systemverfügbarkeit
- Optimierung von Workloads (z. B. Flink-Job-Speicherverwaltung, Impala/Trino-Abfragoptimierung)
- Bewertung und Implementierung cloud-nativer Dienste im Einklang mit der Systemarchitektur
Dein Profil:
- Fundierte Linux- und Hadoop-Ökosystem-Kenntnisse (HDFS, Zookeeper, Yarn, Impala, Spark, Kafka)
- Erfahrung mit Automatisierungstools wie Terraform
- Programmierkenntnisse in Spark, Python und idealerweise Kenntnisse von Cloudera-Diensten (z. B. Hue, Knox, Ranger RAZ, Streams Messaging Manager, NiFi, Kudu)
- Erfahrung mit Bereitschaftsdienst, Troubleshooting und Rolling Restarts sind von Vorteil
- Kubernetes-Erfahrung ist ein großer Pluspunkt
- Teamplayer-Mentalität
Was dich erwartet:
- Hybrides Arbeitsmodell mit flexiblen Arbeitszeiten
- Persönliche Schulungs- und Entwicklungsmöglichkeiten
- Arbeit mit modernen Cloud- und Big-Data-Technologien in einem kollaborativen Umfeld
- Essenszuschuss, kostenlose Getränke und Obst
- Gesundheitsinitiativen und betriebliche Altersvorsorge
- Teamevents und professioneller Austausch in Engineering-Communities
- Gute Verkehrsanbindungen, Parkmöglichkeiten und Unterstützung bei Umzügen, falls zutreffend
Verdiene 1000 € für eine erfolgreiche Empfehlung
Erstelle dir deinen persönlichen Empfehlungslink und verdiene 1000€ für jede erfolgreiche Empfehlung. Es gibt keine Begrenzung, wie viele Personen du weiterempfehlen kannst. [click to reveal website link] kannst du dir deinen Link für diesen Job erstellen, sende ihn an die passende Person, wenn sie sich darüber bewirbt und eingestellt wird bekommst du die 1000€.