Senior Data Platform Engineer
KubernetesSQLPythonHadoopHiveSparkTrinoAirflowNiFiMinIOKafkaIBM MQInformatica PowerCenterCollibra
Über uns
EPAM Systems ist ein führender Anbieter von digitaler Ingenieurskunst, Cloud- und KI-gestützten Transformationsdiensten sowie ein wichtiger Partner für Unternehmens- und Erfahrungskonsultationen für globale Unternehmen und Startups.
- Führender Anbieter von digitaler Ingenieurskunst
- Cloud- und KI-gestützte Transformationsdienste
- Wichtiger Partner für Unternehmens- und Erfahrungskonsultationen
Ihre Aufgaben
Als Senior Data Platform Engineer leiten Sie das Design, die Entwicklung und Wartung skalierbarer Datenplattformen, die Analytik, Data Science und Geschäftsanwendungen unterstützen.
- Datenpipelines vorbereiten und Datenprobleme beheben
- XML-basierte Ingestion-Pipeline mit Hive/S3 entwickeln
- IBM MQ native basierte schemalose Datenaufnahme entwickeln
- Anwendungsintegration und Datenaustauschlogik verstehen
- Datenaufnahme- und Transformationsstrategien entwerfen
- Mit Stakeholdern zur Definition der Zielarchitektur zusammenarbeiten
- Übergang von Datenprodukten in skalierbare Frameworks unterstützen
- Möglichkeiten zur Vereinfachung und Modernisierung evaluieren
- Zukunftssichere Designentscheidungen empfehlen
Fähigkeiten
KubernetesSQLPythonHadoopHiveSparkTrinoAirflowNiFiMinIOKafkaIBM MQInformatica PowerCenterCollibra
Ihr Profil
Solide Erfahrung in der Datenverarbeitung in komplexen On-Premise-Umgebungen und fundierte Kenntnisse in Big Data Technologien sind erforderlich.
- Erfahrung in Datenverarbeitung in komplexen Umgebungen
- Erfahrung mit Big Data Technologien (Hadoop, Hive, Spark)
- Gute SQL-Kenntnisse
- Tiefes Wissen in Python und Datenmappings
- Verständnis von Datenmodellierungsstandards
- Kenntnisse in IBM MQ
- Kenntnisse im Bankensektor
- Fließende Englischkenntnisse, Deutsch von Vorteil
Bitte beachten Sie, dass Angebote einer Hintergrundüberprüfung unterliegen.