Senior Data Engineer with Big Data Experience
KubernetesSQLPythonS3HiveSparkTrinoMinIOKafkaJupyter NotebooksKnimeClouderaDataikuTableauPower BI
Über uns
EPAM Systems ist ein führender Anbieter von digitaler Ingenieurskunst, Cloud- und KI-gestützten Transformationsdiensten sowie ein wichtiger Partner für Unternehmens- und Erfahrungskonsultationen für globale Unternehmen und Startups.
- Führender Anbieter von digitaler Ingenieurskunst
- Cloud- und KI-gestützte Transformationsdienste
- Partner für Unternehmens- und Erfahrungskonsultationen
Verantwortlichkeiten
Design, Entwicklung und Wartung von skalierbaren Datenpipelines und ETL-Workflows zur Verarbeitung von großflächigen Finanzdaten. Zusammenarbeit mit funktionsübergreifenden Teams zur Definition und Implementierung der Enterprise Data Strategy der Bank.
- Design, Entwicklung und Wartung von Datenpipelines
- Zusammenarbeit mit Teams zur Definition der Enterprise Data Strategy
- Integration und Wartung von Big Data Plattformen
- Implementierung von Data Platforms und Best Practices
- Modellierung und Verwaltung von JSON-basierten Schemata
- Unterstützung von Data Scientists
- Lösung von datenbezogenen Problemen
Fähigkeiten
KubernetesSQLPythonS3HiveSparkTrinoMinIOKafkaJupyter NotebooksKnimeClouderaDataikuTableauPower BI
Anforderungen
Erfahrung mit Big Data Technologien wie S3, Hive, Spark, Trino, MinIO, Kubernetes (K8S) und Kafka. Expertise in SQL, Python-Scripting und Datenqualitätsrahmenwerken.
- Erfahrung mit Big Data Technologien
- Expertise in SQL und Python-Scripting
- Verständnis von Datenqualitätsrahmenwerken
- Erfahrung in der Integration von Data Science Plattformen
- Erfahrung in der Verwaltung von großen Datenmigrationsprojekten
- Vertrautheit mit Datenvisualisierungstools
- Exzellente Kommunikationsfähigkeiten in Englisch
Bitte beachten Sie, dass alle Angebote angemessenen Hintergrundüberprüfungen unterliegen.