Pyspark Aufträge, Jobs & Projekte

Projektaufgaben: Wir suchen für ein Projekt bei unserem Kunden in Banking Sektor ein Data Analyst: - DB Background needed (SDLC, Clarity, JIRA, HP ALM, …) - DWH / BI / Big Data Knowledge / Data Vault - EAP (Hadoop, PySpark, Hive, …...

Funktion und Schwerpunkte: Data Engineer (m/f/d) Reference: 804120/1-en Start: asap Duration: 11 MM++ Main tasks: Design, implement, and maintain scalable ETL pipelines using AWS Glue (Spark), Python, and PySpark.Manage complex data …...

Das erwartet Sie: PySpark Developer - Spark, Databricks, Azure, Python - long term contract opportunity to join our Zürich based client in the financial sector. Your tasks: Taking part in a major transformation projectImplemen …...

Verantwortung für die erfolgreiche Umsetzung von Lakehouse-Projekten in der Azure Cloud. Entwicklung und Betrieb skalierbarer Datenlösungen auf Basis von Databricks. Einbringen innovativer technischer Ansätze in die Projektarbeit. Enge Zusammenarbeit mit Kunden sowie internen Teams, um datengetriebene Lösungen effizient und kundenzentriert bereitzustellen. Sicherstellung, dass Data Engineering-Lösungen robust, skalierbar und wartbar sind. Anforderungen: Praktische Erfahrung in Lakehouse-Architekturen und Bereitstellung von Databricks Workspaces. Erfahrung in der Entwicklung von Framewo...

Für einen Kunden aus der Energiebranche suchen wir eine Beratungsleistung im Data Engineering am Standort Hamburg bzw. remote. Aufgaben: Umsetzung des automatisierten Imports von Daten aus diversen Schnittstellen (u.a. CSV, Webservice). Beratung zur technischen Umsetzung regulatorischer Anforderungen (Zugriffssteuerung, Historisierung, Versionierung, Data Lineage). Implementierung von Geschäftsprozessen und -logiken in Python/SQL/PySpark. Entwurf und Umsetzung von Reports in Power BI. Entwicklung von automatischen Tests für die Datenprodukte. Dokumentation der Datenstrecken und Gesch...