Data Architect (Databricks)
Opis oferty pracy
Niniejsze ogłoszenie dotyczy rekrutacji prowadzonej przez GreenMinds Sp. z o.o.
________
Dla jednego z naszych Klientów (firma finansowa), poszukujemy specjalisty na stanowisko
Data Architect (ze specjalizacją w Databricks).
Forma współpracy: kontrakt B2B.
Stawka: 170-200 PLN/h.
Tryb pracy: 100% zdalnie.
Proces rekrutacyjny: 3 etapy (screening + rozmowa wewnętrzna z Klientem + rozmowa w jęz. angielskim z Klientem końcowym).
Projekt międzynarodowy (klient Końcowy z USA) dotyczy środowiska Databricks i może obejmować zarówno nowe wdrożenie, jak i modernizację istniejących rozwiązań.
Zakres Obowiązków i odpowiedzialności
- Unity Catalog - zarządzanie dostępem, konfiguracja, lineage tracking).
- projektowanie i optymalizacja pipeline’ów w PySpark i Delta Lake.
- wdrażanie Spark tuning (AQE, broadcast joins, partition pruning).
- integracja z narzędziami CI/CD (np. Azure DevOps).
- projektowanie i wdrażanie skalowalnej architektury danych typu lakehouse, z naciskiem na: przetwarzanie danych w czasie rzeczywistym i wsadowym & automatyzację i standaryzację procesów ETL / ELT.
- współpraca z zespołami biznesowymi i technicznymi, przekładanie wymagania na rozwiązania techniczne.
- prowadzenie dokumentacji technicznej i architektonicznej.
- wsparcie zespołów w analizie danych i optymalizacji procesów.
Wymagane Kompetencje i doświadczenie
- minimum 8 lat doświadczenia w pracy z danymi.
- bardzo dobra znajomość Azure Databricks.
- praktyczna znajomość PySpark, Delta Lake i architektury Lakehouse.
- doświadczenie z konfiguracją i zarządzaniem Unity Catalog.
- znajomość zagadnień optymalizacji Spark.
- doświadczenie z procesami ETL / ELT.
- doświadczenie w pracy z narzędziami CI/CD (Azure DevOps, Git).
Mile widziane
- doświadczenie z GCP lub innymi chmurami.
- znajomość Microsoft Fabric.
- doświadczenie w projektach międzynarodowych (np. USA).
- umiejętność prowadzenia rozmów technicznych z klientem.
Certyfikaty:
- Microsoft Certified: Azure Data Engineer Associate.
- Databricks Certified (np. Data Engineer, ML Professional).
- Znajomość Microsoft Fabric.
Jesteś zainteresowany/a? Dołącz do nas!
Nota prawna
*Powyższe ogłoszenie zostało opublikowane grzecznościowo przez administrację portalu DigiJobs.pro i nie stanowi oferty w świetle obowiązującego prawa. Portal nie bierze odpowiedzialności za prowadzenie procesu rekrutacyjnego, jedynie cytuje treść oficjalnego ogłoszenia. Aplikowanie na ofertę pracy odbywa się bezpośrednio na stronie Pracodawcy wskazanego w ogłoszeniu lub platformie zewnętrznej wskazanej przez Pracodawcę do tego celu w zewnętrznych źródłach.