Informacje o stanowisku

Senior Databricks Data Engineer Miejsce pracy: Wrocław Technologie, których używamy Wymagane Azure DevOps SQL Python PySpark Data Factory Synapse Analytics Data Lake Storage System operacyjny Windows Linux O projekcie Długofalowa współpraca z międzynarodową, topową firmą consultingową, świadcząca usługi IT dla dużych i średnich firm z różnorodnych sektorów jak automotive, healthcare, finanse, bankowość czy produkcja. Twój zakres obowiązków Projektowanie, tworzenie i utrzymywanie data pipelineów wspierających inicjatywy business intelligence i analityczne. Modelowanie danych oraz implementacja wzorców SCD2 (Slowly Changing Dimensions Type 2) w zgodzie z najlepszymi praktykami inżynierii danych. Praca w środowisku Databricks do tworzenia skalowalnych rozwiązań przetwarzania danych. Implementacja procesów transformacji danych przy użyciu PySpark w rozproszonych środowiskach obliczeniowych. Konfiguracja i optymalizacja usług Azure dedykowanych inżynierii danych (m.in. Data Factory, Synapse Analytics). Zarządzanie workflowami i orkiestracja pipelineów przy wykorzystaniu Azure DevOps. Zapewnienie jakości danych poprzez implementację narzędzi kontroli i monitorowania. Wykonywanie zaawansowanych zapytań SQL pod kątem optymalizacji wydajności oraz analizy danych. Wdrażanie rozwiązań zgodnie z zasadami governance i best practices w zakresie bezpieczeństwa danych. Nasze wymagania Kilkuletnie doświadczenie w inżynierii danych (modelowanie danych, przepływów danych, SCD2), w tym biegłości pracy w Databricks i implementacji rozwiązań na tej platformie. Doświadczenie pracy w Azure DevOps. Zaawansowana znajomość SQL do optymalizacji zapytań oraz projektowania schematów baz danych. Znajomość pracy z Python do automatyzacji oraz pisania skryptów do przetwarzania danych. Doświadczenie w PySpark do przetwarzania dużych zbiorów danych. Znajomość usług Azure - Data Factory, Synapse Analytics, Data Lake Storage. Mentalność Data Engineera - zaangażowanie w budowanie skalowalnych, niezawodnych systemów oraz baz danych. Doświadczenie współpracy w międzynarodowym, rozproszonym środowisku. Znajomość języka angielskiego na poziomie B2 lub C1 – umożliwiająca swobodną komunikację w międzynarodowym środowisku. Mile widziane Dostępność ASAP; akceptowalny jest maksymalnie miesięczny okres wypowiedzenia, ze skutkiem na koniec miesiąca. Tak organizujemy naszą pracę Tak pracujemy u klienta agile Takie dajemy możliwości rozwoju wymiana wiedzy technicznej w firmie To oferujemy Długofalowa współpraca z wynagrodzeniem w przedziale 130-160 PLN netto/godz. VAT. Wsparcie przy zakładaniu i prowadzeniu działalności gospodarczej, dla osób bez takiego doświadczenia. Współpraca w godzinach 9:00-17:00, możliwa lekka elastyczność. Współpraca hybrydowa - 4 razy w miesiącu w biurze Klienta w dowolnie wybranej lokalizacji: w Warszawie przy ul. Żwirki i Wigury lub we Wrocławiu przy ul. Legnickiej lub w Poznaniu przy ul. Kolorowej. Benefity - prywatna opieka medyczna, karta Multisport. Nowoczesny sprzęt zapewniany przez firmę, wraz z softem i konfiguracją. Benefity dofinansowanie zajęć sportowych prywatna opieka medyczna Etapy rekrutacji Rozmowa techniczna z Managerami online (max 1h) Rozmowa techniczna z Managerami online (max 1h) Be in IT Be in IT to firma rekrutacyjna, wyspecjalizowana w poszukiwaniu Specjalistów z branży technologii informatycznych. Obecnie, dla naszego klienta, poszukujemy osoby na stanowisko Senior Databricks Data Engineer.

Wrocław - Oferty pracy w okolicznych lokalizacjach