Big Data Developer with Apache Spark Miejsce pracy: Warszawa Technologie, których używamy Wymagane Apache Spark Apache Hadoop Python SQL Mile widziane Kubeflow Apache Kafka Apache Nifi O projekcie Poszukujemy osoby na stanowisko Big Data Developer do projektu realizowanego dla klienta z sektora bankowego. W tej roli będziesz rozwijać i utrzymywać rozwiązania oparte na technologii Spark, przetwarzające duże wolumeny danych w środowisku Hadoop Cloudera/Hortonworks. Jeśli masz doświadczenie w pracy z PySpark i solidne podstawy inżynierii danych, rozumiesz koncepcje hurtowni danych oraz dbasz o zachowanie dobrych praktyk programistycznych – to może być pozycja właśnie dla Ciebie. Praca w modelu hybrydowym: 2 razy w miesiącu z biura klienta w Warszawie. Twój zakres obowiązków Projektowanie i rozwijanie rozwiązań Big Data z wykorzystaniem Apache Spark Przetwarzanie i integracja danych z różnych źródeł w środowisku Hadoop Modelowanie danych oraz optymalizacja procesów przetwarzania Praca z różnymi formatami danych (JSON, PARQUET, ORC, AVRO) Projektowanie, kodowanie, testowanie i wdrażanie rozwiązań zgodnie z dobrymi praktykami inżynierskimi Współpraca z zespołami analityków i inżynierów danych w środowisku Agile Nasze wymagania Min. 2 lata doświadczenia w programowaniu w Apache Spark (preferowany PySpark) Bardzo dobra znajomość koncepcji Big Data, hurtowni danych i zarządzania danymi Doświadczenie w środowisku Hadoop Cloudera/Hortonworks Umiejętność pracy z dużymi zbiorami danych i ich integracji z wielu źródeł Znajomość języka SQL na poziomie zaawansowanym Wykształcenie wyższe techniczne (preferowane kierunki informatyczne lub pokrewne) Wymagane przebywanie na terenie Polski oraz płynna znajomość języka polskiego Mile widziane Doświadczenie w pracy w środowisku Agile Znajomość Kubeflow i technologii strumieniowych (Apache Kafka, Apache NiFi) Wiedza z zakresu automatyzacji procesów CI/CD Tak pracujemy nad projektem Continuous Deployment Continuous Integration To oferujemy Tytuł Great Place to Work od 2015 roku - to dzięki opiniom pracowników otrzymujemy tytuł i wdrażamy nowe pomysły Stabilność zatrudnienia – 2,1 MLD PLN przychodu, brak długów, od 2006 roku na rynku Dzielimy się zyskiem z pracownikami - od 2022 roku przeznaczyliśmy na ten cel już ponad 76 milionów PLN Bogaty pakiet benefitów - prywatna opieka zdrowotna, platforma kafeteryjna, zniżki na samochody i więcej Komfortowe miejsce pracy - pracuj w naszych biurach klasy A lub zdalnie Dziesiątki fascynujących projektów dla prestiżowych marek z całego świata – możesz je zmieniać dzięki aplikacji Job Changer 1 000 000 PLN rocznie na Twoje pomysły - taką kwotą wspieramy pasje i akcje wolontariackie naszych pracowników Stawiamy na Twój rozwój - meetupy, webinary, platforma szkoleniowa i blog technologiczny – Ty wybierasz Fantastyczna atmosfera stworzona przez wszystkich Sii Power People Etapy rekrutacji Wyślij do nas swoje CV Weź udział w rozmowie rekrutacyjnej Poznaj projekty dopasowane do Twoich potrzeb Podejmij decyzję i zacznij swoją przygodę z Sii! Sii Sp. z o.o. Sii to czołowy dostawca doradztwa technologicznego, transformacji cyfrowej oraz usług inżynieryjnych i biznesowych w Polsce. Zatrudniamy już ponad 7 300 specjalistów i realizujemy projekty z różnorodnych branż dla klientów z wielu krajów na całym świecie. Tytuł Great Place to Work zdobyty 11 razy z rzędu to dowód na to, że w Sii tworzymy przyjazne środowisko pracy. Sii zapewnia, że wszystkie decyzje związane z zatrudnieniem są podejmowane wyłącznie na podstawie kwalifikacji oraz kompetencji. Zobowiązujemy się do równego i sprawiedliwego traktowania wszystkich, niezależnie od cech prawnie chronionych. W Sii promujemy także różnorodne i inkluzywne środowisko pracy w pełnej zgodności z obowiązującymi przepisami antydyskryminacyjnymi.