Data Engineer with GCP (f/m/x) Miejsce pracy: Białystok Technologie, których używamy Wymagane Python Java Apache Spark BigQuery Apache Beam Apache Airflow Google Cloud Platform Git Terraform Mile widziane Cloudera Apache Hadoop O projekcie Dołącz do międzynarodowego projektu realizowanego w obszarze platform danych i rozwiązań AI, którego celem jest migracja środowiska danych z infrastruktury on-premise do Google Cloud Platform. Projekt obejmuje transformację istniejącej platformy opartej o technologie Hadoop do nowoczesnej, chmurowej architektury danych. Twój zakres obowiązków Udział w migracji platformy danych z środowiska on-premise do Google Cloud Platform Analiza istniejących rozwiązań legacy oraz rekomendowanie docelowej architektury danych w chmurze Projektowanie i implementacja pipeline’ów danych (batch i streaming) w środowisku produkcyjnym Praca z usługami GCP, w szczególności Dataproc, Dataflow, BigQuery, Cloud Composer Automatyzacja procesów przetwarzania danych oraz orkiestracja workflow Współpraca z zespołami międzynarodowymi oraz zewnętrznym partnerem technologicznym Udział w warsztatach technicznych, przeglądach architektury i pracach koncepcyjnych Zapewnienie skalowalności, bezpieczeństwa oraz efektywności kosztowej rozwiązań Nasze wymagania Minimum 5 lat komercyjnego doświadczenia na stanowisku Data Engineer lub podobnym Bardzo dobra znajomość Google Cloud Platform, w szczególności Dataproc, Dataflow, BigQuery oraz Cloud Composer Wcześniejsza praca w projektach migracyjnych Doskonała znajomość Python - ETL, pipeline’y danych, automatyzacja Dobra znajomość Java, szczególnie w kontekście przetwarzania danych - Spark, Beam, batch/streaming Doświadczenie w projektowaniu i realizacji złożonych pipeline’ów danych w środowiskach produkcyjnych Praktyczna znajomość narzędzi orkiestracji, automatyzacji i CI/CD (np. Airflow, Git, Terraform) Umiejętność architektowania rozwiązań danych w GCP z uwzględnieniem bezpieczeństwa, data governance i kontroli dostępu Bardzo dobra znajomość języka angielskiego Samodzielność w podejmowaniu decyzji technicznych oraz umiejętność pracy zespołowej Wymagane przebywanie na terenie Polski oraz płynna znajomość języka polskiego Mile widziane Doświadczenie w pracy z Cloudera lub podobnymi platformami Hadoop Tak pracujemy nad projektem Continuous Deployment Continuous Integration To oferujemy Tytuł Great Place to Work od 2015 roku - to dzięki opiniom pracowników otrzymujemy tytuł i wdrażamy nowe pomysły Stabilność zatrudnienia – 2,1 MLD PLN przychodu, brak długów, od 2006 roku na rynku Dzielimy się zyskiem z pracownikami - od 2022 roku przeznaczyliśmy na ten cel już ponad 76 milionów PLN Bogaty pakiet benefitów - prywatna opieka zdrowotna, platforma kafeteryjna, zniżki na samochody i więcej Komfortowe miejsce pracy - pracuj w naszych biurach klasy A lub zdalnie Dziesiątki fascynujących projektów dla prestiżowych marek z całego świata – możesz je zmieniać dzięki aplikacji Job Changer 1 000 000 PLN rocznie na Twoje pomysły - taką kwotą wspieramy pasje i akcje wolontariackie naszych pracowników Stawiamy na Twój rozwój - meetupy, webinary, platforma szkoleniowa i blog technologiczny – Ty wybierasz Fantastyczna atmosfera stworzona przez wszystkich Sii Power People Etapy rekrutacji Wyślij do nas swoje CV Weź udział w rozmowie rekrutacyjnej Poznaj projekty dopasowane do Twoich potrzeb Podejmij decyzję i zacznij swoją przygodę z Sii! Sii Sp. z o.o. Sii to czołowy dostawca doradztwa technologicznego, transformacji cyfrowej oraz usług inżynieryjnych i biznesowych w Polsce. Zatrudniamy już ponad 7 300 specjalistów i realizujemy projekty z różnorodnych branż dla klientów z wielu krajów na całym świecie. Tytuł Great Place to Work zdobyty 11 razy z rzędu to dowód na to, że w Sii tworzymy przyjazne środowisko pracy. Sii zapewnia, że wszystkie decyzje związane z zatrudnieniem są podejmowane wyłącznie na podstawie kwalifikacji oraz kompetencji. Zobowiązujemy się do równego i sprawiedliwego traktowania wszystkich, niezależnie od cech prawnie chronionych. W Sii promujemy także różnorodne i inkluzywne środowisko pracy w pełnej zgodności z obowiązującymi przepisami antydyskryminacyjnymi.