Informacje o stanowisku

technologies-expected :

• Python
• Java
• Apache Spark
• BigQuery
• Apache Beam
• Apache Airflow
• Google Cloud Platform
• Git
• Terraform

• Cloudera
• Apache Hadoop

• Dołącz do międzynarodowego projektu realizowanego w obszarze platform danych i rozwiązań AI, którego celem jest migracja środowiska danych z infrastruktury on-premise do Google Cloud Platform. Projekt obejmuje transformację istniejącej platformy opartej o technologie Hadoop do nowoczesnej, chmurowej architektury danych.

• Udział w migracji platformy danych z środowiska on-premise do Google Cloud Platform
• Analiza istniejących rozwiązań legacy oraz rekomendowanie docelowej architektury danych w chmurze
• Projektowanie i implementacja pipeline’ów danych (batch i streaming) w środowisku produkcyjnym
• Praca z usługami GCP, w szczególności Dataproc, Dataflow, BigQuery, Cloud Composer
• Automatyzacja procesów przetwarzania danych oraz orkiestracja workflow
• Współpraca z zespołami międzynarodowymi oraz zewnętrznym partnerem technologicznym
• Udział w warsztatach technicznych, przeglądach architektury i pracach koncepcyjnych
• Zapewnienie skalowalności, bezpieczeństwa oraz efektywności kosztowej rozwiązań

• Minimum 5 lat komercyjnego doświadczenia na stanowisku Data Engineer lub podobnym
• Bardzo dobra znajomość Google Cloud Platform, w szczególności Dataproc, Dataflow, BigQuery oraz Cloud Composer
• Wcześniejsza praca w projektach migracyjnych
• Doskonała znajomość Python - ETL, pipeline’y danych, automatyzacja
• Dobra znajomość Java, szczególnie w kontekście przetwarzania danych - Spark, Beam, batch/streaming
• Doświadczenie w projektowaniu i realizacji złożonych pipeline’ów danych w środowiskach produkcyjnych
• Praktyczna znajomość narzędzi orkiestracji, automatyzacji i CI/CD (np. Airflow, Git, Terraform)
• Umiejętność architektowania rozwiązań danych w GCP z uwzględnieniem bezpieczeństwa, data governance i kontroli dostępu
• Bardzo dobra znajomość języka angielskiego
• Samodzielność w podejmowaniu decyzji technicznych oraz umiejętność pracy zespołowej
• Wymagane przebywanie na terenie Polski oraz płynna znajomość języka polskiego

• Tytuł Great Place to Work od 2015 roku - to dzięki opiniom pracowników otrzymujemy tytuł i wdrażamy nowe pomysły
• Stabilność zatrudnienia – 2,1 MLD PLN przychodu, brak długów, od 2006 roku na rynku
• Dzielimy się zyskiem z pracownikami - od 2022 roku przeznaczyliśmy na ten cel już ponad 76 milionów PLN
• Bogaty pakiet benefitów - prywatna opieka zdrowotna, platforma kafeteryjna, zniżki na samochody i więcej
• Komfortowe miejsce pracy - pracuj w naszych biurach klasy A lub zdalnie
• Dziesiątki fascynujących projektów dla prestiżowych marek z całego świata – możesz je zmieniać dzięki aplikacji Job Changer
• 1 000 000 PLN rocznie na Twoje pomysły - taką kwotą wspieramy pasje i akcje wolontariackie naszych pracowników
• Stawiamy na Twój rozwój - meetupy, webinary, platforma szkoleniowa i blog technologiczny – Ty wybierasz
• Fantastyczna atmosfera stworzona przez wszystkich Sii Power People

Lublin - Oferty pracy w okolicznych lokalizacjach