Dołączysz do zespołu rozwijającego centralną platformę danych w dużej organizacji. Projekt obejmuje:

•Budowę i rozwój rozproszonych systemów przetwarzania danych (Big Data)

•Migrację rozwiązań do chmury publicznej (AWS)

•Tworzenie komponentów wspierających zaawansowaną analitykę i wizualizację danych

•Pracę w metodyce SAFe z cyklicznymi PI Planning

Informacje organizacyjne

•Forma pracy: hybrydowa (1 dzień w tygodniu w biurze)

•Lokalizacje biura: Trójmiasto / Warszawa / Łódź

Expert Data Engineer (IT Developer)

Twój zakres obowiązków

• Projektowanie i budowa wysoko wydajnych, rozproszonych pipeline’ów Big Data
• Przetwarzanie, transformacja i wzbogacanie dużych zbiorów danych z wykorzystaniem Apache Spark
• Tworzenie rozwiązań wspierających analitykę danych, raportowanie i procesy decyzyjne
• Współpraca z zespołami analitycznymi oraz biznesem przy budowie modeli danych
• Utrzymanie i rozwój rozwiązań opartych o Hadoop i technologie Big Data
• Automatyzacja procesów przetwarzania danych
• Ścisła współpraca z zespołem QA i innymi zespołami technicznymi

Nasze wymagania

• Bardzo dobra znajomość: Scala, Apache Spark
• Doświadczenie w pracy z: Python
• Znajomość ekosystemu Hadoop: YARN, EMR, Sqoop, Hive, Oozie
• Bardzo dobra znajomość: SQL
• Praktyczne doświadczenie z systemami Linux
• Doświadczenie w pracy z chmurą: AWS
• Znajomość języka angielskiego umożliwiająca pracę w środowisku międzynarodowym
• Doświadczenie w migracji danych z on-premise do chmury
• Praca w środowisku Agile / SAFe
• Doświadczenie z dużymi wolumenami danych i systemami czasu zbliżonego do rzeczywistego

To oferujemy

• Udział w projektach o dużej skali i realnym wpływie na biznes
• Pracę z nowoczesnym stackiem technologicznym (Scala, Spark, Python, AWS, Hadoop)
• Możliwość udziału w transformacji chmurowej dużej organizacji
• Elastyczny model pracy hybrydowej (ok. 1 dzień w tygodniu w biurze)
• Okazjonalne spotkania zespołowe w Trójmieście (PI Planning)