Projekt który będziemy gotowi Ci zaproponować skupia się na przetwarzaniu i integracji dużych wolumenów danych z wykorzystaniem technologii Big Data, głównie Spark oraz Scala. Kandydat będzie odpowiedzialny za rozwój i utrzymanie skalowalnych rozwiązań danych.
responsibilities :
Tworzenie i rozwój rozwiązań Big Data z wykorzystaniem Apache Spark i języka Scala, zgodnie z najlepszymi praktykami inżynierii oprogramowania.
Przetwarzanie i integracja dużych wolumenów danych w środowiskach opartych na Hadoop, Hive oraz Azure Databricks.
Wdrażanie i utrzymywanie procesów CI/CD w środowisku DevOps z użyciem Git, Jenkins, Sonar, Nexus oraz innych narzędzi.
Projektowanie i harmonogramowanie pipeline’ów danych (ETL) z wykorzystaniem narzędzi orkiestracyjnych (np. Airflow, Control-M).
Współpraca w zespołach Agile przy projektowaniu i wdrażaniu kompleksowych rozwiązań danych, dbając o jakość, testowalność i bezpieczeństwo kodu.
requirements-expected :
Minimum 5 lata doświadczenia w pracy z Apache Spark i językiem Scala.
Bardzo dobra znajomość zasad pisania przejrzystego, wydajnego i testowalnego kodu (clean code, TDD, wzorce projektowe).
Doświadczenie w pracy z dużymi wolumenami danych oraz technologiami Big Data (Spark, Hadoop, Hive).
Znajomość Azure Databricks będzie dodatkowym atutem.
Znajomość pracy w środowisku Agile i DevOps.
Doświadczenie z systemami kontroli wersji oraz narzędziami CI/CD (Git, GitHub, Jenkins, Sonar, Nexus, Jira).
Dobra znajomość struktur baz danych: PostgreSQL, SQL, Hive.
Znajomość języka angielskiego na poziomie co najmniej B2+.
offered :
Pracę w organizacji z ugruntowaną pozycją rynkową,
Współpracę z ciekawymi klientami biznesowymi z różnych branż (m.in.: finanse, bankowość, ubezpieczenia, healthcare, robotyzacja, energetyka, media),
Świetną atmosferę pracy, wśród zaangażowanych ludzi z pasją w płaskiej strukturze z prostymi procesami,
Współpracę w oparciu o kontrakt B2B,
Kompleksowy pakiet benefitów skrojonych na miarę - prywatna opieka medyczna dla Ciebie oraz dla Twojej rodziny, Multisport dla Ciebie i os. towarzyszącej - Ty decydujesz, co wybierasz!
