.
Hadoop Big Data Devops
  • Warsaw
Hadoop Big Data Devops
Warszawa, Warsaw, Masovian Voivodeship, Polska
Detable
27. 7. 2025
Informacje o stanowisku

Dołącz do  Detable Sp. Z o.o.  - prężnie rozwijającej się firmy, która stawia na długofalową współpracę z doświadczonymi profesjonalistami.

Od ponad 2 lat jesteśmy partnerem dla instytucji z sektora publicznego, współpracujemy m.in. z Centrum e-zdrowia, Aplikacjami Krytycznymi Ministerstwa Finansów, Głównym Urzędem Nadzoru Budowlanego, Urzędem Do Spraw Cudzoziemców Narodowym Funduszem Zdrowia  i wieloma innymi. Nasi konsultanci pracują nad rozwojem aplikacji i systemów, z których korzystają miliony Polaków!Z sukcesem działamy na rzecz informatyzacji polskiej służby zdrowia. Bierzemy udział w rozwijaniu systemu e-zdrowie -P1 (e-recepty, gabinet gov.pl, KSO – krajowa sieć onkologiczna) a także e-krew oraz RIZM - Centralny Rejestr Osób Uprawnionych do Wykonywania Zawodu Medycznego.

Możemy pochwalić się także udziałem w realizacji kluczowych projektów w obszarze finansowym, takich jak KSeF - Krajowy System e-Faktur,  JSP  - Jednolity System Podatkowy.

Jeśli chcesz pracować nad aplikacjami, z których będziesz potem korzystać w codziennym życiu, dołącz do naszego zespołu jako Hadoop/Big Data Devops.

Ta rola jest właśnie dla Ciebie jeśli:

  • Posiadasz minimum 5 lat doświadczenia na stanowisku DevOps Engineer, w projektach dla klienta masowego, związanych z przetwarzaniem dużych wolumentów danych;

  • Realizowałeś projekty związane z klastrami High Availability i HDP ( tu integracja z Karberos/ AD);

  • Brałeś udział w wdrożeniu standardami CI/CD;

  • Biegle posługujesz się oprogramowaniem ekosystemu Apache Hadoop Bigtop (hdfs, spark, yarn, mapreduce, hive, ranger) w zakresie instalacji i konfiguracji;

  • Swobodnie poruszasz się używając Ansible;

  • Posiadasz praktyczne umiejętności z Kubernetes, Docker, Grafana/Prometheus, PostrgreSQL (EDB), Airflow, JupyterLab, Zeppelin –(instalacja, administracja i zarządzanie);

  • Masz udokumentowane doświadczenie w zakresie pisania skryptów shellowych;

  • Miałeś okazje pracować w obszarze Big Data, Hurtowni Danych i Zarządzania Danymi minimum 3 lata;

  • Nie jest Ci obca platforma programistyczna Hadoop Cloudera/Hortonworks;

  • Z łatwością odnajdujesz się w programowaniu procesów Apache Spark w Python(lub Scala);

  • Pracowałeś z różnymi formatami danych (np. JSON, ORC, PARQUET);

  • Biegle posługujesz się językiem polskim.

Jeśli dołączysz do naszego zespołu Twoim zadaniem będzie:

  • Praca w środowisku bazodanowym Big Data, Spark, Apache Hadoop;

  • Projektowanie, implementacja i optymalizacja procesów przetwarzania danych w środowiskach Big Data;

  • Instalacja, konfiguracja, zarządzanie klastrem Hadoop;

  • Instalacja bibliotek w klastrze HDP a także monitorowanie wydajności i aktywne zarządzanie oraz strojenie klastra HDP;

  • Projektowanie i zarządzanie hurtowniami danych oraz zapewnienie jakości danych;

  • Zarządzanie klastrem Kubernetes;

  • Integracja danych z wielu źródeł o różnych formatach (m.in. JSON, PARQUET, ORC, AVRO);

  • Tworzenie zaawansowanych zapytań SQL oraz optymalizacja dostępu do danych;

  • Wykorzystywanie odpowiednich technologii bazodanowych w zależności od scenariusza użycia;

  • Udział w projektowaniu architektury danych oraz wdrażaniu najlepszych praktyk zarządzania danymi;

  • Rozwiązywanie problemów i awarii klastra HDP;

  • Monitorowanie i zapewnianie wysokiej wydajności systemów Big Data.

Z naszej strony możesz liczyć na;

  • Konkurencyjne wynagrodzenie w oparciu o kontrakt B2B ( 140-170pln netto/h);

  • Długofalową współpracę opartą o wzajemny szacunek i partnerstwo;

  • Dedykowanego opiekuna kontraktu po stronie Detable;

  • Możliwość 100% pracy zdalnej lub z naszego biura w Białymstoku;

  • Możliwość podnoszenia swoich kwalifikacji poprzez skorzystanie z budżetu szkoleniowego;

  • Realny wpływ na rozwój projektu;

  • Atrakcyjny program poleceń pracowniczych;

  • Zdalny proces rekrutacji.

Jak wygląda u nas proces rekrutacji?

  • Rozmowa HR z naszą IT Rekruterką;

  • Weryfikacja umiejętności technicznych przez naszego Lidera technicznego;

  • Spotkanie z klientem;

  • Decyzja i rozpoczęcie współpracy 

  • Praca Warszawa
  • Warszawa - Oferty pracy w okolicznych lokalizacjach


    85 433
    7 616