Informacje o stanowisku

ALGOTEQUE to firma konsultingowa z branży IT, która wspiera startupy, średnie przedsiębiorstwa oraz duże korporacje w tworzeniu i dostarczaniu innowacyjnych technologii. Nasz zespół ma udokumentowane sukcesy w projektowaniu, rozwijaniu, wdrażaniu i integracji rozwiązań programistycznych (AI, ML, BI, Web, Automatyzacja) dla sektorów takich jak Telekomunikacja, Energetyka, Bankowość, Ubezpieczenia, Farmacja, Motoryzacja, Przemysł, e-commerce. Świadczymy nasze usługi zarówno w modelu fixed-price, jak i time-and-materials, pomagając naszym klientom w osiąganiu ich celów biznesowych i strategii IT.Dołącz do naszego zespołu jako ETL Developer/Data Engineer i pracuj nad zaawansowanymi procesami integracji danych zarówno w środowisku on-prem, jak i w chmurze GCP. Poszukujemy doświadczonego specjalisty, który będzie odpowiedzialny za projektowanie, rozwój i optymalizację procesów ETL oraz baz danych w wymagających warunkach wydajnościowych.

Job Description :

- Rozwój i utrzymanie procesów ETL w środowisku on-prem przy użyciu narzędzi takich jak Informatica PowerCenter oraz Apache NiFi.Projektowanie, budowa oraz tuning relacyjnych baz danych (Oracle, PostgreSQL, ScyllaDB)- Utrzymanie oraz rozwój harmonogramowania procesów z wykorzystaniem narzędzia Automate Now- Tworzenie i zarządzanie usługami REST API- Wdrażanie procesów integracji danych w środowisku Google Cloud Platform (GCP) przy użyciu narzędzi takich jak Apache AirFlow, GCP DataFlow, GCP DataProc- Projektowanie i optymalizacja baz danych w chmurze (GCP BigQuery, GCP BigTable, Scylla Cloud)- Implementacja i obsługa systemów kolejkowania danych (Kafka, GCP Pub/Sub)- Programowanie w Pythonie (w obszarze integracji i analizy danych) oraz znajomość PySpark- Tworzenie wydajnych narzędzi i frameworków wspomagających ładowanie danych w języku Rust

Profile / Requirements :

- Minimum 5-letnie doświadczenie w roli ETL Developera w środowisku on-prem- Co najmniej 3-letnie doświadczenie jako Data Engineer w środowisku GCP- Biegła znajomość narzędzi ETL na poziomie zaawansowanym, zarówno on-prem, jak i w chmurze- Doświadczenie w pracy z dużymi zbiorami danych (~100TB)- Znajomość technologii związanych z mikroserwisami, programowanie w Java oraz znajomość języka Groovy będą dodatkowym atutem- Zaawansowane umiejętności pracy w systemie Linux- Samodzielność, kreatywność oraz umiejętność analitycznego myślenia

Warszawa - Oferty pracy w okolicznych lokalizacjach