Informacje o stanowisku
Hays IT Contracting to współpraca oparta na zasadach B2B. Nasza firma dopasowuje specjalistów IT do najciekawszych projektów technologicznych na rynku.
Dołącz do grona 500 zadowolonych Kontraktorów i pracuj dla Klientów Hays!
Obecnie dla naszego Klienta poszukujemy Kandydatów na stanowisko:
Data Engineer Lokalizacja: Hybryda / Warszawa
Branża: projekt w sektorze energetycznym
Rodzaj umowy: kontrakt (B2B przez Hays Poland)
Współpraca: współpraca długofalowa (pierwszy kontrakt na 12 miesięcy)
Stawka: 100-130 PLN/h netto + VAT
Start date: ASAP, max. w ciągu 1 miesiąca
Godziny pracy: Biznesowe
Praca Hybrydowa: ok. 2 dni w tygodniu w okresie wdrożeniowym, potem okazjonalnie (możliwy mniejszy wymiar)
Stos technologiczny:
GCP, Big Query, SQL, Python, ETL/ELT, MySQL, Apache Airflow
Projekt:
Projekt dla dużego Klienta z sektora Energetycznego
Czym będziesz się zajmował:
wsparcie zespołu projektowego oraz utrzymaniowego w zadaniach związanych z budową, rozwojem i utrzymaniem platformy CDP w technologii Data Lakehouse (GCP)
Co otrzymasz:
- Długofalową współpracę z Klientem realizującym projekty dla największych graczy z sektora bankowego, ubezpieczeniowego, telco i nie tylko
- Standardowe benefity – preferencyjne stawki pakietów LuxMed i Multisport
Decydując się na współpracę via Hays, otrzymujesz również możliwość pracy w przyszłości dla wielu innych przewodnich klientów Hays
Czego oczekujemy:
- Minimum 4 lata doświadczenia komercyjnego w roli Data Engineer
- Udział w kilku projektach budowy rozwiązań cloud w roli Data Engineer
- Znajomość języka angielskiego na poziomie umożliwiającym pracę wśrodowisku międzynarodowym
- Kompetencje technologiczne:
- Google Cloud Platform (GCP): Znajomość kluczowych usług Data &
- BigQuery: Wykorzystanie do przechowywania, przetwarzania i analizy danych (Bronze, Silver, Gold layers), w tym tabele zewnętrzne, partycjonowanie, klastrowanie, optymalizacja zapytań
- Cloud Storage: Zarządzanie danymi w różnych formatach (Parquet, JSON, CSV) i klasach przechowywania.
- Cloud Dataflow (Apache Beam): Projektowanie, implementacja i optymalizacja potoków ETL/ELT (zarówno batch, jak i streaming) w Pythonie.
- Cloud Composer (Apache Airflow): Tworzenie i zarządzanie DAGami do orkiestracji złożonych przepływów danych, monitorowanie zadań
- Datastream: Zrozumienie mechanizmów CDC (Change Data Capture) i replikacji danych (z MySQL do BigQuery).
- Dataplex: Znajomość zarządzania metadanymi, katalogowania danych, Data Quality (DQ) i Data Lineage
- Pub/Sub: Praca z systemami kolejkowania komunikatów do integracji strumieniowej.
- Dataform: Doświadczenie w tworzeniu, testowaniu i zarządzaniu transformacjami danych w SQL w BigQuery.
- Python: Znajomość języka, w tym bibliotek do przetwarzania danych (Pandas)
- SQL: Znajomość SQL (ANSI SQL, dialekt BigQuery) do transformacji, analizy i modelowania danych
- MySQL: Zrozumienie relacyjnych baz danych, optymalizacja zapytań, praca z danymi transakcyjnymi (CSZZ).
- PostgreSQL, MS SQL Server: Znajomość tych baz danych jako źródeł danych.
- Architektura Medalionowa (Bronze, Silver, Gold): Doświadczenie w implementacji i utrzymaniu tej architektury.
- ETL/ELT: Zrozumienie procesów ekstrakcji, transformacji i ładowania danych
- Data Governance: Zrozumienie zasad zarządzania jakością danych, bezpieczeństwa danych, prywatności i zgodności (RODO).
- Deduplikacja Danych: Projektowanie i implementacja strategii deduplikacji klientów, zarządzanie regułami łączenia i wykluczania.
- Wersjonowanie Danych (Data Versioning): Zrozumienie technik
- Git: Znajomość systemów kontroli wersji (strategie branchingu, Pull Requests)
- CI/CD: Zrozumienie procesów Continuous Integration i Continuous
- Deployment (np. z użyciem Cloud Build).
- Monitorowanie i Alertowanie: Konfiguracja Cloud Monitoring i Cloud Logging
Co będzie Twoim dodatkowym atutem:
Wykształcenie wyższe na kierunku informatyka, matematyka lub pokrewne
Jak będzie wyglądał proces rekrutacyjny:
- Twoje CV trafi do weryfikacji przez Rekrutera Hays
- Rekruter skontaktuje się z Tobą telefonicznie – 15-minutowa rozmowa o projekcie i Twoim doświadczeniu
- Rozmowa techniczna z Klientem – spotkanie online (1h)
- Oferta
- Witamy w projekcie!
Hays Poland sp. z o.o. jest agencją zatrudnienia zarejestrowaną w rejestrze prowadzonym przez Marszałka Województwa Mazowieckiego pod numerem 361.
Praca WarszawaWarszawa - Oferty pracy w okolicznych lokalizacjach
