Data Engineer (Azure) Miejsce pracy: Warszawa Technologie, których używamy Wymagane Azure Python O projekcie Razem z naszym Partnerem poszukujemy osoby na stanowisko Data Engineer. Osoba dołączy do projektu Spyglass (Client Observability System) i wesprze rozwój kluczowej platformy obserwowalności – systemu zbierającego i przetwarzającego metryki, logi oraz traces, zapewniającego pełną widoczność środowiska IT i wspierającego szybkie decyzje operacyjne. Twój zakres obowiązków Transformacja, walidacja i przygotowanie danych zgodnie z wymaganiami architektonicznymi (data contracts, schematy, standardy jakości). Współpraca z architektem, zespołem ML oraz DevOps w zakresie optymalizacji pipeline’ów i infrastruktury. Udostępnianie przetworzonych danych (np. poprzez warstwę curated / gold, API, tabele Delta, feature store). Projektowanie i implementacja data pipelines wspierających funkcjonalność Custom Triage. Integracja i przetwarzanie danych w środowiskach analitycznych takich jak Azure Databricks. Budowa mechanizmów ingestii danych z systemów źródłowych (np. Azure Event Hubs). Zapewnienie skalowalności, niezawodności i monitoringu przepływów danych. Integracja zewnętrznych workloadów ML z istniejącą architekturą danych. Nasze wymagania Minimum 4-letnie doświadczenie komercyjne na stanowisku Data Engineer. Doświadczenie w pracy z rozwiązaniami streamingowymi, w szczególności Azure Event Hubs. Doświadczenie w projektowaniu i budowie skalowalnych pipeline’ów ETL/ELT. Bardzo dobra znajomość Azure Databricks. Biegła znajomość języka angielskiego. Bardzo dobra znajomość Python. Mile widziane Doświadczenie z obszaru Observability (monitoring, tracing, logging). Doświadczenie z Azure Functions. Znajomość modelowania danych. Tak organizujemy naszą pracę Tak pracujemy scrum To oferujemy Uczestnictwo w spotkaniach integracyjnych oraz meetupach technologicznych, umożliwiających dzielenie się wiedzą i doświadczeniem. Wsparcie dedykowanej osoby kontaktowej z Connectis, dostępnej w celu pomocy w sprawach związanych z projektem. Rozwój kariery i długofalową współpracę w firmie o ugruntowanej pozycji na rynku. 5000 PLN za polecenie znajomych do naszych projektów. Dostęp do najnowszych technologii i narzędzi pracy. Szybki i zdalny proces. Praca 100% zdalna. Dziękujemy za wszystkie zgłoszenia. Uprzejmie informujemy, że skontaktujemy się z wybranymi osobami. Connectis_ Connectis_ to ponad 20 lat doświadczenia w branży, 60.000 Specjalistów IT i tysiące projektów zrealizowanych w 14 krajach.