Twoim zadaniem będzie budowa i rozwój hurtowni danych opartej na Snowflake, obejmująca integrację danych z różnych systemów, głównie baz Oracle. Quality Engineer będzie odpowiedzialny za projektowanie i realizację zadań związanych z zapewnieniem jakości, w tym sprawdzanie kompletności i poprawności pipelineów integrujących dane oraz monitorowanie, aby proces weryfikacji i naprawy danych przebiegał jak najefektywniej.
responsibilities :
Projektowanie i implementacja procesów monitorowania oraz poprawy jakości danych
Weryfikacja poprawności i kompletności procesów integracji danych (pipelineów)
Monitorowanie pipelineów integrujących dane i zapewnienie ich zgodności z wymaganiami jakościowymi
Tworzenie narzędzi i procesów automatyzujących detekcję oraz naprawę błędów danych
Analiza incydentów związanych z jakością danych oraz implementacja rozwiązań zapobiegawczych
Projektowanie i implementacja struktur oraz przepływów danych z uwzględnieniem najlepszych praktyk w zakresie jakości danych
Ścisła współpraca z członkami zespołu scrumowego, w tym Data Developerami, Data Analitykami i Architektami
Praca w zespole polskojęzycznym, z wymaganą komunikacją w języku angielskim z zagranicznymi zespołami
requirements-expected :
Praktyczne doświadczenie w tworzeniu hurtowni danych w chmurze
Minimum 3-letnie doświadczenie w obszarze Data Quality, obejmujące monitorowanie, kontrolę oraz poprawę jakości danych