Poszukujemy doświadczonego Inżyniera Danych, który dołączy do zespołu klienta w branży bankowości w Warszawie. Osoba zatrudniona na tym stanowisku będzie odpowiedzialna za projektowanie, rozwój oraz utrzymanie procesów przetwarzania danych, a także współpracę z Analitykami i zespołami biznesowymi w zakresie przygotowywania danych do analiz.
responsibilities :
Projektowanie i implementacja procesów przetwarzania danych
Rozwój oraz optymalizacja istniejących hurtowni danych
Tworzenie i utrzymywanie zapytań w SQL/PLSQL na bazach Oracle, PostgreSQL i BigQuery
Automatyzacja procesów w oparciu o skrypty Bash
Przygotowywanie specyfikacji technicznych i dokumentacji
requirements-expected :
Minimum 2 years of experience in Python or Scala programming
Commercial experience and exposure to BigData technologies, Spark is a must
Familiarity with Data Warehouse principles
Knowledge of good engineering practices, Big Data processing, including Design standards, Data Modelling techniques, coding, documentation, testing and implementation
Experience with various data formats: JSON, PARQUET, ORC, AVRO
Understanding database types and usage scenarios, e.g. Hive, Kudu, HBase, Iceberg, etc.
Advanced knowledge of SQL Experience in integrating data from multiple data sources
Knowledge of tools for building projects/applications, e.g. Maven
Advanced knowledge of Polish and good knowledge of English
