Senior Data Engineer
Miejsce pracy: Warszawa
Technologies we use
Expected
- Google Cloud Platform
- Big Query
- Big Table
- Dataflow
- Kubernetes
- Git
Optional
- Python
- Scala
- Java
- Google Cloud Monitoring
About the project
For one of our clients in the pipeline management industry, we are seeking experienced Senior Data Engineers / Infrastructure Programmers.
Suitable candidates should have experience in pipeline transformation projects and a technical domain knowledge in data transformation and data migration acquired through years of practice. The programming language is secondary in this regard.
Your responsibilities
Suitable candidates should have experience in pipeline transformation projects and a technical domain knowledge in data transformation and data migration acquired through years of practice.
Our requirements
- a. Programming Experience:
- Ability to write data transformation pipelines (ETL pipelines) in any of the following languages: Python, Scala, or Java (or preferably a mix)
- Knowledge of DataFrame structures and standard binary file formats (such as Parquet)
- Knowledge of common data lake patterns
- b. Infrastructure Experience:
- Experience with GCP data and pipeline components such as Big Query, Big Table, Dataflow, Kubernetes
- d. DevOPS Experience:
- Experience with developing in GCP’s CI/CD environment
- Experience with Git
- Experience with monitoring one’s own pipelines and components through services such as Google Cloud Monitoring or similar 1.
This is how we organize our work
Development opportunities we offer
- technical knowledge exchange within the company
What we offer
- Yearly bonus system
- Training budget
- Medical care
- Sport card
- Possibility of remote or hybrid work
- Opportunity to work with high-class developers, learn, and share knowledge within and between teams
Benefits
- remote work opportunities
SQUARE ONE RESOURCES sp. z o.o.
At Square One Poland we link IT experts with the business. With over 25 years of experience, we specialize in recruitment processes on a global scale. Despite years of experience, we still have a startup DNA and this is our advantage. Our offices are located in London and Warsaw, however, we can reach clients from all over the world, from start-ups to big worldwide corporations.
Klikając w przycisk „Aplikuj” lub w inny sposób wysyłając zgłoszenie rekrutacyjne, zgadzasz się na przetwarzanie Twoich danych osobowych przez SQUARE ONE RESOURCES sp. z o.o. z siedzibą w: Puławska 2, 02-566 Warszawa (Pracodawca), jako administratora danych osobowych w celu przeprowadzenia rekrutacji na stanowisko wskazane w ogłoszeniu.
Twoje dane osobowe będą przetwarzane w oparciu o następujące podstawy prawne: (a) aby podjąć działania na Twoje żądanie przed zawarciem umowy (np. informacje o oczekiwanym wynagrodzeniu i dostępności do rozpoczęcia pracy); (b) w oparciu o nasz prawnie uzasadniony interes (np. imię, nazwisko, data urodzenia, dane kontaktowe, wykształcenie, kwalifikacje zawodowe, przebieg dotychczasowego zatrudnienia); c) w oparciu o Twoją zgodę, która wyrażona jest poprzez przeslanie dokumentów aplikacyjnych zawierających takie informacje jak np. wizerunek czy zainteresowania.
Podanie wszystkich danych osobowych, o których mowa powyżej jest dobrowolne, natomiast dane wymienione w lit. a) i b) są niezbędne do wzięcia udziału w rekrutacji. Niepodanie danych skutkuje brakiem możliwości rozpatrzenia kandydatury. Podanie pozostałych danych jest dobrowolne, ale może pomóc w sprawnym przeprowadzeniu procesu rekrutacji.
Masz prawo żądać dostępu do Twoich danych (w tym uzyskania ich kopii), sprostowania danych, ich usunięcia, ograniczenia przetwarzania, przeniesienia, jak również wniesienia sprzeciwu wobec ich przetwarzania. Masz także prawo wniesienia skargi do Prezesa Urzędu Ochrony Danych Osobowych.
Twoje dane osobowe mogą zostać przekazane dostawcom usługi publikacji ogłoszeń o pracę, dostawcom systemów do zarządzania rekrutacjami, dostawcom usług IT (hosting), dostawcom systemów informatycznych.
Podane przez Ciebie dane osobowe nie będą wykorzystywane w celu profilowania albo podejmowania decyzji w sposób zautomatyzowany.
Twoje dane osobowe będą przetwarzane przez okres maks. 1 roku od zakończenia publikacji ogłoszenia, chyba, że wyraziłeś odrębną zgodę na wykorzystanie Twoich danych osobowych w przyszłych rekrutacjach.
W celu realizacji praw lub w przypadku jakichkolwiek pytań związanych z przetwarzaniem Twoich danych osobowych skontaktuj się z nami pod adresem: plinfo@squareoneresources.com.
