Senior Data Engineer (Azure, Databricks , Python) k/m/*
Miejsce pracy: Warszawa
Technologies we use
Expected
- Python
- Apache Spark
- Databricks
- Delta lake
- Pandas
- Polars
- Parquet
- Microsoft Azure
Optional
- Redis
- FastAPI
- Docker
- Kubernetes
About the project
Join a global technology team delivering innovative, AI-driven solutions supporting tax services for one of the world’s leading professional services organizations. You will work on large-scale data platforms and modern cloud-based architectures, collaborating with cross-functional teams across engineering, tax, and business domains.
Your responsibilities
- Define and enforce best practices and coding standards across the project
- Conduct thorough code reviews to ensure adherence to established guidelines and maintain high code quality
- Working both independently and in close collaboration with others in the team
- Communicating clear instructions to team members and helping manage the flow of day-to-day operations
- Communicating with the client regularly
- Design, develop, and maintain robust and scalable Spark applications
- Write clean, maintainable, and efficient code following best practices and coding standards
- Optimize code for performance and scalability, ensuring efficient data handling
- Work closely with cross-functional teams to deliver high-quality software solutions
- Identify and resolve technical issues, ensuring the reliability and performance of applications
- Create and maintain comprehensive documentation for code, processes, and workflows
Our requirements
- 5+ years of hands-on experience in software development
- Extensive experience working with Apache Spark, including platforms such as Databricks and/or Azure Synapse/Fabric
- Proficient in Python, with strong skills in data manipulation using Pandas/Polars and similar
- Solid understanding of columnar data storage formats, particularly Parquet, with practical experience using Delta Tables
- Proven expertise in data processing, analysis, and transformation workflows
- Strong analytical and problem-solving abilities with a detail-oriented mindset
- Practical and pragmatic approach to balancing standardized processes with flexibility to meet project goals effectively
- Excellent organizational skills with the ability to self-manage, prioritize tasks, structure workload, and meet tight deadlines
- Solid understanding of microservices architecture and its implementation in scalable systems
Optional
- Experience working with Azure Cloud services (or other major cloud platforms), including a range of SaaS offerings such as Service Bus, Data Lake, Blob Storage, Redis, and more
- Familiarity with FastAPI
- Expertise in containerization and orchestration tools such as Docker and Kubernetes
This is how we organize our work
SQUARE ONE RESOURCES sp. z o.o.
At Square One Poland we link IT experts with the business. With over 25 years of experience, we specialize in recruitment processes on a global scale. Despite years of experience, we still have a startup DNA and this is our advantage. Our offices are located in London and Warsaw, however, we can reach clients from all over the world, from start-ups to big worldwide corporations.
Klikając w przycisk „Aplikuj” lub w inny sposób wysyłając zgłoszenie rekrutacyjne, zgadzasz się na przetwarzanie Twoich danych osobowych przez SQUARE ONE RESOURCES sp. z o.o. z siedzibą w: Puławska 2, 02-566 Warszawa (Pracodawca), jako administratora danych osobowych w celu przeprowadzenia rekrutacji na stanowisko wskazane w ogłoszeniu.
Twoje dane osobowe będą przetwarzane w oparciu o następujące podstawy prawne: (a) aby podjąć działania na Twoje żądanie przed zawarciem umowy (np. informacje o oczekiwanym wynagrodzeniu i dostępności do rozpoczęcia pracy); (b) w oparciu o nasz prawnie uzasadniony interes (np. imię, nazwisko, data urodzenia, dane kontaktowe, wykształcenie, kwalifikacje zawodowe, przebieg dotychczasowego zatrudnienia); c) w oparciu o Twoją zgodę, która wyrażona jest poprzez przeslanie dokumentów aplikacyjnych zawierających takie informacje jak np. wizerunek czy zainteresowania.
Podanie wszystkich danych osobowych, o których mowa powyżej jest dobrowolne, natomiast dane wymienione w lit. a) i b) są niezbędne do wzięcia udziału w rekrutacji. Niepodanie danych skutkuje brakiem możliwości rozpatrzenia kandydatury. Podanie pozostałych danych jest dobrowolne, ale może pomóc w sprawnym przeprowadzeniu procesu rekrutacji.
Masz prawo żądać dostępu do Twoich danych (w tym uzyskania ich kopii), sprostowania danych, ich usunięcia, ograniczenia przetwarzania, przeniesienia, jak również wniesienia sprzeciwu wobec ich przetwarzania. Masz także prawo wniesienia skargi do Prezesa Urzędu Ochrony Danych Osobowych.
Twoje dane osobowe mogą zostać przekazane dostawcom usługi publikacji ogłoszeń o pracę, dostawcom systemów do zarządzania rekrutacjami, dostawcom usług IT (hosting), dostawcom systemów informatycznych.
Podane przez Ciebie dane osobowe nie będą wykorzystywane w celu profilowania albo podejmowania decyzji w sposób zautomatyzowany.
Twoje dane osobowe będą przetwarzane przez okres maks. 1 roku od zakończenia publikacji ogłoszenia, chyba, że wyraziłeś odrębną zgodę na wykorzystanie Twoich danych osobowych w przyszłych rekrutacjach.
W celu realizacji praw lub w przypadku jakichkolwiek pytań związanych z przetwarzaniem Twoich danych osobowych skontaktuj się z nami pod adresem: deliveryteam@squareoneresources.com.
