Senior Data Engineer (Python)
Miejsce pracy: Kraków
Technologies we use
Optional
- Google Cloud Platform
- Pub/Sub
- Big Query
- Kafka
- Juniper
- Apache NiFi
- Hive
- Impala
- Cloudera
- CI/CD
About the project
Were seeking a skilled Senior Big Data Engineer to join our Team. The ideal candidate will be responsible for designing, implementing and maintaining scalable data pipelines and solutions on on-prem / migration / cloud projects for large scale data processing and analytics.
*We are looking for Poland based candidate. The job is hybrid - 2 days per week in Krakow.
Your responsibilities
- Design, develop and maintain robust data pipelines using Python, Spark, Hadoop, SQL for batch and streaming data processing
- Collaborate with cross-functional teams to understand data requirements and design efficient solutions that meet business needs
- Optimize Spark jobs and data processing workflows for performance, scalability and reliability
- Ensure data quality, integrity and security throughout the data lifecycle
- Troubleshoot and resolve data pipeline issues in a timely manner to minimize downtime and impact on business operations
- Stay updated on industry best practices, emerging technologies, and trends in big data processing and analytics
- Document, design specifications, deployment procedures and operational guidelines for data pipelines and systems
- Provide technical guidance and mentorship for new joiners
Our requirements
- Min. 5 years of experience as a Data Engineer/Big Data Engineer
- University degree in computer science, mathematics, natural sciences, or similar field and relevant working experience
- Excellent SQL skills, including advanced concepts
- Very good programming skills in Python
- Experience in Spark and Hadoop
- Experience in OOP
- Experience using agile frameworks like Scrum
- Interest in financial services and markets
- Fluent English communication and presentation skills
- Sense of humor and positive attitude
Optional
- Experience or knowledge with GCP
This is how we organize our work
This is how we work
- at the clients site
- you have influence on the choice of tools and technologies
- you have influence on the technological solutions applied
- you have influence on the product
Development opportunities we offer
- industry-specific e-learning platforms
- intracompany training
- mentoring
- substantive support from technological leaders
What we offer
- Employment contract and/or Business to Business - whichever you prefer
- Possibility to work remotely
- Speaking English on daily basis, mainly in contact with foreign stakeholders and peers
- Multiple employee benefits packages (MyBenefit Cafeteria, private medical care, life-insurance)
- Access to 3.000+ Business Courses Platform (Udemy)
- Access to required IT equipment
- Paid Referral Program
- Participation in charity events e.g. Szlachetna Paczka
- Ongoing learning opportunities to help you acquire new skills or deepen existing expertise
- Being part of the core squad focused on the growth of the Polish business unit
- A flat, non-hierarchical structure that will enable you to work with senior partners and directly with clients
- A work culture focused on innovation and creating lasting value for our clients and employees
Benefits
- sharing the costs of sports activities
- private medical care
- life insurance
- remote work opportunities
- integration events
Recruitment stages
- Screening call with the Recruiter
- Technical interview: first stage
- Client Interview
- Feedback/Offer
Capco
Joining Capco means joining an organisation that is committed to an inclusive working environment where you’re encouraged to #BeYourselfAtWork. We celebrate individuality and recognize that diversity and inclusion, in all forms, is critical to success. It’s important to us that we recruit and develop as diverse a range of talent as we can and we believe that everyone brings something different to the table – so we’d love to know what makes you different. Such differences may mean we need to make changes to our process to allow you the best possible platform to succeed, and we are happy to cater to any reasonable adjustments you may require. You will find the section to let us know of these at the bottom of your application form or you can mention it directly to your recruiter at any stage and they will be happy to help.
Capco Poland is a global technology and management consultancy specializing in driving digital transformation across the financial services industry. We are passionate about helping our clients succeed in an ever-changing industry.
We also are experts focused on development, automation, innovation, and long-term projects in financial services. In Capco, you can code, write, create, and live at your maximum capabilities without getting dull, tired, or foggy.
Klikając w przycisk „Aplikuj” lub w inny sposób wysyłając zgłoszenie rekrutacyjne, zgadzasz się na przetwarzanie Twoich danych osobowych przez CAPCO POLAND SP Z O O z siedzibą w: Grzybowska 78, 00-844 Warszawa (Pracodawca), jako administratora danych osobowych w celu przeprowadzenia rekrutacji na stanowisko wskazane w ogłoszeniu.
Twoje dane osobowe będą przetwarzane w oparciu o następujące podstawy prawne: (a) aby podjąć działania na Twoje żądanie przed zawarciem umowy (np. informacje o oczekiwanym wynagrodzeniu i dostępności do rozpoczęcia pracy); (b) w oparciu o nasz prawnie uzasadniony interes (np. imię, nazwisko, data urodzenia, dane kontaktowe, wykształcenie, kwalifikacje zawodowe, przebieg dotychczasowego zatrudnienia); c) w oparciu o Twoją zgodę, która wyrażona jest poprzez przeslanie dokumentów aplikacyjnych zawierających takie informacje jak np. wizerunek czy zainteresowania.
Podanie wszystkich danych osobowych, o których mowa powyżej jest dobrowolne, natomiast dane wymienione w lit. a) i b) są niezbędne do wzięcia udziału w rekrutacji. Niepodanie danych skutkuje brakiem możliwości rozpatrzenia kandydatury. Podanie pozostałych danych jest dobrowolne, ale może pomóc w sprawnym przeprowadzeniu procesu rekrutacji.
Masz prawo żądać dostępu do Twoich danych (w tym uzyskania ich kopii), sprostowania danych, ich usunięcia, ograniczenia przetwarzania, przeniesienia, jak również wniesienia sprzeciwu wobec ich przetwarzania. Masz także prawo wniesienia skargi do Prezesa Urzędu Ochrony Danych Osobowych.
Twoje dane osobowe mogą zostać przekazane dostawcom usługi publikacji ogłoszeń o pracę, dostawcom systemów do zarządzania rekrutacjami, dostawcom usług IT (hosting), dostawcom systemów informatycznych.
Podane przez Ciebie dane osobowe nie będą wykorzystywane w celu profilowania albo podejmowania decyzji w sposób zautomatyzowany.
Twoje dane osobowe będą przetwarzane przez okres maks. 1 roku od zakończenia publikacji ogłoszenia, chyba, że wyraziłeś odrębną zgodę na wykorzystanie Twoich danych osobowych w przyszłych rekrutacjach.
W celu realizacji praw lub w przypadku jakichkolwiek pytań związanych z przetwarzaniem Twoich danych osobowych skontaktuj się z nami pod adresem: enquiries@capco.com.
