Informacje o stanowisku

technologies-expected :

• Microsoft Azure
• Apache Spark
• Python
• Terraform
• YAML
• Parquet
• Git
• PowerShell
• Azure CLI

• Poszukujemy doświadczonego Data Engineera, który zasili zespół w projekcie opartym na platformie Microsoft Azure. Zespół pracuje nad zaawansowanym systemem przetwarzania i analizy danych klientów, z wykorzystaniem najnowszych technologii, takich jak Azure Databricks, Apache Spark czy Machine Learning.

• Projektowanie, budowa i utrzymanie rozwiązań do przetwarzania danych w chmurze Microsoft Azure
• Przetwarzanie danych z użyciem Apache Spark w Azure Databricks
• Tworzenie i zarządzanie pipeline’ami danych w Azure Data Factory
• Automatyzacja wdrożeń z wykorzystaniem Azure DevOps, Terraform, YAML i Azure CLI
• Testowanie rozwiązań i walidacja danych we współpracy z zespołami biznesowymi
• Praca z danymi w czasie rzeczywistym (real-time streaming)

• Minimum 5 lat doświadczenia na stanowisku Data Engineer
• Bardzo dobra znajomość środowiska Microsoft Azure, w szczególności:
• Azure Databricks (Apache Spark)
• Azure Data Factory
• Azure Data Storage / Delta Lake
• Azure DevOps (CI/CD, zarządzanie dostępem, automatyzacja)
• Umiejętność projektowania i wdrażania rozwiązań chmurowych dla zaawansowanych analiz
• Znajomość i doświadczenie w obszarze Machine Learning, MLOps, MLflow
• Znajomość technologii i narzędzi: Python, Terraform, YAML, Parquet, Git, PowerShell, Azure CLI
• Zorientowanie na jakość kodu i wydajność pipeline’ów
• Umiejętność pracy zespołowej oraz dobre zdolności komunikacyjne

Wrocław - Oferty pracy w okolicznych lokalizacjach