Wymagania

Technologie wymagane

Microsoft Azure

Python

Terraform

Git

PowerShell

Nasze wymagania

• Doświadczenie w pracy na stanowisku Data Engineera (minimum 5 lat).
• Bardzo dobra znajomość środowiska Microsoft Azure, w tym: Azure Databricks (Spark); Azure Data Factory (orkiestracja przepływów danych); Azure Data Storage / Delta Lake; Azure DevOps (CI/CD, zarządzanie uprawnieniami, automatyzacja).
• Umiejętność projektowania i wdrażania rozwiązań chmurowych dla zaawansowanych analiz i obliczeń.
• Gotowość do pełnienia także roli wspierającej testowanie rozwiązań.
• Umiejętność pracy zespołowej i komunikatywność.
• Doświadczenie z obszaru Machine Learning, MLOps i MLflow.
• Praktyczne doświadczenie z narzędziami i technologiami takimi jak: Python, Terraform, YAML, Parquet, Git, PowerShell, Azure CLI.
• Znajomość dobrych praktyk związanych z przetwarzaniem danych i optymalizacją pipeline’ów.

Twój zakres obowiązków

• Projektowanie, budowa i utrzymanie rozwiązań do przetwarzania danych w chmurze Microsoft Azure.
• Przetwarzanie danych w Azure Databricks z użyciem Apache Spark.
• Orkiestracja procesów danych w Azure Data Factory.
• Automatyzacja wdrożeń oraz konfiguracja środowisk z wykorzystaniem Azure DevOps (CI/CD pipelines), Terraform, YAML, Azure CLI.
• Wsparcie zespołów biznesowych poprzez testowanie rozwiązań i walidację danych.
• Praca z danymi w czasie rzeczywistym (real-time streaming).