Wymagania

Technologie wymagane

Python

Spark

SQL

Kimball

System operacyjny

Windows

Linux

Nasze wymagania

• dobra znajomość: SQL, Spark, Python,
• modelowanie danych (star schema, Kimball),
• min. 3 lata doświadczenia na stanowisku inżyniera danych lub podobne,
• doświadczenie w developmencie rozwiązań typu Lakehouse,
• doświadczenie w pracy z formatami danych takimi jak: parquet, delta,
• wysoka samodzielność,
• umiejętności analityczne i dotyczące pracy z danymi,
• język angielski na poziomie umożliwiającym swobodną komunikację (min. B2),
• poczucie humoru :)

Mile widziane

• znajomość technologii: Databricks, Airflow, DBT, Terraform,
• doświadczenie w pracy w infrastrukturze AWS,
• doświadczenie w pracy w obszarze finansowym.

Twój zakres obowiązków

• projektowanie i modelowanie nowych struktur danych - data lakehouse,
• budowa i utrzymywanie systemów danych,
• tworzenie ETL/ELT - batch i streaming,
• współpraca z developerami - specyfikowanie jakie dane są potrzebne i jak powinny być wytwarzane,
• współpraca z biznesem - zbieranie wymagań odnośnie budowy i zawartości data lakehouse.