Software Engineer – Databricks

Dołączysz do niewielkiego, doświadczonego zespołu rozwijającego rozwiązania Data & Analytics na platformie Databricks. Będziesz uczestniczyć w tworzeniu i rozwoju produktów opartych o dane, dbając o jakość, wydajność oraz skalowalność budowanych rozwiązań. Projekt realizowany jest we współpracy z zespołem z USA, dlatego część dnia pracy powinna pokrywać się z amerykańską strefą czasową (US Central Time). Oczekiwane jest minimum 4 godziny dziennie wspólnej pracy z zespołem, preferowane jest większe pokrycie. Praca odbywa się w modelu 100% zdalnym.

Software Engineer – Databricks

Twój zakres obowiązków

• Tworzenie i rozwój rozwiązań Data & Analytics na platformie Databricks.
• Budowa oraz rozwój data products.
• Tworzenie i optymalizacja pipeline'ów danych.
• Diagnozowanie oraz optymalizacja wydajności zapytań i procesów przetwarzania danych.
• Współpraca z międzynarodowym zespołem projektowym w metodyce Agile.
• Rozwój oraz utrzymanie procesów CI/CD dla środowiska Databricks.

Nasze wymagania

• Komercyjne doświadczenie w realizacji projektów na platformie Databricks.
• Bardzo dobra znajomość PySpark oraz Spark SQL.
• Doświadczenie w pracy z Databricks Asset Bundles.
• Doświadczenie z integracją Databricks Workspace z Git.
• Praktyczna znajomość DLT lub Lakeflow Pipelines.
• Umiejętność diagnozowania i optymalizacji wydajności pipeline'ów oraz zapytań.
• Praktyczne doświadczenie z co najmniej jednym z podejść do modelowania danych: Medallion Architecture, Data Mesh, Operational Data Store (ODS), Star Schema, Snowflake Schema.
• Doświadczenie w pracy w metodykach Agile lub Scrum.
• Bardzo dobra znajomość języka angielskiego umożliwiająca swobodną komunikację z międzynarodowym zespołem.
• Doświadczenie w projektach obejmujących testy integracyjne.
• Znajomość Power BI.

Aplikuj