129. spotkanie Data Community Krakow
18:00 – 18:15 Rozpoczęcie spotkania, sprawy organizacyjne
18:10 – 19:10 Wdrożenie Hurtowni Danych w MS Fabric: Raport z pola bitwy - Adrian Chodkowski
19:10 – 19:40 Networking
19:50 – 20:20 Przechowywanie konfiguracji w Databricksie - tabele, pliki...? - Szymon Karpęcki
20:20 – 20:30 Zakończenie spotkania
Zapraszamy na 129. spotkanie krakowskiej grupy Data Community.
KIEDY
26 marzec (środa) - 18:00
GDZIE
Wyższa Szkoła Ekonomii i Informatyki w Krakowie - sala Meksyk
ABSTRAKTY
Wdrożenie Hurtowni Danych w MS Fabric: Raport z pola bitwy - MS Fabric, nowoczesne narzędzie od firmy Microsoft, oferuje szereg usług, takich jak Lakehouse, Warehouse i Pipelines (i wiele innych), oraz możliwości implementacji różnych wzorców architektonicznych. Ta różnorodność stawia przed organizacjami pytania o optymalny wybór usług, ich konfigurację oraz kluczowe aspekty wdrażania projektów danych. Podczas sesji przedstawię doświadczenia zdobyte podczas wdrożenia Hurtowni Danych na platformie MS Fabric. Skoncentruję się na aspektach organizacyjnych, deweloperskich, kosztowych, zarządzania danymi oraz bezpieczeństwa, dzieląc się praktycznymi wskazówkami i rozwiązaniami. Uczestnicy dowiedzą się, jak unikać typowych błędów implementacyjnych i efektywnie zarządzać zasobami, co pozwoli im zaoszczędzić czas i pieniądze oraz z sukcesem wdrożyć hurtownie danych w swojej organizacji.
Przechowywanie konfiguracji w Databricksie - tabele, pliki...? - Wspólny kod wywoływany dla różnych parametrów to typowy pipeline w świecie danych. Gdzie i w jaki sposób przechowywać te parametry aby było łatwo, lekko i przyjemnie? Na to pytanie postaramy się odpowiedzieć w trakcie tej krótkiej sesji. Przedstawione zostaną klasyczne, dobrze znane metody, jak i nietypowa hybryda łącząca co najlepsze z różnych światów.
BIO
Adrian Chodkowski - Microsoft Data Platform MVP, ekspert w dziedzinie platformy Azure, inżynierii danych i Business Intelligence, pracuje jako konsultant i architekt z całą gamą narzędzi rozwiązań Microsoft, zarówno lokalnych, jak i w chmurze.
Szymon Karpęcki - Data Platform Engineer - obecnie pracujący w Databricksach rozkminiacz tematów wszelakich. Doświadczenie z klasycznie rozumianego software engineeringu stara się wdrażać w codzienną pracę z danymi. Poza tym zawodowo zainteresowany budowaniem platform end-to-end - od sieci po pipeline. Prywatnie trener (były zawodnik) futbolu amerykańskiego.
