Getting started with Delta Lake (again)

Spotykamy się w Sages / Stacja IT na Nowogrodzkiej (tym razem jednak sala na parterze). Daj znać, gdybyś potrzebował(a) pomocy w dotarciu na miejsce.

Kolejny meetup z Delta Lake (https://delta.io/). Tym razem z większym bagażem doświadczeń po ostatnim spotkaniu oraz moim własnym rozpoznaniem tematu (https://delta.japila.pl/).

Już wiem, co i jak. Pozostaje po prostu tego poużywać i jeszcze pobadać w różnych konfiguracjach.

Celem spotkania jest napisanie kilku aplikacji z Apache Spark, które korzystają z Delta Lake. Będzie programowanie aplikacji sparkowych w Spark SQL i Spark Structured Streaming z użyciem języka Scala.

Korzystamy z IntelliJ IDEA Community Edition (z wtyczką do Scali), sbt, oraz Apache Spark 2.4.4. Proszę o ich zainstalowanie przed spotkaniem (daj znać, gdybyś potrzebował(a) pomocy).

Zakładamy podstawową wiedzę dotyczącą programowania w Scali oraz korzystania z sbt. Jeśli którekolwiek z podanych jest Ci obce, a chciał(a)byś to zmienić, to meetup w sam raz dla Ciebie!

W razie pytań i wątpliwości (np. czy meetup jest dla Ciebie), skorzystaj z możliwości komentowania poniżej.

Official language: Polish + Scala