Logo Crossweb
To wydarzenie już się odbyło. Sprawdź nadchodzące wydarzenia

GFT piąTech #4: Spark 3 - co nowego?

Wydarzenie:
GFT piąTech #4: Spark 3 - co nowego?
Typ wydarzenia:
Spotkanie
Kategoria:
IT
Tematyka:
Data:
17.04.2020 (piątek)
Godzina:
16:30
Język:
polski
Wstęp:
Bezpłatne
Miasto:
Miejsce:
Online Event
Adres:
On your computer
Rejestracja:
Strona www:
Prelegenci:
Opis:

Apache Spark to potężna i uniwersalna platforma do przetwarzania dużych danych. Na horyzoncie jest już jej najnowsza, trzecia wersja. O nowościach, ulepszeniach i zmianach w Spark 3 porozmawiamy z Kamilem Owczarkiem, szefem praktyki Big Data w GFT Poland!


Optymalizacje

- Nawet 17-krotnie szybszy od Sparka 2.4.5 ‼️

- DataSource V2 i plugowalne Data Source’y

- Adaptive Query Execution

- Dynamic Partition Pruning

- Ulepszona integracja Kubernetesa jako Resource Managera


Nowości

- Spark – Cypher (Nowe API do graph processingu oparte o Datasety i Cypher Query Language)

- Native Binary Format (przetwarzanie obrazów, wideo, dźwięku etc.)

- GPU jako resource, czyli Deep Learning na Sparku (zewnętrzne biblioteki - do jakiego stopnia jest to możliwe i wydajne?)

- Kwestia Continuous Processingu


Na rozmowę zaprasza Marcin Kowalski, Head of Development w GFT Poland.

Widzisz błąd w wydarzeniu? Wydarzenie jest nieaktualne? Poinformuj nas o tym!

Podobne wydarzenia