Апач Спарк. Видеокурс. Комплексная обработка

Apache Spark. Kurs video. Przetwarzanie złożonych

Tytuł oryginału: Apache Spark. Kurs video. Przetwarzanie złożonych

Autor: Marek Czuma

Wydawca: Videopoint

Rok wydania: 2024

ISBN: 9788328915473

Format: Nieustalono

Czas trwania: 04:35:25

Cena okładkowa kursu video: 149.00 zł > cenę promocyjną znajdziesz na naszej aukcji!

WERSJA CYFROWA: VIDEO

Format: Online (Streaming)

Obierz kurs na złożone zbiory danych

Apache Spark to narzędzie do przetwarzania danych w trybie rozproszonym, które umożliwia budowanie zaawansowanych systemów operacji na złożonych zbiorach danych. Przetwarzanie rozproszone poprzez wykorzystanie wielu maszyn jednocześnie znacząco przyspiesza operacje na dużych ilościach danych. Spark jest niezwykle popularny, stosowany w licznych projektach, a jego rynkowy udział stale rośnie. Można go używać zarówno na platformach chmurowych, jak i on-premise.

W czasach, gdy Apache Spark debiutował, dominowała technologia MapReduce, która szybko została zastąpiona przez Sparka z powodu jego wielokrotnie lepszej wydajności. Dzięki przetwarzaniu danych w pamięci może on być nawet 100 razy szybszy! Do dużych firm korzystających z tego narzędzia należą: eBay, który używa go do targetowanych ofert, i Netflix, przetwarzający w trybie strumieniowym ponad 450 miliardów zdarzeń dziennie. Spark jest narzędziem niezastąpionym w świecie big data - obsługuje różne rodzaje przetwarzania danych, w tym przetwarzanie wsadowe, strumieniowe, interaktywne zapytania i uczenie maszynowe. Oferuje API dla języków takich jak Python, Scala, Java i R. Dodatkowo ma bogaty ekosystem narzędzi i bibliotek, między innymi Spark SQL, rozszerzających jego funkcjonalność i umożliwiających szerokie zastosowanie w różnorodnych projektach. To wszechstronne narzędzie rewolucjonizuje sposób, w jaki przetwarzamy i analizujemy dane w dzisiejszym świecie. Zdobądź praktyczne umiejętności i dowiedz się, jak korzystać z Apache Spark w branży big data.

W trakcie kursu:

• Nauczysz się podstawowej obsługi Apache Spark
• Dowiesz się, jak działa architektura Sparka
• Zrozumiesz, jak zbudować logiczną strukturę joba (aplikacji) sparkowego
• Poznasz struktury danych obecne w Sparku
• Odkryjesz wiele funkcji przydatnych przy operacjach na danych
• Nauczysz się budować własne funkcje do operacji na danych (UDF)
• Dowiesz się, jak łączyć zbiory danych
• Opanujesz oczyszczanie surowych danych przy użyciu Sparka
• Nauczysz się pracy na rzeczywistych zbiorach danych

W trakcie szkolenia Apache Spark. Kurs video. Przetwarzanie złożonych zbiorów danych nauczysz się budowy Apache Spark, poznając jego architekturę i zasady działania na wielu maszynach. Zdobędziesz ogólne rozeznanie w strukturach Apache Spark, a także zrozumiesz, jak działają akcje i transformacje. Będziesz pracować ze strukturami danych, jak RDD i dataframe - łączyć je za pomocą Unions i Joins, wykonywać agregacje i korzystać z pakietu functions. Odkryjesz, jak pracować z plikami w Sparku, a także przeprowadzisz praktyczne ćwiczenia na danych z Netflixa i pizzerii w USA. Dowiesz się, jak tworzyć własną logikę w Sparku, w tym jak definiować i stosować funkcje UDF i transform. Na koniec opanujesz dobre praktyki wydajnościowe i zrealizujesz mikroprojekt, obejmujący przegląd i czyszczenie danych, budowę wyszukiwarki i generatora statystyk. Kurs ukończysz na poziomie podstawowym. Zdobyte umiejętności pozwolą Ci pewnie poruszać się w środowisku Sparka, jak również - z pomocą doświadczonego zespołu - wziąć udział w pierwszym komercyjnym projekcie Sparkowym.

Oddaję w Twoje ręce kurs, który jest syntezą wielu lat mojej pracy z Apache Spark. Choć uwielbiam tę technologię, popełniłem przy niej więcej błędów, niż jest to przyzwoite. Tym kursem oszczędzę Ci znakomitej większości z nich! Mam głęboką nadzieję, że poza solidną zawartością merytoryczną, będziesz się po prostu świetnie bawić. Wierzę, że nie tylko dasz radę przejść go wzorowo, ale też że uruchomisz ogromne pokłady swojej kreatywności. Twoje możliwości są znacznie wyżej, niż sądzisz! Wierzę w Ciebie, więc laptop na biurko, kawa w dłoń i lecimy eksplorować fascynujący świat danych!

Co to jest kurs video?

Kursy video to najłatwiejszy, najszybszy, a przy tym bardzo efektywny sposób nauki. Online można nauczyć się niemal wszystkiego, od podstaw programowania, przez obróbkę zdjęć i filmów, po... jogę. Szkolenia dostępne na Videopoint składają się z kilkuminutowych lekcji przygotowanych przez ekspertów z różnych branż. Dzięki połączeniu obrazu oraz komentarza autora, który objaśnia czynności wykonywane na ekranie, nawet bardzo skomplikowane zagadnienia okazują sie proste i zrozumiałe.

Jak odtworzyć kursy?

Jeśli chcesz oglądać kursy na komputerze, wystarczy, że będziesz posiadał najnowszą wersję Twojej przeglądarki internetowej. Kursy są strumieniowane (odtwarzane online) w technologii HTML5. Video możesz również odtworzyć w wygodnej i darmowej aplikacji mobilnej Videopoint. Aplikację pobierzesz na urządzenia z systemami Android, iOS, HarmonyOS.

Jak otrzymam kurs?

• Na swoją skrzynkę mailową otrzymasz wiadomość, w której znajdziesz specjalny kod. Mail zostanie wysłany do Ciebie maksymalnie do godziny od momentu zatwierdzenia płatności.
• Jeśli posiadasz już swój kod, wystarczy, że wejdziesz na Videopoint i będziesz postępował zgodnie z instrukcją. Po kliknieciu "Zatwierdź" kurs będzie dostępny w Twojej bibliotece Videopoint.
• Kurs możesz odtworzyć online (streaming) na stronie lub w aplikacji mobilnej Videopoint.
• Twój kod jest ważny rok czasu od dnia zakupu.