Расход воздуха. Видеокурс. Управление и мониторинг

Airflow. Kurs video. Zarządzanie i monitorowanie

Tytuł oryginału: Airflow. Kurs video. Zarządzanie i monitorowanie

Autor: Piotr Chudzik

Wydawca: Videopoint

Rok wydania: 2023

ISBN: 9788328904002

Format: Nieustalono

Czas trwania: 04:48:53

Cena okładkowa kursu video: 169.00 zł > cenę promocyjną znajdziesz na naszej aukcji!

WERSJA CYFROWA: VIDEO

Format: Online (Streaming)

Obierz kurs na... operowanie przepływami danych

Jeśli pracujesz lub będziesz pracować na danych, prędzej czy później zetkniesz się z akronimem ETL. ETL, czyli wyodrębnianie, przekształcanie i ładowanie, jest procesem powszechnie stosowanym przez organizacje gromadzące i łączące dane z wielu źródeł w celu wspomagania zadań wykrywania, raportowania, analizowania i podejmowania decyzji. Apache Airflow pozwala na tworzenie wysokiej jakości procesów ETL i wprowadzenie optymalizacji niezależnie od infrastruktury końcowej (na przykład relacyjna baza danych, pliki json itp.). Korzystający z języka Python Airflow służy do harmonogramowania wielu zadań i przepływów pracy w projektach i organizacjach. Dlatego też będzie idealny dla osób, które są obeznane z Pythonem, muszą pracować na zbiorach danych i monitorować ich przepływ, ale nie chcą budować własnego narzędzia ETL.

Jako rozwiązanie typu open source Apache Airflow jest coraz częściej wymagany na stanowiskach typu data engineer czy data analysis. Nic w tym dziwnego, skoro automatyzacja to jeden z najważniejszych procesów dzisiejszego IT, a główną zaletą Airflow jest właśnie ułatwienie automatyzowania procesów. Podstawowym sposobem definiowania zadań są tu acykliczne grafy skierowane (DAG), które określają relacje między operatorami, porządek i zależności. Airflow DAG może zawierać wiele gałęzi i to Ty będziesz decydować, które z nich mają być przestrzegane, a które będą pomijalne w trakcie wykonywania przepływu pracy.

Nasz kurs obejmuje podstawowe tematy powiązane z orkiestracją zadań poprzez Apache Airflow. W jego trakcie dowiesz się, jak stworzyć w pełni proces za pomocą Airflow: skonfigurować zmienne globalne i połączenia, stworzyć DAG i jego scheduler czy konfigurację. Poznasz też najważniejsze elementy Airflow, takie jak Operator czy Sensor.

Co Cię czeka podczas naszego profesjonalnego szkolenia

W trakcie kursu między innymi:

• Zobaczysz, jak poprawnie skonfigurować środowisko pracy
• Dowiesz się, czym jest DAG i na czym polega orkiestracja zadań
• Stworzysz operatory typu Bash, Empty, Python, SimpleHTTP i PostgreSQL
• Ustawisz scheduler i operację catch, a także domyślne argumenty DAG-a
• Skonfigurujesz sensory
• Uruchomisz polecenia SQL na bazie danych PostgreSQL
• Skonfigurujesz zmienne webservera za pomocą obiektów Param, Variable, Config
• Skorzystasz z szablonów Jinja do przekazywania parametrów
• Będziesz zarządzać zadaniami za pomocą grupowania, branchowania i tworzenia triggerów

Airflow. Kurs video. Zarządzanie i monitorowanie przepływu danych zakończysz na poziomie podstawowym. Zdobyta wiedza pozwoli Ci samodzielnie przygotować proste orkiestratory zadań oparte na języku SQL i Python. Dodatkowo będziesz w stanie zabezpieczyć procesy za pomocą sensorów i wprowadzić zmienne globalne czy konfiguracje za pomocą obiektów webservera.

Na zdobycie szczytu zawsze składa się postawienie tysięcy małych kroków. Aby zrozumieć rzeczy skomplikowane i złożone, należy najpierw przyswoić wiedzę w podstawowym zakresie. Materiał zawarty w powyższym kursie jest pierwszym krokiem dla osób, które widzą swoją przyszłość w branży IT.

Co to jest kurs video?

Kursy video to najłatwiejszy, najszybszy, a przy tym bardzo efektywny sposób nauki. Online można nauczyć się niemal wszystkiego, od podstaw programowania, przez obróbkę zdjęć i filmów, po... jogę. Szkolenia dostępne na Videopoint składają się z kilkuminutowych lekcji przygotowanych przez ekspertów z różnych branż. Dzięki połączeniu obrazu oraz komentarza autora, który objaśnia czynności wykonywane na ekranie, nawet bardzo skomplikowane zagadnienia okazują sie proste i zrozumiałe.

Jak odtworzyć kursy?

Jeśli chcesz oglądać kursy na komputerze, wystarczy, że będziesz posiadał najnowszą wersję Twojej przeglądarki internetowej. Kursy są strumieniowane (odtwarzane online) w technologii HTML5. Video możesz również odtworzyć w wygodnej i darmowej aplikacji mobilnej Videopoint. Aplikację pobierzesz na urządzenia z systemami Android, iOS, HarmonyOS.

Jak otrzymam kurs?

• Na swoją skrzynkę mailową otrzymasz wiadomość, w której znajdziesz specjalny kod. Mail zostanie wysłany do Ciebie maksymalnie do godziny od momentu zatwierdzenia płatności.
• Jeśli posiadasz już swój kod, wystarczy, że wejdziesz na Videopoint i będziesz postępował zgodnie z instrukcją. Po kliknieciu "Zatwierdź" kurs będzie dostępny w Twojej bibliotece Videopoint.
• Kurs możesz odtworzyć online (streaming) na stronie lub w aplikacji mobilnej Videopoint.
• Twój kod jest ważny rok czasu od dnia zakupu.