Szkolenie z Apache Airflow

InfoShare Academy to wiodąca akademia IT oferująca kompleksowe programy edukacyjne z nowych technologii dla firm. Od 2015 roku wspieramy organizacje w rozwoju zespołów technologicznych poprzez dedykowane kursy Machine Learning, DevOps, Data Engineering, Python, UX/UI Design, AWS i Kubernetes. Nasze szkolenia opierają się na praktycznych umiejętnościach i rzeczywistych przypadkach biznesowych. Współpracujemy z ponad 300 trenerami-praktykami z branży IT, dzięki czemu programy są dostosowane do aktualnych potrzeb rynku. Specjalizujemy się w reskillingu i upskillingu pracowników. Z nami zbudujesz efektywne zespoły wdrażające nowe technologie, które przyspieszą innowacje i wzmocnią konkurencyjność firmy na rynku. Sprawdź naszą ofertę szkoleń dedykowanych dla firm, które zostały stworzone z myślą o rozwijaniu kompetencji Twoich pracowników w obszarze IT.

Apache Airflow to zaawansowane narzędziem do planowania i zarządzania przepływem pracy w środowisku big data. Umożliwia tworzenie, monitorowanie i automatyzację procesów biznesowych opartych na cyklicznych i jednorazowych zadań. Airflow pozwala na definiowanie zależności między poszczególnymi zadaniami i automatyczne ich wykonywanie w odpowiedniej kolejności, co zwiększa efektywność i niezawodności procesów biznesowych.

• Dla Data Scientist i pracujących z dużą ilością danych.
• Dla programistów mających doświadczenie z językiem Python.
• Dla programistów zajmujących się infrastrukturą programistyczną.
• Dla DevOpsów

• Nauczysz się:
• Instalacji i konfiguracji narzędzia Apache AirFlow.
• Poznasz architekturę i komponenty wykorzystywane w AirFlow.
• Nauczysz się tworzyć grafy (DAGi)
• Zapoznasz się z przekazywaniem danych XCom, branchingiem i organizacją zadań

• Moduł 1 – Wprowadzenie

  • Rys historyczny (Airflow 1.0, Airflow 2.0)

  • Omówienie architektury (komponenty)

  • Podstawowe elementy: DAG, instancja, zadanie

• Moduł 2 – Tworzenie grafów (DAG-ów)

  • Operatory

  • Sensory

  • Hooki

  • Tworzenie połączeń

• Moduł 3 – Tworzenie grafów (DAG-ów)

  • XCom – przekazywanie danych

  • Gałęzie – branching

  • Organizacja zadań – subDAG oraz grupy

  • Tworzenie połączeń

• W ramach powyższych elementów dodatkowo będą realizowane:

  • Restart DAG-ów

  • Resetowanie konfiguracji

  • Opcja „catch”

  • Weryfikacja logów

• Opcjonalne moduły do realizacji:

  • Budowanie klastrów Airflow (konfiguracja elementów)

  • Wykorzystywanie wybranych elementów DAG-ów

16 h/2 dni

• Certyfikat ukończenia szkolenia
• Miesięczny dostęp do nagrania szkolenia (w przypadku formy online)
• Dostosowanie programu szkolenia do potrzeb klienta