Návrh Školení

Úvod

Přehled Spark Streaming Funkce a architektura

    Podporované zdroje dat Core API

Příprava prostředí

    Závislosti Spark a kontext streamování Připojení ke Kafkovi

Zpracování zpráv

    Analýza příchozích zpráv jako procesů JSON ETL Spuštění kontextu streamování

Provádění okna Stream Processing

    Interval snímku Konfigurace doručení kontrolního bodu Spuštění prostředí

Prototypování kódu zpracování

    Připojení k tématu Kafka Načítání JSON ze zdroje dat pomocí variací Paw a dalšího zpracování

Streamování kódu

    Proměnné řízení úlohy Definování hodnot, které odpovídají funkcím a podmínkám

Získávání datového toku

    Počítadla Kafkova výstupu (shodná a neshodná)

Odstraňování problémů

Shrnutí a závěr

Požadavky

  • Zkušenosti s Python a Apache Kafka
  • Znalost platforem stream-processingu

Publikum

  • datoví inženýři
  • Datoví vědci
  • Programátoři
  7 hodiny
 

Počet účastníků


Začátek

Konec


Dates are subject to availability and take place between 09:30 and 16:30.
Open Training Courses require 5+ participants.

Reference (4)

Související kurzy

Související kategorie