Building Data Pipelines with Apache Kafka Počítačový Kurz
Apache Kafka je distribuovaná streamovací platforma. Je to de facto standard pro budování datových kanálů a řeší mnoho různých případů použití kolem zpracování dat: lze jej použít jako frontu zpráv, distribuovaný protokol, stream procesor atd.
Začneme nějakou teorií za datovými kanály obecně, pak budeme pokračovat základními koncepty Kafky. Objevíme také důležité součásti, jako jsou Kafka Streams a Kafka Connect.
Návrh Školení
- Základy datových toků: nahrávání, úložiště, zpracování
- Základy Kafka: témata, partitce, brokeri, replikace atd.
- API pro producenty a spotřebitele
- Kafka Streams jako vrstva pro zpracování
- Kafka Connect pro integraci s externími systémy
- Dobré praktiky a optimalizace Kafka
Požadavky
Preferovány jsou základní znalosti Java 8 nebo Scala. Pokud chcete příklady spouštět lokálně, nainstalujte si Docker a Docker Compose.
Open Training Courses require 5+ participants.
Building Data Pipelines with Apache Kafka Počítačový Kurz - Booking
Building Data Pipelines with Apache Kafka Počítačový Kurz - Enquiry
Building Data Pipelines with Apache Kafka - Consultancy Enquiry
Consultancy Enquiry
Reference (5)
Zapojení s trenérem Řada relevantních cvičení a laboratorních praktických zkoušek
Salim - SICPA SA
Kurz - Administration of Kafka Message Queue
Machine Translated
interaktivní přístup učitele, ne přímočarý příběh, ale jednání na dotazy z publika.
Rens - Canon Medical Informatics Europe B.V.
Kurz - Administration of Kafka Topic
Machine Translated
Laboratoře a diapozitivy se dobře kombinují s Jorgeho znalostmi a láskou ke Kafkovi.
Willem - BMW SA
Kurz - Apache Kafka for Developers
Machine Translated
very interactive...
Richard Langford
Kurz - SMACK Stack for Data Science
Sufficient hands on, trainer is knowledgable
Chris Tan
Kurz - A Practical Introduction to Stream Processing
Upcoming Courses
Související kurzy
Apache Kafka Connect
7 hodinyToto živé školení vedené instruktorem v České republice (online nebo na místě) je zaměřeno na vývojáře, kteří chtějí integrovat Apache Kafka se stávajícími databázemi a aplikacemi pro zpracování, analýzu atd.
Na konci tohoto školení budou účastníci schopni:
- Použít Kafka Connect k načtení většiny dat ze systému databáze do témat Kafka.
- Načíst log data generovaná aplikací serverů do témat Kafka.
- Zpřístupnit Make jakékoli sbírané data pro streamování a zpracování.
- Exportovat data ze systému témat Kafka do sekundárních systémů pro úložiště a analýzu.
Building Kafka Solutions with Confluent
14 hodinyToto živé školení vedené instruktorem (online nebo na místě) je zaměřeno na inženýry, kteří chtějí používat Confluent (distribuci Kafka) k vybudování a správě platformy pro zpracování dat v reálném čase pro své aplikace.
Na konci tohoto školení budou účastníci schopni:
- Nainstalovat a nakonfigurovat Confluent Platform.
- Používat správní nástroje a služby Confluentu pro jednodušší běh Kafka.
- Ukládat a zpracovávat přicházející datové proudy.
- Optymalizovat a spravovat Kafka cluster.
- Zabezpečit datové proudy.
Formát kurzu
- Interaktivní přednáška a diskuse.
- Mnoho cvičení a praxe.
- Ruční implementace v prostředí live-lab.
Možnosti přizpůsobení kurzu
- Toto školení je založeno na open source verzi Confluent: Confluent Open Source.
- Pro požadavek na individualizované školení tohoto kurz, kontaktujte nás pro uspořádání.
A Practical Introduction to Stream Processing
21 hodinyV tomto živém školení pod vedením instruktora v České republice (na místě nebo na dálku) se účastníci naučí, jak nastavit a integrovat různé Stream Processing rámce se stávajícími systémy ukládání velkých dat a souvisejícími softwarovými aplikacemi a mikroslužbami.
Na konci tohoto školení budou účastníci schopni:
- Nainstalujte a nakonfigurujte různé Stream Processing frameworky, jako je Spark Streaming a Kafka Streaming.
- Pochopte a vyberte nejvhodnější rámec pro danou práci.
- Zpracování dat nepřetržitě, souběžně a záznam po záznamu.
- Integrujte Stream Processing řešení se stávajícími databázemi, datovými sklady, datovými jezery atd.
- Integrujte nejvhodnější knihovnu pro zpracování datových proudů s podnikovými aplikacemi a mikroslužbami.
Distributed Messaging with Apache Kafka
14 hodinyTento kurz je určen pro podnikové architekty, vývojáře, systémové administrátory a kohokoli, kdo chce porozumět a používat vysoce výkonný systém distribuovaného zasílání zpráv. Pokud máte specifičtější požadavky (např. pouze strana správy systému), lze tento kurz upravit tak, aby lépe vyhovoval vašim potřebám.
Kafka for Administrators
21 hodinyToto živé školení vedené instruktorem v České republice (online nebo na místě) je zaměřeno na systémové správce, kteří chtějí nastavit, nasadit, spravovat a optimalizovat cluster Kafka na podnikové úrovni.
Na konci tohoto školení budou účastníci schopni:
- Vytvořte a spravujte Kafka Cluster.
- Vyhodnoťte výhody a nevýhody nasazení Kafka on-premise vs. v cloudu.
- Nasaďte a monitorujte Kafku pomocí různých on-premise a cloudových nástrojů prostředí.
Apache Kafka for Developers
21 hodinyToto živé školení vedené instruktorem v České republice (online nebo na místě) je zaměřeno na středně pokročilé vývojáře, kteří chtějí vyvíjet aplikace pro velká data s Apache Kafka.
Na konci tohoto školení budou účastníci schopni:
- Rozvíjejte výrobce a spotřebitele Kafky, aby mohli odesílat a číst data z Kafky. Integrujte Kafku s externími systémy pomocí Kafka Connect. Pište streamovací aplikace pomocí Kafka Streams & ksqlDB. Integrujte klientskou aplikaci Kafka s cloudem Confluent pro cloudová nasazení Kafka. Získejte praktické zkušenosti prostřednictvím praktických cvičení a případů použití v reálném světě.
Apache Kafka for Python Programmers
7 hodinyToto živé školení vedené instruktorem v České republice (online nebo na místě) je zaměřeno na datové inženýry, datové vědce a programátory, kteří chtějí používat funkce Apache Kafka při streamování dat s Python.
Na konci tohoto školení budou účastníci schopni používat Apache Kafka k monitorování a řízení podmínek v nepřetržitých datových tocích pomocí programování Python.
Kafka Fundamentals for Java Developers
14 hodinyToto živé školení vedené instruktorem v České republice (online nebo na místě) je zaměřeno na středně pokročilé Java vývojáře, kteří chtějí integrovat Apache Kafka do svých aplikací pro spolehlivé, škálovatelné a vysoce výkonné zasílání zpráv.
Na konci tohoto školení budou účastníci schopni:
- Pochopte architekturu a základní součásti Kafky.
- Nastavte a nakonfigurujte cluster Kafka.
- Vytvářejte a konzumujte zprávy pomocí Java.
- Implementujte Kafka Streams pro zpracování dat v reálném čase.
- Zajistěte odolnost proti chybám a škálovatelnost v aplikacích Kafka.
Administration of Kafka Message Queue
14 hodinyToto živé školení vedené instruktorem v České republice (online nebo na místě) je zaměřeno na středně pokročilé systémové administrátory, kteří chtějí efektivně využít funkce Kafkova řazení zpráv do fronty.
Na konci tohoto školení budou účastníci schopni:
- Pochopte možnosti a architekturu řazení zpráv Kafka.
- Nakonfigurujte témata Kafka pro scénáře řazení zpráv.
- Vytvářejte a konzumujte zprávy pomocí Kafky.
- Monitorujte a spravujte Kafku jako frontu zpráv.
Security for Apache Kafka
7 hodinyToto instruktorům řízené, živé školení na místě nebo online (online nebo na klientově místě) je určeno pro otestovatele softwaru, kteří chtějí implementovat opatření zajištění síťové bezpečnosti do aplikace Apache Kafka.
Na konci tohoto školení budou účastníci schopni:
- Nasadit Apache Kafka na cloudový server.
- Implementovat šifrování SSL k prevenci útoků.
- Přidat autentizaci ACL pro sledování a řízení přístupu uživatelů.
- Zajišťovat, že důvěryhodní klienti mají přístup k Kafka clusterům s SSL a SASL autentizací.
Apache Kafka and Spring Boot
7 hodinyToto živé školení vedené instruktorem v České republice (online nebo na místě) je zaměřeno na středně pokročilé vývojáře, kteří se chtějí naučit základy Kafky a integrovat je s Spring Boot.
Na konci tohoto školení budou účastníci schopni:
- Pochopte Kafku a jeho architekturu.
- Naučte se, jak nainstalovat, nakonfigurovat a nastavit základní prostředí Kafka.
- Integrujte Kafku s Spring Boot.
Stream Processing with Kafka Streams
7 hodinyKafka Streams je knihovna na straně klienta pro vytváření aplikací a mikroslužeb, jejichž data jsou předávána do a ze systému zasílání zpráv Kafka. Tradičně se Apache Kafka při zpracování dat mezi producenty zpráv a spotřebiteli spoléhal na Apache Spark nebo Apache Storm. Voláním Kafka Streams API z aplikace mohou být data zpracována přímo v Kafka, čímž se obejde nutnost odesílání dat ke zpracování do samostatného clusteru.
V tomto živém školení vedeném instruktorem se účastníci naučí, jak integrovat Kafka Streams do sady ukázkových Java aplikací, které předávají data do az Apache Kafka pro zpracování streamů.
Na konci tohoto školení budou účastníci schopni:
- Pochopit vlastnosti a přednosti Kafka Streams ve srovnání s jinými rámci pro zpracování streamů
- Zpracovávat datové streamy přímo uvnitř clusteru Kafka
- Napsat Java nebo Scala aplikaci nebo mikroslužbu, která se integruje s Kafka a Kafka Streams
- Napsat koncizní kód, který transformuje vstupní Kafka témata do výstupních Kafka tématických okén
- Sestavit, zabalit a nasadit aplikaci
Publikum
- Vývojáři
Formát kurzu
- Část přednášky, část diskuse, cvičení a značné množství praktické praxe
Poznámky
- Pro žádost o individualizované školení tohoto kurzu nás kontaktujte pro dohodu
Administration of Kafka Topic
14 hodinyToto živé školení vedené instruktorem v České republice (online nebo na místě) je zaměřeno na začátečníky až středně pokročilé systémové administrátory, kteří se chtějí naučit, jak efektivně řídit témata Kafka pro efektivní streamování a zpracování dat.
Na konci tohoto školení budou účastníci schopni:
- Pochopit základy Kafkova tématu a architekturu.
- Vytvářejte, konfigurujte a spravujte témata Kafka.
- Sledujte témata Kafka z hlediska zdraví, výkonu a dostupnosti.
- Zavést bezpečnostní opatření pro Kafkova témata.
Confluent KSQL
7 hodinyToto živé školení vedené instruktorem v České republice (online nebo na místě) je zaměřeno na vývojáře, kteří chtějí implementovat zpracování Apache Kafka streamu bez psaní kódu.
Na konci tohoto školení budou účastníci schopni:
- Nainstalujte a nakonfigurujte Confluence KSQL.
- Nastavte kanál zpracování datového proudu pouze pomocí příkazů SQL (bez kódování Java nebo Python).
- Provádějte filtrování dat, transformace, agregace, spojení, okna a sessionization zcela v SQL.
- Navrhněte a nasaďte interaktivní, nepřetržité dotazy pro streamování ETL a analýzy v reálném čase.
SMACK Stack for Data Science
14 hodinyToto živé školení vedené instruktorem v České republice (online nebo na místě) je zaměřeno na datové vědce, kteří chtějí použít SMACK stack k vybudování platforem pro zpracování dat pro řešení velkých dat.
Na konci tohoto školení budou účastníci schopni:
- Implementujte architekturu datového kanálu pro zpracování velkých dat.
- Vyvíjejte klastrovou infrastrukturu pomocí Apache Mesos a Docker.
- Analyzujte data pomocí Spark a Scala.
- Spravujte nestrukturovaná data pomocí Apache Cassandra.