Samza for Stream Processing Počítačový Kurz

Toto živé školení vedené instruktorem v České republice (online nebo na místě) je zaměřeno na datové inženýry, datové vědce a programátory, kteří chtějí používat funkce Spark Streaming při zpracování a analýze dat v reálném čase.

Na konci tohoto školení budou účastníci schopni používat Spark Streaming ke zpracování živých datových toků pro použití v databázích, souborových systémech a živých řídicích panelech.

Toto živé školení vedené instruktorem v České republice (online nebo na místě) je zaměřeno na vývojáře, kteří chtějí implementovat zpracování Apache Kafka streamu bez psaní kódu.

Na konci tohoto školení budou účastníci schopni:

• Nainstalujte a nakonfigurujte Confluent KSQL.
• Nastavte kanál zpracování datového proudu pouze pomocí příkazů SQL (žádné kódování Java nebo Python).
• Provádějte filtrování dat, transformace, agregace, spojení, vytváření oken a sessions výhradně v SQL.
• Navrhněte a nasaďte interaktivní, nepřetržité dotazy pro streamování ETL a analýzy v reálném čase.

Apache Ignite is an in-memory computing platform that sits between the application and data layer to improve speed, scale, and availability.

This instructor-led, live training (online or onsite) is aimed at developers who wish to learn the principles behind persistent and pure in-memory storage as they step through the creation of a sample in-memory computing project.

By the end of this training, participants will be able to:

• Use Ignite for in-memory, on-disk persistence as well as a purely distributed in-memory database.
• Achieve persistence without syncing data back to a relational database.
• Use Ignite to carry out SQL and distributed joins.
• Improve performance by moving data closer to the CPU, using RAM as a storage.
• Spread data sets across a cluster to achieve horizontal scalability.
• Integrate Ignite with RDBMS, NoSQL, Hadoop and machine learning processors.

Format of the Course

• Interactive lecture and discussion.
• Lots of exercises and practice.
• Hands-on implementation in a live-lab environment.

Course Customization Options

• To request a customized training for this course, please contact us to arrange.

Apache Beam je unifikovaný programovací model s otevřeným zdrojovým kódem pro definování a spouštění paralelních kanálů zpracování dat. Jeho síla spočívá v jeho schopnosti spouštět dávkové i streamovací kanály, přičemž spouštění je prováděno jedním z podporovaných back-endů distribuovaného zpracování Beam: Apache Apex, Apache Flink, Apache Spark a Google Cloud Dataflow. Apache Beam je užitečný pro úlohy ETL (Extract, Transform, and Load), jako je přesun dat mezi různými úložnými médii a zdroji dat, transformace dat do vhodnějšího formátu a načítání dat do nového systému.

V tomto živém školení vedeném instruktorem (na místě nebo na dálku) se účastníci naučí, jak implementovat sady Apache Beam SDK v aplikaci Java nebo Python, která definuje kanál zpracování dat pro rozklad velkého souboru dat na menší části pro nezávislé, paralelní zpracování.

Na konci tohoto školení budou účastníci schopni:

Nainstalujte a nakonfigurujte Apache Beam. Použijte jediný programovací model k provádění dávkového i proudového zpracování v rámci jejich Java nebo Python aplikace. Spouštějte kanály v různých prostředích.

Formát kurzu

Část přednáška, část diskuse, cvičení a těžké praktické cvičení

Poznámka

Tento kurz bude k dispozici Scala v budoucnu. Pro domluvu nás prosím kontaktujte.

Apache Apex je nativní platforma YARN, která sjednocuje streamování a dávkové zpracování. Zpracovává velká data v pohybu způsobem, který je škálovatelný, výkonný, odolný proti chybám, stavový, bezpečný, distribuovaný a snadno ovladatelný.

Toto živé školení vedené instruktorem představuje sjednocenou architekturu zpracování datových proudů Apache Apex a provede účastníky tvorbou distribuované aplikace využívající Apex na Hadoop.

Na konci tohoto školení budou účastníci schopni:

Pochopte koncepty potrubí zpracování dat, jako jsou konektory pro zdroje a jímky, běžné transformace dat atd. Sestavte, škálujte a optimalizujte aplikaci Apex Zpracovávejte datové toky v reálném čase spolehlivě as minimální latencí Použijte Apex Core a knihovnu Apex Malhar k umožnění rychlé aplikace vývoj Použijte Apex API k zápisu a opětovnému použití stávajícího Java kódu Integrujte Apex do jiných aplikací jako procesor pro zpracování Vylaďte, testujte a škálujte aplikace Apex

Formát kurzu

Interaktivní přednáška a diskuze. Spousta cvičení a cvičení. Praktická implementace v prostředí živé laboratoře.

Možnosti přizpůsobení kurzu

Chcete-li požádat o školení na míru pro tento kurz, kontaktujte nás a domluvíme se.

Apache Storm je distribuovaný počítačový motor v reálném čase používaný k usnadnění obchodní inteligence v reálném čase. Umožňuje aplikacím spolehlivě zpracovávat neomezené toky dat (např. zpracování toku)

"Storm je pro zpracování v reálném čase, co Hadoop je pro zpracování batchů!"

V tomto živém tréninku vedeném instruktorem se účastníci dozví, jak nainstalovat a konfigurovat Apache Storm, a pak vyvíjet a rozvíjet Apache Storm aplikaci pro zpracování velkých dat v reálném čase.

Některé z témat zahrnutých v tomto tréninku zahrnují:

• Apache Storm v souvislosti s Hadoop
• Práce s neomezenými údaji
• Kontinuální výpočet
• Analýza v reálném čase
• Distribuované zpracování RPC a ETL

Požádejte o tento kurz nyní!

publikum

• Software a vývojáři ETL
• Mainframe profesionál
• Data vědci
• Big Data analytici
• [ 0 ] profesionálové

Formát kurzu

• Částečná přednáška, částečná diskuse, cvičení a těžká praxe

V tomto živém školení vedeném instruktorem v České republice (na místě nebo na dálku) se účastníci naučí, jak nasadit a spravovat Apache NiFi v živém laboratorním prostředí.

Na konci tohoto školení budou účastníci schopni:

• Nainstalujte a nakonfigurujte Apachi NiFi.
• Zdroj, transformace a správa dat z nesourodých, distribuovaných zdrojů dat, včetně databází a velkých datových jezer.
• Automatizujte datové toky.
• Povolit analýzu streamování.
• Aplikujte různé přístupy ke zpracování dat.
• Transformujte Big Data do obchodních postřehů.

V tomto živém školení vedeném instruktorem v České republice se účastníci naučí základy programování založeného na toku při vývoji řady demo rozšíření, komponent a procesorů pomocí Apache NiFi.

Na konci tohoto školení budou účastníci schopni:

• Pochopte architekturu a koncepty toku dat NiFi.
• Vyvíjejte rozšíření pomocí NiFi a API třetích stran.
• Vlastní vývoj vlastního procesoru Apache Nifi.
• Ingestujte a zpracujte data v reálném čase z různorodých a neobvyklých formátů souborů a zdrojů dat.

Toto živé školení vedené instruktorem v České republice (online nebo na místě) představuje principy a přístupy za distribuovaným streamem a dávkovým zpracováním dat a provede účastníky vytvořením aplikace pro streamování dat v reálném čase v Apache Flink.

Na konci tohoto školení budou účastníci schopni:

Nastavte prostředí pro vývoj aplikací pro analýzu dat. Pochopte, jak funguje knihovna pro zpracování grafů (Gelly) Apache Flink. Zabalte, spouštějte a monitorujte aplikace pro streamování dat založené na Flink, odolné proti chybám. Zvládejte různé pracovní zátěže. Provádějte pokročilé analýzy. Nastavte víceuzlový cluster Flink. Měřte a optimalizujte výkon. Integrujte Flink s různými Big Data systémy. Porovnejte funkce Flink s těmi, které mají jiné rámce pro zpracování velkých dat.

Toto živé školení vedené instruktorem v České republice (online nebo na místě) představuje Hortonworks Data Platform (HDP) a provede účastníky nasazením řešení Spark + Hadoop.

Na konci tohoto školení budou účastníci schopni:

Použijte Hortonworks ke spolehlivému provozu Hadoop ve velkém měřítku. Sjednoťte možnosti zabezpečení, správy a provozu Hadoop s agilními analytickými pracovními postupy Spark. Použijte Hortonworks k prozkoumání, ověření, certifikaci a podpoře každé z komponent v projektu Spark. Zpracovávejte různé typy dat, včetně strukturovaných, nestrukturovaných, v pohybu a v klidu.

Apache Ambari je open-source platforma pro správu pro poskytování, správu, monitorování a zabezpečení clusterů Apache Hadoop.

V tomto živém školení vedeném instruktorem se účastníci naučí manažerské nástroje a postupy poskytované Ambari k úspěšnému řízení Hadoop klastrů.

Na konci tohoto školení budou účastníci schopni:

Nastavení živého clusteru velkých dat pomocí Ambari Aplikujte pokročilé funkce a funkce Ambari na různé případy použití Bezproblémové přidávání a odebírání uzlů podle potřeby Zlepšete Hadoop výkon clusteru pomocí ladění a ladění

Publikum

DevOps System Administrators DBA Hadoop odborníci na testování

Formát kurzu

Část přednáška, část diskuse, cvičení a těžké praktické cvičení

Cloudera Impala is an open source massively parallel processing (MPP) SQL query engine for Apache Hadoop clusters.

Impala enables users to issue low-latency SQL queries to data stored in Hadoop Distributed File System and Apache Hbase without requiring data movement or transformation.

Audience

This course is aimed at analysts and data scientists performing analysis on data stored in Hadoop via Business Intelligence or SQL tools.

After this course delegates will be able to

• Extract meaningful information from Hadoop clusters with Impala.
• Write specific programs to facilitate Business Intelligence in Impala SQL Dialect.
• Troubleshoot Impala.

Tento kurz se zabývá tím, jak používat jazyk Hive SQL (AKA: Hive HQL, SQL on Hive, HiveQL) pro lidi, kteří extrahují data z Hive

Kafka Streams je knihovna na straně klienta pro vytváření aplikací a mikroslužeb, jejichž data jsou předávána do a ze systému zasílání zpráv Kafka. Tradičně se Apache Kafka při zpracování dat mezi producenty zpráv a spotřebiteli spoléhal na Apache Spark nebo Apache Storm. Voláním Kafka Streams API z aplikace mohou být data zpracována přímo v Kafka, čímž se obejde nutnost odesílání dat ke zpracování do samostatného clusteru.

V tomto živém školení vedeném instruktorem se účastníci naučí, jak integrovat Kafka Streams do sady ukázkových Java aplikací, které předávají data do az Apache Kafka pro zpracování streamů.

Na konci tohoto školení budou účastníci schopni:

Pochopte funkce a výhody Kafka Streams oproti jiným rámcům pro zpracování datových proudů Zpracovávejte data streamu přímo v clusteru Kafka Napište Java nebo Scala aplikaci nebo mikroslužbu, která se integruje s Kafka a Kafka Streams Napište stručný kód, který transformuje vstupní témata Kafka na výstupní témata Kafka Build, zabalit a nasadit aplikaci

Publikum

Vývojáři

Formát kurzu

Část přednáška, část diskuse, cvičení a těžké praktické cvičení

Poznámky

Chcete-li požádat o školení na míru pro tento kurz, kontaktujte nás a domluvíme se

V tomto živém školení pod vedením instruktora v České republice (na místě nebo na dálku) se účastníci naučí, jak nastavit a integrovat různé Stream Processing rámce se stávajícími systémy ukládání velkých dat a souvisejícími softwarovými aplikacemi a mikroslužbami.

Na konci tohoto školení budou účastníci schopni:

• Nainstalujte a nakonfigurujte různé Stream Processing frameworky, jako je Spark Streaming a Kafka Streaming.
• Pochopte a vyberte nejvhodnější rámec pro danou práci.
• Zpracování dat nepřetržitě, souběžně a záznam po záznamu.
• Integrujte Stream Processing řešení se stávajícími databázemi, datovými sklady, datovými jezery atd.
• Integrujte nejvhodnější knihovnu pro zpracování datových proudů s podnikovými aplikacemi a mikroslužbami.