Návrh Školení
Úvod do Apache Spark
- Role Sparku ve zpracování velkých dat
- Jiskrová architektura a její součásti
Nastavení Apache Spark
- Hardwarové a softwarové požadavky
- Instalační postupy pro samostatný a clusterový režim
- Doporučené postupy konfigurace pro správce systému
Správa Spark Clusters
- Nástroje a techniky pro správu klastrů
- Monitorování aplikací Spark a prostředků clusteru
- Konfigurace zabezpečení a správa uživatelů
Ladění a optimalizace výkonu
- Alokace a plánování zdrojů
- Tuning Spark pro optimální výkon
- Identifikace a řešení běžných úzkých míst
Odstraňování problémů a řešení problémů
- Běžné výzvy správy Spark
- Diagnostické nástroje a techniky pro odstraňování problémů
- Postupný přístup k řešení běžných problémů
- Nejlepší postupy pro udržování zdravého prostředí Spark
Pokročilá administrační témata
- Integrace s dalšími nástroji pro velká data
- Zajištění vysoké dostupnosti a obnovy po havárii
- Upgrade a škálování clusterů Spark
Shrnutí a další kroky
Požadavky
- Základní znalost konfigurace a správy sítě
- Znalost Linux operačního systému a rozhraní příkazového řádku
- Zájem o studium distribuovaných výpočetních systémů a správy velkých dat
Publikum
- Správci systému
Reference (9)
I liked that it was practical. Loved to apply the theoretical knowledge with practical examples.
Aurelia-Adriana - Allianz Services Romania
Kurz - Python and Spark for Big Data (PySpark)
This is one of the best hands-on with exercises programming courses I have ever taken.
Laura Kahn
Kurz - Artificial Intelligence - the most applied stuff - Data Analysis + Distributed AI + NLP
Spousta praktických příkladů, různé způsoby, jak přistupovat ke stejnému problému, a někdy ne tak samozřejmé triky, jak stávající řešení vylepšit
Rafał - Nordea
Kurz - Apache Spark MLlib
Machine Translated
The VM I liked very much The Teacher was very knowledgeable regarding the topic as well as other topics, he was very nice and friendly I liked the facility in Dubai.
Safar Alqahtani - Elm Information Security
Kurz - Big Data Analytics in Health
Sufficient hands on, trainer is knowledgable
Chris Tan
Kurz - A Practical Introduction to Stream Processing
very interactive...
Richard Langford
Kurz - SMACK Stack for Data Science
Angažovanost a ochota vysvětlit sekundární témata.
Marek - Krajowy Rejestr Długów Biuro Informacji Gospodarczej S.A.
Kurz - Apache Spark Fundamentals
Machine Translated
Having hands on session / assignments
Poornima Chenthamarakshan - Intelligent Medical Objects
Kurz - Apache Spark in the Cloud
Cvičení a výměny během otázek/odpovědí
Antoine - Physiobotic
Kurz - Scaling Data Pipelines with Spark NLP
Machine Translated