Návrh Školení
Úvod do platformy Stratio
- Přehled architektury Stratia a jeho hlavních modulů
- Role modulů Rocket a Intelligence v životním cyklu dat
- Přihlašování a orientace v uživatelském rozhraní Stratia
Práce s modulem Rocket
- Načítání dat a tvorba datových kanálů
- Připojování zdrojů dat a konfigurace transformací
- Využití PySpark k předběžnému zpracování dat v rámci modulu Rocket
Základy PySpark pro uživatele Stratia
- Datové struktury a operace v PySpark
- Cykly: použití příkazů for, while a podmíněných výrazů typu if/else
- Vytváření vlastních funkcí pomocí klíčového slova def a jejich uplatňování
Pokročilé využití modulu Rocket s PySpark
- Streamovací načítání a transformace dat
- Využití cyklů a funkcí v dávkových i reálně časových scénářích
- Doporučené postupy pro zajištění výkonu kanálů v PySpark
Seznámení s modulem Intelligence
- Přehled funkcí pro modelování a analýzu dat
- Výběr, transformace a explorace datových charakteristik
- Role PySpark při vytváření vlastních analytických řešení a získávání poznatků
Vytváření pokročilých analytických pracovních toků
- Tvorba uživatelsky definovaných funkcí (UDF) v modulu Intelligence
- Aplikace podmínkové logiky a cyklů při zpracování dat
- Konkrétní příklady využití: segmentace, agregace a predikce
Nasazení a spolupráce
- Ukládání, export a opětovné využití vytvořených pracovních toků
- Spolupráce s ostatními členy týmu na platformě Stratio
- Kontrola výsledků a jejich integrace do dalších systémů
Shrnutí a další kroky
Požadavky
- Zkušenosti s programováním v Pythonu
- Základní porozumění konceptům datové analýzy nebo zpracování velkých dat
- Orientace v Apache Spark a distribuovaném výpočtu
Cílová skupina
- Data inženýři pracující na platformách založených na Stratiu
- Analytici či vývojáři využívající moduly Rocket a Intelligence
- Technické týmy přecházející na pracovní toky v PySpark uvnitř Stratia
Reference (3)
Zjistěte, že QGIS je nástroj, který mohou používat i další odborníci, například zeměměřiči.
Bame Duncan Koko - Bentel Technologies (Pty) Ltd
Kurz - QGIS for Geographic Information System
Přeloženo strojem
Jak používat data z otevřených satelitů pro reálné aplikace
Tshering Dorji - Druk Holding and Investments
Kurz - Advanced Geographic Information Systems (GIS)
Přeloženo strojem
Praktické příklady nám umožnily skutečně pochopit, jak program funguje. Dobré vysvětlení a integrace teoretických konceptů a jejich souvislost s praktickými aplikacemi.
Ian - Archeoworks Inc.
Kurz - ArcGIS Fundamentals
Přeloženo strojem