Návrh Školení
Vstup do Google Colab a Apache Spark
- Přehled o Google Colab
- Úvod do Apache Spark
- Nastavení Sparku v Google Colab
Zpracování dat s použitím Apache Spark
- Práce s RDDs a DataFramey
- Načítání a zpracování velkých datových sad
- Použití Sparku SQL pro dotazování strukturovaných dat
Pokročilá analýza s použitím Sparku
- Strojové učení pomocí Spark MLlib
- Provádění reálně časové analýzy dat
- Distribuované výpočty s použitím Sparku
Vizualizace a Collaboration v Google Colab
- Integrace Colabu s populárními vizualizačními knihovnami
- Kolaborativní pracovní postupy pomocí Colab notebooků
- Sdílení a export výsledků
Optimalizace Big Data pracovních postupů
- Tuning Sparku pro výkon
- Optimalizace použití paměti a úložiště
- Škálování pracovních postupů pro velké datové sady
Big Data v cloudu
- Integrace Google Colab s nástroji založenými na cloudu
- Použití cloudového úložiště pro velká data
- Práce s Sparkem v distribuovaných prostředích cloudu
Případové studie a nejlepší praktiky
- Rezignace reálných aplikací velkých dat
- Případové studie pomocí Apache Spark a Colabu
- Nejlepší praktiky pro analýzu velkých dat
Závěr a další kroky
Požadavky
- Základní znalosti konceptů datové vědy
- Farnost s Apache Spark
- Znalosti programování v Python
Cílová skupina
- Datoví vědci
- Datoví inženýři
- Výzkumníci pracující s velkými daty
Reference (5)
Hands-on examples allowed us to get an actual feel for how the program works. Good explanations and integration of theoretical concepts and how they relate to practical applications.
Ian - Archeoworks Inc.
Kurz - ArcGIS Fundamentals
All the topics which he covered including examples. And also explained how they are helpful in our daily job.
madduri madduri - Boskalis Singapore Pte Ltd
Kurz - QGIS for Geographic Information System
Líbil se mi Pablův styl, skutečnost, že pokryl spoustu témat od návrhu sestav, přizpůsobení pomocí html až po implementaci jednoduchých algoritmů ML. Good rovnováhy teoretické informace / cvičení. Pablo skutečně pokryl všechna témata, která mě zajímala, a poskytl vyčerpávající odpovědi na mé otázky.
Cristian Tudose - SC Automobile Dacia SA
Kurz - Advanced Data Analysis with TIBCO Spotfire
Machine Translated
Actual application of spotfire and all basic functions.
Michael Capili - STMicroelectronics, Inc.
Kurz - Introduction to Spotfire
The thing I liked the most about the training was the organization and the location