Zkuste nás kontaktovat
 Doba trvání 14 hodiny

Návrh Školení

Úvod do učení s posilováním z lidské zpětné vazby (RLHF)

  • Co je RLHF a proč je důležité
  • Srovnání s metodami dohledovaného ladění
  • Aplikace RLHF v moderních AI systémech

Modelování odměn pomocí lidské zpětné vazby

  • Sběr a strukturování lidské zpětné vazby
  • Vytváření a trénink modelů odměn
  • Hodnocení účinnosti modelů odměn

Trénování pomocí Proximal Policy Optimization (PPO)

  • Přehled algoritmů PPO pro RLHF
  • Implementace PPO s modely odměn
  • Iterativní a bezpečné ladění modelů

Praktické ladění jazykových modelů

  • Příprava datových sad pro pracovní toky RLHF
  • Praktické ladění malého LLM pomocí RLHF
  • Výzvy a strategie jejich eliminace

Škálování RLHF do produkčních systémů

  • Zvažení infrastruktury a výpočetního výkonu
  • Zajištění kvality a smyčky nepřetržité zpětné vazby
  • Osvědčené postupy pro nasazení a údržbu

Etické aspekty a eliminace zkreslení

  • Řešení etických rizik v lidské zpětné vazbě
  • Strategie detekce a korekce zkreslení
  • Zajištění souladu a bezpečnosti výstupů

Kazuistiky a příklady z praxe

  • Kazuistika: Ladění ChatGPT pomocí RLHF
  • Jiné úspěšné nasazení RLHF
  • Poučení a odvětvové poznatky

Požadavky

  • Porozumění základům dohledovaného učení a učení s posilováním
  • Zkuštěnosti s laděním modelů a architekturami neuronových sítí
  • Znalost programování v jazyce Python a frameworků pro hluboké učení (např. TensorFlow, PyTorch)

Cílové publikum

  • Inženýři strojového učení
  • Výzkumníci AI

Počet účastníků


Cena za účastníka

Nadcházející kurzy

Související kategorie