Zkuste nás kontaktovat

Návrh Školení

Úvod do multimodálních LLM v Vertex AI

  • Přehled multimodálních schopností v Vertex AI
  • Modely Gemini a podporované modality
  • Použití v podnicích a výzkumu

Nastavení vývojového prostředí

  • Konfigurace Vertex AI pro multimodální workflowy
  • Práce s datovými soubory napříč modalitami
  • Praktická laboratoř: nastavení prostředí a příprava dat

Dlouhá kontextová okna a pokročilé uvažování

  • Rozumění workflowům s dlouhým kontextem
  • Použití v plánování a rozhodování
  • Praktická laboratoř: implementace analýzy s dlouhým kontextem

Navrhování křížových modálních workflowů

  • Kombinace analýzy textu, zvuku a obrazu
  • Řetězení multimodálních kroků v potrubí
  • Praktická laboratoř: návrh multimodálního potrubí

Práce s parametry Gemini API

  • Konfigurace multimodálního vstupu a výstupu
  • Optimalizace inference a efektivnosti
  • Praktická laboratoř: ladění parametrů Gemini API

Pokročilé aplikace a integrace

  • Interaktivní multimodální agenti a asistenti
  • Integrace externích API a nástrojů
  • Praktická laboratoř: stavba multimodální aplikace

Hodnocení a iterace

  • Testování multimodálního výkonu
  • Měřítko pro přesnost, zarovnání a drift
  • Praktická laboratoř: hodnocení multimodálních workflowů

Shrnutí a další kroky

Požadavky

  • Znázornění v programování Python
  • Zkušenost s vývojem modelů strojového učení
  • Pochopení multimodálních dat (text, zvuk, obraz)

Cílová skupina

  • Výzkumníci AI
  • Pokročilí vývojáři
  • Vědci z oblasti ML
 14 Hodiny

Počet účastníků


Cena za účastníka

Nadcházející kurzy

Související kategorie