Hubungi Kami

Kerangka Materi

Pengenalan LLM Multimodal di Vertex AI

  • Ringkasan kemampuan multimodal di Vertex AI
  • Model Gemini dan modalitas yang didukung
  • Kasus penggunaan di perusahaan dan penelitian

Persiapan Lingkungan Pengembangan

  • Konfigurasi Vertex AI untuk alur kerja multimodal
  • Bekerja dengan dataset lintas modalitas
  • Lab praktik langsung: pengaturan lingkungan dan persiapan dataset

Jendela Konteks Panjang dan Penalaran Lanjut

  • Memahami alur kerja konteks panjang
  • Kasus penggunaan dalam perencanaan dan pengambilan keputusan
  • Lab praktik langsung: implementasi analisis konteks panjang

Desain Alur Kerja Lintas Modalitas

  • Menggabungkan analisis teks, audio, dan gambar
  • Membuat rantai langkah multimodal dalam pipeline
  • Lab praktik langsung: merancang pipeline multimodal

Bekerja dengan Parameter API Gemini

  • Konfigurasi input dan output multimodal
  • Optimasi inferensi dan efisiensi
  • Lab praktik langsung: penyetelan parameter API Gemini

Aplikasi Lanjut dan Integrasi

  • Agen dan asisten multimodal interaktif
  • Integrasi API dan alat eksternal
  • Lab praktik langsung: membangun aplikasi multimodal

Evaluasi dan Iterasi

  • Menguji kinerja multimodal
  • Metrik untuk akurasi, keselarasan, dan pergeseran (drift)
  • Lab praktik langsung: mengevaluasi alur kerja multimodal

Ringkasan dan Langkah Berikutnya

Persyaratan

  • Kemahiran dalam pemrograman Python
  • Pengalaman dalam pengembangan model machine learning
  • Pengenalakan terhadap data multimodal (teks, audio, gambar)

Audiens

  • Peneliti AI
  • Pengembang tingkat lanjut
  • Ilmuwan ML
 14 Jam

Jumlah Peserta


Harga per Peserta

Kursus Mendatang

Kategori Terkait