Terima kasih telah mengirimkan pertanyaan Anda! Salah satu anggota tim kami akan segera menghubungi Anda.
Terima kasih telah mengirimkan pemesanan Anda! Salah satu anggota tim kami akan segera menghubungi Anda.
Durasi 14 jam
Kerangka Materi
Pengantar LLM Multimodal di Vertex AI
- Tinjauan kemampuan multimodal di Vertex AI
- Model Gemini dan modalitas yang didukung
- Kasus penggunaan dalam lingkungan perusahaan dan riset
Menyiapkan Lingkungan Pengembangan
- Konfigurasi Vertex AI untuk alur kerja multimodal
- Bekerja dengan dataset lintas modalitas
- Laboratorium praktik: pengaturan lingkungan dan persiapan dataset
Jendela Konteks Panjang dan Penalaran Lanjutan
- Memahami alur kerja konteks panjang
- Kasus penggunaan dalam perencanaan dan pengambilan keputusan
- Laboratorium praktik: implementasi analisis konteks panjang
Desain Alur Kerja Lintas Modalitas
- Kombinasi analisis teks, audio, dan gambar
- Menggabungkan langkah-langkah multimodal dalam pipeline
- Laboratorium praktik: merancang pipeline multimodal
Bekerja dengan Parameter Gemini API
- Konfigurasi input dan output multimodal
- Optimasi inferensi dan efisiensi
- Laboratorium praktik: penyetelan parameter Gemini API
Aplikasi dan Integrasi Lanjutan
- Agens dan asisten multimodal interaktif
- Integrasi API dan alat eksternal
- Laboratorium praktik: membangun aplikasi multimodal
Evaluasi dan Iterasi
- Pengujian kinerja multimodal
- Metrik untuk akurasi, keselarasan, dan pergeseran (drift)
- Laboratorium praktik: mengevaluasi alur kerja multimodal
Ringkasan dan Langkah Berikutnya
Persyaratan
- Kecakapan dalam pemrograman Python
- Pengalaman dalam pengembangan model machine learning
- Keakraban dengan data multimodal (teks, audio, gambar)
Audience
- Peneliti AI
- Pengembang tingkat lanjut
- Ilmuwan ML
