Course Outline

Ulasan tentang Arsitektur LLM dan Permukaan Serangan

  • Cara LLM dibangun, dideploy, dan diakses melalui API
  • Komponen utama dalam tumpukan aplikasi LLM (mis., prompt, agen, memori, API)
  • Dimana dan bagaimana masalah keamanan muncul dalam penggunaan dunia nyata

Injeksi Prompt dan Serangan Jailbreak

  • Apa itu injeksi prompt dan mengapa bahayanya
  • Skenario injeksi prompt langsung dan tidak langsung
  • Teknik jailbreaking untuk melewati filter keamanan
  • Strategi deteksi dan mitigasi

Kebocoran Data dan Risiko Privasi

  • Paparan data tidak sengaja melalui respons
  • Kebocoran PII dan penyalahgunaan memori model
  • Mendesain prompt yang peduli privasi dan generasi yang dipermudah dengan pencarian (RAG)

Penyaringan dan Pengamanan Output LLM

  • Menggunakan Guardrails AI untuk penyaringan dan validasi konten
  • Menentukan skema output dan keterbatasan
  • Pemantauan dan pencatatan output yang berbahaya

Human-in-the-Loop dan Pendekatan Workflow

  • Mengenai dimana dan kapan memperkenalkan pengawasan manusia
  • Antrian persetujuan, ambang skor, penanganan fallback
  • Kalibrasi kepercayaan dan peran dari penjelasan

Aplikasi LLM yang Aman Design Patterns

  • Hak akses minimal dan sandboxing untuk panggilan API dan agen
  • Pembatasan laju, pengaturan batas, dan deteksi penyalahgunaan
  • Penyambungan yang kuat dengan LangChain dan isolasi prompt

Kepatuhan, Logging, dan Governance

  • Mengamankan keluaran LLM agar dapat diaudit
  • Mempertahankan jejak dan kontrol versi prompt
  • Menyesuaikan dengan kebijakan keamanan internal dan kebutuhan regulasi

Ringkasan dan Langkah Berikutnya

Requirements

  • Pemahaman tentang model bahasa besar dan antarmuka berbasis prompt
  • Pengalaman membangun aplikasi LLM menggunakan Python
  • Kenalan dengan integrasi API dan penyediaan berbasis cloud

Audience

  • Developer AI
  • Arsitek aplikasi dan solusi
  • Pengelola produk teknis yang bekerja dengan alat LLM
 14 Hours

Number of participants


Price per participant

Upcoming Courses (Minimal 5 peserta)

Related Categories