Kerangka Materi

Pengantar Manipulasi Robotik dan Deep Learning

  • Gambaran tugas manipulasi dan komponen sistem
  • Pendekatan tradisional versus berbasis pembelajaran
  • Deep learning dalam persepsi, perencanaan, dan kontrol

Persepsi untuk Manipulasi

  • Sensing visual dan deteksi objek untuk pegangan
  • Visi 3D, sensing kedalaman, dan pemrosesan poin cloud
  • Melatih CNN untuk lokalisasi dan segmentasi objek

Perencanaan dan Deteksi Pegangan

  • Algoritma perencanaan pegangan klasik
  • Belajar pose pegangan dari data dan simulasi
  • Mengimplementasikan jaringan deteksi pegangan (mis., GGCNN, Dex-Net)

Kontrol dan Perencanaan Gerakan

  • Invers kinematika dan generasi trajektori
  • Perencanaan gerakan berbasis pembelajaran dan pembelajaran tiruan
  • Pembelajaran penguatan untuk kebijakan kontrol manipulasi

Integrasi dengan ROS 2 dan Lingkungan Simulasi

  • Mengatur node ROS 2 untuk persepsi dan kontrol
  • Menyimulasikan manipulator robotik di Gazebo dan Isaac Sim
  • Mengintegrasikan model neural untuk kontrol real-time

Pembelajaran End-to-End untuk Manipulasi

  • Menggabungkan persepsi, kebijakan, dan kontrol dalam jaringan terpadu
  • Menggunakan data demonstrasi untuk pembelajaran kebijakan supervisori
  • Adaptasi domain antara simulasi dan perangkat keras nyata

Evaluasi dan Optimasi

  • Metrik untuk keberhasilan pegangan, stabilitas, dan presisi
  • Pengujian dalam kondisi dan gangguan bervariasi
  • Kompresi model dan penyebaran pada perangkat tepi

Proyek Praktis: Pegangan Robotik Berbasis Deep Learning

  • Mendesain pipa dari persepsi ke tindakan
  • Melatih dan menguji model deteksi pegangan
  • Mengintegrasikan model ke dalam lengan robotik yang disimulasikan

Ringkasan dan Langkah Selanjutnya

Persyaratan

  • Pemahaman kuat tentang kinematika dan dinamika robotik
  • Pengalaman dengan Python dan kerangka kerja pembelajaran mesin dalam
  • Kenalan dengan ROS atau middleware robotik serupa

Audience

  • Insinyur robotika yang mengembangkan sistem manipulasi cerdas
  • Ahli persepsi dan kontrol yang bekerja pada aplikasi pegangan
  • Peneliti dan praktisi tingkat lanjut dalam pembelajaran robotik dan kontrol berbasis AI
 28 Jam

Jumlah Peserta


Harga per Peserta

Testimoni (1)

Kursus Mendatang

Kategori Terkait