Terima kasih telah mengirimkan pertanyaan Anda! Salah satu anggota tim kami akan segera menghubungi Anda.
Terima kasih telah mengirimkan pemesanan Anda! Salah satu anggota tim kami akan segera menghubungi Anda.
Kerangka Materi
Bagian 1: Pengenalan ke Hadoop
- Riwayat, konsep Hadoop
- ekosistem
- distribusi
- arsitektur tingkat tinggi
- mitos Hadoop
- tantangan Hadoop
- perang keras / lunak
- praktikum : pandangan pertama tentang Hadoop
Bagian 2: HDFS
- Desain dan arsitektur
- konsep (skalabilitas horizontal, replikasi, lokalisasi data, kesadaran rak)
- Daemons : Namenode, Secondary namenode, Data node
- Komunikasi / detak jantung
- integritas data
- jalan baca / tulis
- Namenode High Availability (HA), Federasi
- praktikum : Berinteraksi dengan HDFS
Bagian 3: Map Reduce
- Konsep dan arsitektur
- Daemons (MRV1) : jobtracker / tasktracker
- Fase : pengemudi, mapper, shuffle/sort, reducer
- Map Reduce Versi 1 dan Versi 2 (YARN)
- Internals of Map Reduce
- Pengenalan ke program Java Map Reduce
- praktikum : Menjalankan program MapReduce contoh
Bagian 4: Pig
- pig vs java map reduce
- alur pekerjaan pig
- bahasa pig latin
- ETL dengan Pig
- Transformasi & Join
- Fungsi yang Didefinisikan Pengguna (UDF)
- praktikum : menulis skrip Pig untuk menganalisis data
Bagian 5: Hive
- arsitektur dan desain
- tipe data
- Dukungan SQL di Hive
- Membuat tabel Hive dan kueri
- partisi
- join
- pemrosesan teks
- praktikum : berbagai praktikum tentang pemrosesan data dengan Hive
Bagian 6: HBase
- Konsep dan arsitektur
- HBase vs RDBMS vs Cassandra
- API Java HBase
- Data series waktu di HBase
- desain skema
- praktikum : Berinteraksi dengan HBase menggunakan shell; pemrograman dalam API Java HBase; latihan desain skema
Persyaratan
- nyaman dengan bahasa pemrograman Java (sebagian besar latihan pemrograman berada dalam Java)
- nyaman di lingkungan Linux (dapat menavigasi perintah baris perintah Linux, mengedit file menggunakan vi / nano)
Lingkungan Laboratorium
Zero Install : Tidak perlu memasang perangkat lunak Hadoop di mesin siswa! Sebuah klaster Hadoop yang berfungsi akan disediakan untuk siswa.
Siswa akan memerlukan hal-hal berikut
- klien SSH (Linux dan Mac sudah memiliki klien ssh, untuk Windows Putty direkomendasikan)
- peramban untuk mengakses klaster, Firefox direkomendasikan
28 Jam
Testimoni (1)
Latihan praktis. Kelas seharusnya berlangsung selama 5 hari, tetapi 3 hari tersebut membantu mengklarifikasi banyak pertanyaan yang saya miliki dari pengalaman bekerja dengan NiFi.
James - BHG Financial
Kursus - Apache NiFi for Administrators
Diterjemahkan Mesin