Isi kandungan:
Video: Hadoop Multi Node Cluster Setup | Hadoop Installation | Hadoop Administration Tutorial | Edureka 2024
Penyebaran tunggal rak Hadoop
Penyebaran satu rak adalah titik permulaan yang sesuai untuk kluster Hadoop.
Di sini, kumpulan itu cukup mandiri, tetapi kerana ia masih mempunyai beberapa simpul hamba, faedah sebenar ketahanan Hadoop belum lagi jelas.
Tiga rak rak Hadoop
Kelompok bersaiz sederhana mempunyai pelbagai rak, di mana tiga nod induk diedarkan di seluruh rak.
Daya tahan Hadoop mula menjadi nyata: Walaupun rak keseluruhan gagal (contohnya, kedua-dua ToR bertukar dalam satu rak), kumpulan itu akan tetap berfungsi, walaupun pada tahap prestasi yang lebih rendah. Kegagalan nod hamba hampir tidak dapat dilihat.
Pengeluaran Hadoop berskala besar
Di dalam kelompok yang lebih besar dengan banyak rak, seperti contoh yang ditunjukkan, seni bina rangkaian diperlukan sangat canggih.
Tanpa mengira berapa banyak rak rok Hadoop berkembang, nod hamba dari mana-mana rak perlu dapat bercakap dengan cekap ?? kepada mana-mana nod induk.
Oleh kerana bilangan nod hamba meningkat ke titik di mana anda mempunyai lebih daripada tiga rak, rak tambahan hanya terdiri daripada nod hamba, selain daripada suis ToR. Jika anda menggunakan HBase banyak pada kelompok anda, anda boleh menambah nod induk untuk menjadi tuan rumah perkhidmatan HMaster dan Zookeeper tambahan.
Jika anda bergraduat dengan skala yang sangat besar, di mana anda mempunyai beratus-ratus nod hamba, anda mungkin perlu menggunakan keupayaan federasi HDFS supaya sebahagian besar set data anda diuruskan oleh perkhidmatan NameNode yang berlainan.
Untuk setiap NameNode Aktif tambahan, anda memerlukan NameNode Siap sedia dan dua nod induk untuk menjadi tuan rumah pelayan ini. Dengan federasi HDFS, langit benar-benar had dari segi sejauh mana anda boleh mengetengahkan kelompok anda.
Kembali Seterusnya