Rumah Kewangan Peribadi Zookeeper dan HBase Reliability - dummies

Zookeeper dan HBase Reliability - dummies

Video: Hadoop Rack Awareness 2025

Video: Hadoop Rack Awareness 2025
Anonim

Zookeeper adalah kumpulan pelayan tersebar yang secara kolektif menyediakan perkhidmatan koordinasi dan penyegerakan yang boleh dipercayai untuk aplikasi berkelompok. Diakui, nama "Zookeeper" mungkin kelihatan pada mulanya menjadi pilihan yang ganjil, tetapi apabila anda memahami apa yang dilakukannya untuk kelompok HBase, anda dapat melihat logika di belakangnya. Apabila anda membina dan menyebarkan aplikasi yang diedarkan "ia adalah zoo di luar sana," jadi anda perlu meletakkan Zookeeper pada pasukan anda.

Kelompok HBase boleh menjadi besar dan menyelaraskan operasi MasterServers, RegionServers, dan pelanggan boleh menjadi tugas yang menakutkan, tetapi di sinilah Zookeeper memasuki gambar. Seperti dalam HBase, kluster Zookeeper lazimnya dijalankan pada pelayan komoditi murah x86.

Setiap pelayan x86 individu menjalankan satu proses perisian Zookeeper tunggal (selepas ini dirujuk sebagai pelayan Zookeeper), dengan satu pelayan Zookeeper yang dipilih oleh ensemble sebagai pemimpin dan seluruh pelayan adalah pengikut. Konvoi zookeeper dikawal oleh prinsip kuorum majoriti.

Konfigurasi dengan satu pelayan Zookeeper disokong untuk tujuan ujian dan pembangunan, tetapi jika anda menginginkan kelompok yang boleh dipercayai yang boleh mentolerir kegagalan pelayan, anda perlu menggunakan sekurang-kurangnya tiga pelayan Zookeeper untuk mencapai kuorum majoriti.

Jadi, berapa banyak pelayan Zookeeper yang anda perlukan? Lima adalah minimum yang disyorkan untuk penggunaan pengeluaran, tetapi anda benar-benar tidak mahu pergi dengan minimum yang terdedah. Apabila anda membuat keputusan untuk merancang ensemble Zookeeper anda, ikuti formula mudah ini: 2F + 1 = N di mana F adalah kegagalan yang boleh diterima dalam kumpulan Zookeeper anda dan N adalah jumlah pelayan Zookeeper yang anda mesti gunakan.

Lima disyorkan kerana satu pelayan boleh dimatikan untuk penyelenggaraan tetapi kelompok Zookeeper masih boleh mentolerir kegagalan pelayan.

Zookeeper menyediakan koordinasi dan penyegerakan dengan panggilan yang znodes , yang dibentangkan sebagai pokok direktori dan menyerupai nama laluan fail yang anda lihat dalam sistem fail Unix. Znodes lakukan data menyimpan tetapi tidak banyak yang boleh dibicarakan - kini kurang daripada 1 MB secara lalai.

Idea di sini ialah Zookeeper menyimpan znodes dalam ingatan dan bahawa znodes berasaskan memori ini memberikan akses klien yang cepat untuk koordinasi, status, dan fungsi penting lain yang diperlukan oleh aplikasi yang diedarkan seperti HBase. Zookeeper mereplikasi znodes merentasi ensemble supaya jika pelayan gagal, data znode masih tersedia selagi kuorum majoriti pelayan masih berjalan dan berjalan.

Satu lagi konsep Zookeeper utama yang berkaitan dengan bagaimana znode dibaca (versus writes) dikendalikan. Mana-mana pelayan Zookeeper boleh mengendalikan bacaan dari klien, termasuk pemimpin, tetapi hanya isu pemimpin yang menulis atom znode - menulis bahawa sama ada berjaya sepenuhnya atau gagal sepenuhnya.

Apabila permintaan menulis znode tiba di node pemimpin, pemimpin menyiarkan permintaan menulis kepada node pengikut dan kemudian menunggu majoriti pengikut mengakui menulis znode lengkap. Selepas pengakuan, pemimpin mengeluarkan znode menulis sendiri dan kemudian melaporkan status penyelesaian yang berjaya kepada klien.

Znodes menyediakan beberapa jaminan yang sangat berkuasa. Apabila klien Zookeeper (seperti HBase RegionServer) menulis atau membaca znode, operasi itu atom . Ia sama ada berjaya sepenuhnya atau gagal sepenuhnya - tidak ada bacaan atau menulis separa.

Tiada pelanggan lain yang bersaing boleh menyebabkan operasi membaca atau menulis gagal. Di samping itu, znode mempunyai senarai kawalan akses (ACL) yang dikaitkan dengannya untuk keselamatan, dan ia menyokong versi, cap waktu dan pemberitahuan kepada pelanggan apabila ia berubah.

Zookeeper mereplikasi znodes merentasi ensemble supaya jika pelayan gagal, data znode masih tersedia selagi kuorum majoriti pelayan masih berjalan dan berjalan. Ini bermakna yang menulis ke mana-mana znode dari mana-mana pelayan Zookeeper mesti disebarkan di seluruh ensemble. Pemimpin Zookeeper menguruskan operasi ini.

Pendekatan menulis znode ini boleh menyebabkan pengikut jatuh di belakang pemimpin untuk tempoh yang singkat. Zookeeper menyelesaikan masalah yang berpotensi ini dengan memberikan arahan penyegerakan. Pelanggan yang tidak boleh bertolak ansur dengan kekurangan penyegerakan sementara ini dalam kelompok Zookeeper mungkin memutuskan untuk mengeluarkan perintah penyegerakan sebelum membaca znodes.

Zookeeper dan HBase Reliability - dummies

Pilihan Editor

Kunci Panas untuk Rumusan Rumus Common Excel 2016 - dummies

Kunci Panas untuk Rumusan Rumus Common Excel 2016 - dummies

Anda mengaktifkan semua kunci panas 2016 2016 dengan menekan turun Alt key sebelum anda menaip pelbagai urutan huruf mnemonik. Semua urutan utama panas untuk memilih perintah yang berkaitan dengan formula yang biasa di Excel 2016x bermula dengan urutan Alt + M kerana M in forMulas adalah satu-satunya kunci mnemonik yang masih ada. ...

Bagaimana untuk Mengakses Perintah Editing Umum dalam Excel 2007 - dummies

Bagaimana untuk Mengakses Perintah Editing Umum dalam Excel 2007 - dummies

Kadang-kadang anda mahu membuat perubahan kepada maklumat yang anda masukkan ke dalam lembaran kerja dan buku kerja Excel 2007 (dipanggil spreadsheet di dunia di luar Excel). Apabila itu berlaku, anda boleh menggunakan kekunci panas berguna yang dibina dalam Excel 2007 atau mengakses arahan melalui tab Ribbon Excel yang baru di Excel 2007. Untuk mendapatkan ...

Pilihan Editor

Kenapa memerintahkan Photo Order melalui Web? - dummies

Kenapa memerintahkan Photo Order melalui Web? - dummies

Anda boleh memesan dan mengedarkan cetakan dari komputer anda. Snapfish, Shutterfly, dan laman web lain mempunyai perkhidmatan gambar berasaskan web yang boleh anda gunakan untuk berkongsi dan mencetak usaha terbaik anda. Secara teknikal, anda tidak memerlukan komputer atau kamera digital kerana anda sering boleh memuat naik gambar dari telefon bimbit atau tablet anda. Inilah sebabnya mengapa anda ...

Dapat Tahu Kawalan pada Kamera Digital Nikon D300s - dummies

Dapat Tahu Kawalan pada Kamera Digital Nikon D300s - dummies

Sepintas lalu apa yang dilakukan oleh beberapa kawalan luar pada Nikon D300s. Ingin memaparkan menu kamera? Tekan butang Menu. Tukar tetapan ISO anda? Tekan butang ISO. Tetapi banyak butang, panggilan, dan suis tidak mempunyai label teks - atau sebarang label sama sekali. Mereka kawalan luaran dilabelkan ...

Mencari pemidang optik kamera digital kanan - peminat

Mencari pemidang optik kamera digital kanan - peminat

Pemidang tilik optik kamera digital terang dan jelas, kuasa, dan membolehkan anda menyusun imej anda dengan cepat. Tetapi tidak semua viewfinder optik dicipta sama. Anda perlu menilai beberapa ciri pemidang tilik optik:

Pilihan Editor

Bagaimana Berikan Arahan dengan Geser Lukisan di Google SketchUp 8 - patmies

Bagaimana Berikan Arahan dengan Geser Lukisan di Google SketchUp 8 - patmies

Paksi lukisan adalah kunci untuk memahami bagaimana Google SketchUp berfungsi. Ringkasnya, anda menggunakan paksi lukisan SketchUp untuk mengetahui di mana anda berada (dan di mana anda mahu pergi) di ruang 3D. Apabila anda bekerja dengan paksi warna, anda perlu menyimpan tiga perkara penting dalam fikiran: Lukisan merah, hijau, dan biru ...

Bagaimana Memberi Model SketchUp Anda Sesetengah Gaya - dummies

Bagaimana Memberi Model SketchUp Anda Sesetengah Gaya - dummies

SketchUp Styles membolehkan anda mengubah penampilan model anda - cara ia ditarik, pada dasarnya - dengan hanya beberapa klik tetikus. Anda boleh membuat gaya anda sendiri, tentu saja, tetapi SketchUp juga dilengkapi dengan perpustakaan utama yang boleh digunakan tanpa mengetahui apa-apa tentang cara mereka bekerja. Ikuti langkah-langkah ini untuk ...

Cara Import Imej ke SketchUp - dummies

Cara Import Imej ke SketchUp - dummies

Ketika pemetaan foto ke muka rata, cara yang sukar. Malangnya, cara yang sukar adalah kaedah yang anda gunakan dengan menggunakan sebahagian besar masa. Mengimport imej dengan menggunakan menu Fail membolehkan anda mengambil sebarang imej dan memetakannya ke mana-mana muka rata dalam model anda. ...