Rumah Kewangan Peribadi Zookeeper dan HBase Reliability - dummies

Zookeeper dan HBase Reliability - dummies

Video: Hadoop Rack Awareness 2025

Video: Hadoop Rack Awareness 2025
Anonim

Zookeeper adalah kumpulan pelayan tersebar yang secara kolektif menyediakan perkhidmatan koordinasi dan penyegerakan yang boleh dipercayai untuk aplikasi berkelompok. Diakui, nama "Zookeeper" mungkin kelihatan pada mulanya menjadi pilihan yang ganjil, tetapi apabila anda memahami apa yang dilakukannya untuk kelompok HBase, anda dapat melihat logika di belakangnya. Apabila anda membina dan menyebarkan aplikasi yang diedarkan "ia adalah zoo di luar sana," jadi anda perlu meletakkan Zookeeper pada pasukan anda.

Kelompok HBase boleh menjadi besar dan menyelaraskan operasi MasterServers, RegionServers, dan pelanggan boleh menjadi tugas yang menakutkan, tetapi di sinilah Zookeeper memasuki gambar. Seperti dalam HBase, kluster Zookeeper lazimnya dijalankan pada pelayan komoditi murah x86.

Setiap pelayan x86 individu menjalankan satu proses perisian Zookeeper tunggal (selepas ini dirujuk sebagai pelayan Zookeeper), dengan satu pelayan Zookeeper yang dipilih oleh ensemble sebagai pemimpin dan seluruh pelayan adalah pengikut. Konvoi zookeeper dikawal oleh prinsip kuorum majoriti.

Konfigurasi dengan satu pelayan Zookeeper disokong untuk tujuan ujian dan pembangunan, tetapi jika anda menginginkan kelompok yang boleh dipercayai yang boleh mentolerir kegagalan pelayan, anda perlu menggunakan sekurang-kurangnya tiga pelayan Zookeeper untuk mencapai kuorum majoriti.

Jadi, berapa banyak pelayan Zookeeper yang anda perlukan? Lima adalah minimum yang disyorkan untuk penggunaan pengeluaran, tetapi anda benar-benar tidak mahu pergi dengan minimum yang terdedah. Apabila anda membuat keputusan untuk merancang ensemble Zookeeper anda, ikuti formula mudah ini: 2F + 1 = N di mana F adalah kegagalan yang boleh diterima dalam kumpulan Zookeeper anda dan N adalah jumlah pelayan Zookeeper yang anda mesti gunakan.

Lima disyorkan kerana satu pelayan boleh dimatikan untuk penyelenggaraan tetapi kelompok Zookeeper masih boleh mentolerir kegagalan pelayan.

Zookeeper menyediakan koordinasi dan penyegerakan dengan panggilan yang znodes , yang dibentangkan sebagai pokok direktori dan menyerupai nama laluan fail yang anda lihat dalam sistem fail Unix. Znodes lakukan data menyimpan tetapi tidak banyak yang boleh dibicarakan - kini kurang daripada 1 MB secara lalai.

Idea di sini ialah Zookeeper menyimpan znodes dalam ingatan dan bahawa znodes berasaskan memori ini memberikan akses klien yang cepat untuk koordinasi, status, dan fungsi penting lain yang diperlukan oleh aplikasi yang diedarkan seperti HBase. Zookeeper mereplikasi znodes merentasi ensemble supaya jika pelayan gagal, data znode masih tersedia selagi kuorum majoriti pelayan masih berjalan dan berjalan.

Satu lagi konsep Zookeeper utama yang berkaitan dengan bagaimana znode dibaca (versus writes) dikendalikan. Mana-mana pelayan Zookeeper boleh mengendalikan bacaan dari klien, termasuk pemimpin, tetapi hanya isu pemimpin yang menulis atom znode - menulis bahawa sama ada berjaya sepenuhnya atau gagal sepenuhnya.

Apabila permintaan menulis znode tiba di node pemimpin, pemimpin menyiarkan permintaan menulis kepada node pengikut dan kemudian menunggu majoriti pengikut mengakui menulis znode lengkap. Selepas pengakuan, pemimpin mengeluarkan znode menulis sendiri dan kemudian melaporkan status penyelesaian yang berjaya kepada klien.

Znodes menyediakan beberapa jaminan yang sangat berkuasa. Apabila klien Zookeeper (seperti HBase RegionServer) menulis atau membaca znode, operasi itu atom . Ia sama ada berjaya sepenuhnya atau gagal sepenuhnya - tidak ada bacaan atau menulis separa.

Tiada pelanggan lain yang bersaing boleh menyebabkan operasi membaca atau menulis gagal. Di samping itu, znode mempunyai senarai kawalan akses (ACL) yang dikaitkan dengannya untuk keselamatan, dan ia menyokong versi, cap waktu dan pemberitahuan kepada pelanggan apabila ia berubah.

Zookeeper mereplikasi znodes merentasi ensemble supaya jika pelayan gagal, data znode masih tersedia selagi kuorum majoriti pelayan masih berjalan dan berjalan. Ini bermakna yang menulis ke mana-mana znode dari mana-mana pelayan Zookeeper mesti disebarkan di seluruh ensemble. Pemimpin Zookeeper menguruskan operasi ini.

Pendekatan menulis znode ini boleh menyebabkan pengikut jatuh di belakang pemimpin untuk tempoh yang singkat. Zookeeper menyelesaikan masalah yang berpotensi ini dengan memberikan arahan penyegerakan. Pelanggan yang tidak boleh bertolak ansur dengan kekurangan penyegerakan sementara ini dalam kelompok Zookeeper mungkin memutuskan untuk mengeluarkan perintah penyegerakan sebelum membaca znodes.

Zookeeper dan HBase Reliability - dummies

Pilihan Editor

Cara Menggunakan Topsify dengan Spotify - dummies

Cara Menggunakan Topsify dengan Spotify - dummies

Topsify adalah alat yang boleh anda gunakan dengan Spotify untuk mengakses Top 40 senarai main di Amerika Syarikat, United Kingdom, dan Sweden. Ingat berbaring di atas lantai dengan perekam pita dan radio yang disetel ke Top 40 Countdown, hanya bergerak untuk menekan jeda untuk memotong ...

Bagaimana Menggunakan Tubufy dengan Spotify - dummies

Bagaimana Menggunakan Tubufy dengan Spotify - dummies

Anda boleh menggunakan Tubufy dari dalam Spotify untuk mencari dan memainkan video YouTube . Jika anda tidak tahu apa perkataan aneh ini, Tubufy, cara atau cara untuk mengucapkannya, hanya tambah e ke suku kata pertama - Tube. Seperti di YouTube. Geddit? Tubufy mengisikan dirinya sebagai "Spotify dengan video. "Sisipkan senarai main Anda Spotify Uniform Resource ...

Pilihan Editor

Dari Kotak Dialog ShapeMaker QuarkXPress - dummies

Dari Kotak Dialog ShapeMaker QuarkXPress - dummies

Dalam QuarkXPress, kotak dialog ShapeMaker menyediakan tab untuk membuat gelombang , poligon, spiral, dan segi empat tepat. Untuk melancarkan ShapeMaker, pilih Utilities → ShapeMaker. Tab di bahagian atas kotak dialog ShapeMaker membolehkan anda bertukar kepada pilihan membuat bentuk yang berbeza (gelombang, poligon, spiral, dan segi empat tepat) serta tab Praset untuk membuat dan mengurus bentuk yang telah diprogram ...

Menggunakan Pintasan Papan Kekunci Pencetak untuk Pemformatan dan Penyuntingan - makmal

Menggunakan Pintasan Papan Kekunci Pencetak untuk Pemformatan dan Penyuntingan - makmal

Berfungsi dengan cepat semasa memformat atau mengedit dokumen anda dalam Penjenayah dengan menggunakan pintasan papan kekunci dalam jadual ini. Mahu membuat beberapa teks berani tanpa menggunakan bar alat? Perlu mencari sesuatu dalam dokumen itu? Pintasan ini dapat melakukannya. Kawalan Penyuntingan Scrivener Command Mac Shortcut Windows Shortcut Bold Command key + B Ctrl + B Italic Command ...

Pilihan Editor

Bagaimana Menghilangkan Mata Merah di Photoshop CS6 - dummies

Bagaimana Menghilangkan Mata Merah di Photoshop CS6 - dummies

Photoshop CS6 menawarkan penyelesaian kepada menyingkirkan mata merah yang ditakuti. Merah-mata berlaku apabila subjek gambar kelihatan terus ke dalam kilat, dan hasil yang malangnya adalah pendarahan kemerahan kemerahan di mata yang berkata, "Saya mungkin sangat baik sebagai anak iblis. "Banyak kamera mempunyai mod pencegahan mata merah, ...

Bagaimana untuk mendapatkan warna yang konsisten di Photoshop, Illustrator, dan InDesign CS6 - dummies

Bagaimana untuk mendapatkan warna yang konsisten di Photoshop, Illustrator, dan InDesign CS6 - dummies

Dengan kedatangan Adobe Bridge, mendapatkan warna yang konsisten di Photoshop, Illustrator, InDesign, dan di semua aplikasi Creative Suite anda hanyalah klik butang. Ikuti langkah-langkah berikut: Cuma lancarkan Jambatan dan pilih Edit → Tetapan Warna Suite Kreatif. Dalam kotak dialog Seting Warna Suite, anda boleh memberitahu sama ada tetapan warna merentasi ...

Bagaimana Format Perenggan di Photoshop CS6 - dummies

Bagaimana Format Perenggan di Photoshop CS6 - dummies

Anda boleh menggunakan panel Paragraph di Photoshop CS6 untuk memformat mana-mana atau semua perenggan dalam lapisan jenis. Pilih Window → Perenggan atau Jenis → Panel → Panel Perenggan. Cukup pilih perenggan atau perenggan yang anda ingin format dengan mengklik perenggan individu dengan alat Ketik. Anda boleh menyeret pilihan untuk memilih berbilang perenggan, atau dalam ...