Video: hadoop yarn architecture 2024
Dalam mana-mana projek Hadoop yang serius, anda harus bermula dengan mengetuai IT dengan pemimpin perniagaan dari VP untuk membantu selesaikan titik kesakitan perniagaan anda - masalah-masalah itu (nyata atau dirasakan) yang semakin besar dalam fikiran semua orang.
Perniagaan mahu melihat nilai dari pelaburan TI mereka, dan dengan Hadoop, ia mungkin datang dengan pelbagai cara. Contohnya, anda boleh mengejar projek yang matlamatnya adalah untuk mewujudkan kos perlesenan dan penyimpanan yang lebih rendah untuk data gudang atau untuk mencari wawasan dari analisa data berskala besar. Cara terbaik untuk meminta sumber dana untuk membiayai projek Hadoop yang menarik ialah dengan bekerja dengan pemimpin perniagaan anda.
Juga mengkaji perspektif orang dan proses yang mengamalkan Hadoop dalam organisasi anda. Penyebaran Hadoop cenderung paling berjaya apabila pengangkut membuat usaha untuk menciptakan budaya yang mendukung ilmu data dengan memupuk eksperimen dan penerokaan data. Sudah cukup, selepas anda telah mencipta gugusan Hadoop, anda masih mempunyai tugas yang perlu dilakukan - anda masih perlu membolehkan orang untuk bereksperimen secara mudah.
Secara praktiknya, anda harus mengawasi tiga tujuan penting berikut:
-
Pastikan pengguna dan penganalisis perniagaan anda mempunyai akses sebanyak mungkin sebanyak mungkin. Sudah tentu, anda masih perlu menghormati keperluan pengawalseliaan untuk kriteria seperti privasi data.
-
Mandat bahawa pemaju Hadoop anda mendedahkan logiknya supaya hasilnya dapat diakses melalui alat standard dalam organisasi anda. Logik dan apa-apa keputusan mesti terus digunakan dengan mudah dan boleh diguna semula.
-
Kenali keperluan tadbir urus untuk data yang anda merancang untuk disimpan di Hadoop. Mana-mana data di bawah kawalan tadbir dalam sistem pengurusan pangkalan data relasi (RDBMS) juga perlu berada di bawah kawalan yang sama di Hadoop. Lagipun, maklumat yang diiktiraf secara peribadi mempunyai keperluan privasi yang sama tidak kira di mana ia disimpan. Sudah cukup, anda harus memastikan bahawa anda boleh lulus audit data untuk kedua-dua RDBMS dan Hadoop!
Apabila anda menggabungkan Hadoop dengan perniagaan yang lebih luas dan repositorinya seperti pangkalan data dan kedai dokumen, anda boleh membina gambaran yang lebih lengkap tentang apa yang berlaku dalam perniagaan anda. Sebagai contoh, analisis sentimen sosial yang dilakukan di Hadoop mungkin memberi anda tanda kepada apa yang dikatakan oleh orang-orang , tetapi adakah anda tahu mengapa mereka mengatakannya?
Konsep ini memerlukan pemikiran di luar Hadoop dan menghubungkan sistem rekod syarikat anda (jualan, misalnya) dengan sistem penglibatannya (seperti rekod pusat panggilan - data di mana anda boleh menarik sentimen daripada).
