İçindekiler:
Video: Gıda Endüstrisinde Yeni Teknoloji: PEF 2024
Tek raflı Hadoop kurulumu
Tek rafa kurulum Hadoop kümesi için ideal bir başlangıç noktasıdır.
Burada, küme oldukça kendi içinde bulunuyor, ancak hala nispeten az sayıda bağımlı düğüm içerdiğinden Hadoop'un esnekliğinin gerçek faydaları henüz belli değil.
2 3
Üç raflı Hadoop kurulumu
Orta büyüklükte bir kümede, üç ana düğümün raflara dağıtıldığı birden çok raf bulunur.
Hadoop'un esnekliği belirginleşmeye başladı: Bir rafın tamamı başarısız olsa bile (örneğin, her iki TO Tekli raf anahtarları), küme, daha düşük bir performans seviyesinde olsa da yine de çalışacaktı. Bir bağımlı düğümün başarısızlığı belirgin bir şekilde fark edilebilir.
3 3
3
Büyük ölçekli Hadoop kurulumu
Gösterilen örnekte olduğu gibi çok sayıda raflı daha büyük kümelerde, gerekli ağ mimarisi oldukça sofistike.
Hadoop kümelerinin ne kadar rafa açıldığına bakılmaksızın, herhangi bir platformdaki köle düğümleri verimli bir şekilde konuşabiliyor olmalı? Herhangi bir ana düğüme.
Köle düğüm sayısı arttıkça üç raftan daha fazlasına sahip olursunuz, ek raflar ToR anahtarlarının yanısıra yalnızca bağımlı düğümlerden oluşur. HBase'i kümenizde yoğun olarak kullanıyorsanız, ek HMaster ve Zookeeper hizmetlerini barındırmak için ana düğümler ekleyebilirsiniz.
Eğer yüzlerce köle düğümü bulunduğunda gerçekten büyük bir ölçeğe geçerseniz, veri kümelerinizin büyük bölümlerinin farklı NameNode hizmetleri tarafından idare edilebilmesi için HDFS federasyon yeteneklerini kullanmanız gerekebilir.
Her ek Active NameNode için, bu sunucuları barındıracak karşılık gelen bir Standby NameNode ve iki ana düğüme ihtiyacınız olacaktır. HDFS federasyonu ile gökyüzü, kümelerinizi ne kadar büyütebileceğiniz konusunda gerçekten bir sınır. Geri İleri
