Video: Analytics in Monetization | Implement a Monetization Strategy | App Monetization | Udacity 2024
Yahoo! gibi arama motoru yenilikleri! ve Google bir bataklık veri sorunu ile karşı karşıyaydı. Motorlarının topladığı muazzam miktarda veriyi anlamanın bir yolunu bulmaları gerekiyordu. Bu şirketlerin hem hangi bilgileri topladıklarını hem de bu verileri işletme modellerini desteklemek için nasıl para kazanabileceğini anlamaları gerekiyor.
Hadoop, şirketlerin büyük hacimli veriyi kolayca yönetmelerine olanak tanıyan en pratik yolu temsil ettiği için geliştirildi. Hadoop, büyük problemlerin daha küçük unsurlara bölünmesine ve böylelikle analizin hızlı ve ekonomik bir şekilde yapılmasına izin verdi.
Büyük veri problemini paralel olarak işleyebilecek küçük parçalara ayırarak, bilgileri işleyebilir ve sonuçları sunmak için küçük parçaları yeniden gruplandırabilirsiniz.
Hadoop başlangıçta bir Yahoo! tarafından inşa edildi! Doug Cutting adlı mühendislik görevini üstlendi ve şu anda Apache Software Foundation tarafından yönetilen bir açık kaynak projesi. Apache Lisansı v2 kapsamında sağlanır. 0.
Hadoop, büyük verileri yakalama ve işleme isteğimizin temel bir yapı taşıdır. Hadoop, hesaplamaları hızlandırmak ve gecikmeyi gizlemek için bilgi işlem düğümlerinde veri işlemeyi paralel hale getirmek üzere tasarlanmıştır. Özünde, Hadoop'un iki temel bileşeni vardır:
-
Hadoop Dağıtılmış Dosya Sistemi: Makineler arasında ilgili dosyaların yönetimini kolaylaştıran güvenilir, yüksek bant genişliği ve düşük maliyetli bir veri depolama kümesi.
-
MapReduce engine: MapReduce algoritmasının yüksek performanslı bir paralel / dağıtılmış veri işleme uygulaması.
Hadoop, çok miktarda yapılandırılmış ve yapılandırılmamış verileri (terabaytan petabayt'a) işlemek üzere tasarlanmıştır ve emtia sunucularının raflarında bir Hadoop kümesi olarak uygulanmaktadır. Sunucular, dinamik olarak küme eklenebilir veya kaldırılabilir, çünkü Hadoop "kendini iyileştirici" olarak tasarlanmıştır. "Diğer bir deyişle, Hadoop arızalar da dahil olmak üzere değişiklikleri algılayabiliyor ve bu değişikliklere uyum sağlayabiliyor ve kesintisiz çalışmaya devam edebiliyor.