Apache Hadoop başlangıçta Yahoo tarafından geliştirilen ve proje önceki Apache Hadoop Çekirdek ve Apache Hadoop Ortak repo arasında bir kombinasyonudur. Oldu
Hadoop projesi veri büyük miktarlarda işlemek için çoklu sunucu dağıtılmış bilgi işlem sisteminin uygulanmasında onun büyük sonuçlar şöhreti sayesinde bir çok kazanmıştır.
Proje kendisi aslında dört bölümden oluşmaktadır. Bir Hadoop Ortak, tüm diğer modüller çalışmasını sağlar sözde çekirdek, ikinci onun çok kendi dosya olduğunu - HDF'ler (Hadoop Dağıtılmış Dosya Sistemi), üçüncü Hadoop İPLİK zamanlama çerçevesi ve nihayet Hadoop MapReduce sistemi var paralel hesaplama desteklemek için.
Bu çığır açan sistemi kullanarak Apache gibi diğer birçok yan projeler yaratmayı başarmıştır:
- Apache Ambarı
- Apache Avro
- Apache Cassandra
- Apache HBase
- Apache Hive
- Apache Mahout
- Apache Domuz
- Apache Spark
- Apache Tez
- Apache Zookeeper
Tüm bunlar onların çekirdeğin bir yol ya da diğer modülleri birini entegre, Hadoop güçlü veri işleme motoruyla veya dağıtılmış bilgi işlem özelliklerine dayanmaktadır.
Ne yeni Bu sürümde :
- Arşiv Depolama için destek
- dinlenme şifreleme Şeffaf veri (beta)
- root erişimi gerektirmeden güvenli DataNode İşletim
- Hot swap sürücü: desteği veri düğümü (beta) yeniden başlatılmasına gerek kalmadan veri düğüm hacimleri ekleme / kaldırma
- hızlı kablo şifreleme için AES desteği
- İPLİK uzun çalışma hizmetleri için destek
- Destek düğüm etiketleri
- Kapasite Zamanlayıcı zamana dayalı kaynak rezervasyonları için destek (beta)
- Küresel, uygulama eserler için paylaşılan önbellek (beta)
- doğal Docker uygulamaların Destek çalışan kaplar (alfa)
planlaması sırasında
Hangi sürümü 2.7.1 yeni
- Arşiv Depolama için destek
- dinlenme şifreleme Şeffaf veri (beta)
- root erişimi gerektirmeden güvenli DataNode İşletim
- Hot swap sürücü: desteği veri düğümü (beta) yeniden başlatılmasına gerek kalmadan veri düğüm hacimleri ekleme / kaldırma
- hızlı kablo şifreleme için AES desteği
- İPLİK uzun çalışma hizmetleri için destek
- Destek düğüm etiketleri
- Kapasite Zamanlayıcı zamana dayalı kaynak rezervasyonları için destek (beta)
- Küresel, uygulama eserler için paylaşılan önbellek (beta)
- doğal Docker uygulamaların Destek çalışan kaplar (alfa)
planlaması sırasında
Hangi sürümü 2.7.0 yeni
- Arşiv Depolama için destek
- dinlenme şifreleme Şeffaf veri (beta)
- root erişimi gerektirmeden güvenli DataNode İşletim
- Hot swap sürücü: desteği veri düğümü (beta) yeniden başlatılmasına gerek kalmadan veri düğüm hacimleri ekleme / kaldırma
- hızlı kablo şifreleme için AES desteği
- İPLİK uzun çalışma hizmetleri için destek
- Destek düğüm etiketleri
- Kapasite Zamanlayıcı zamana dayalı kaynak rezervasyonları için destek (beta)
- Küresel, uygulama eserler için paylaşılan önbellek (beta)
- doğal Docker uygulamaların Destek çalışan kaplar (alfa)
planlaması sırasında
Hangi sürümü 2.6.0 yeni
- Arşiv Depolama için destek
- dinlenme şifreleme Şeffaf veri (beta)
- root erişimi gerektirmeden güvenli DataNode İşletim
- Hot swap sürücü: desteği veri düğümü (beta) yeniden başlatılmasına gerek kalmadan veri düğüm hacimleri ekleme / kaldırma
- hızlı kablo şifreleme için AES desteği
- İPLİK uzun çalışma hizmetleri için destek
- Destek düğüm etiketleri
- Kapasite Zamanlayıcı zamana dayalı kaynak rezervasyonları için destek (beta)
- Küresel, uygulama eserler için paylaşılan önbellek (beta)
- doğal Docker uygulamaların Destek çalışan kaplar (alfa)
planlaması sırasında
sürüm 2.5.0 yeni Nedir:.
- Kimlik iyileştirmeler bir HTTP vekil sunucusu kullanarak
- grafit doğrudan yazmaya olanak yeni Hadoop Ölçütleri lavabo.
- Hadoop Uyumlu Dosya Sistemi çaba için şartname.
- POSIX tarzı dosya sistemi genişletilmiş özellikler için destek.
- OfflineImageViewer WebHDFS API üzerinden bir fsimage göz atın.
- Desteklenebilirlik iyileştirmeler ve hata düzeltmeleri.
- Modernize web UI (HTML5 ve JavaScript).
- İplik REST API'leri destek sunulması ve uygulamaları öldürme.
- Kerberos entegrasyonu.
NFS ağ geçidine
HDF'ler cinleri için
İplik zaman çizelgesi deposu için
sürüm 2.4.0 yeni Nedir:
- Access Control desteği HDF'ler içinde Listeleri
- HDF'ler Rolling Yükseltmeler için yerel destek
- pürüzsüz operasyonel yükseltmeleri için HDF'ler FSImage için protokol tamponların kullanımı
- HDF'ler Komple HTTPS desteği
- İPLİK ResourceManager Otomatik Failover için destek
- geliştirilmiş destek
- Preemption aracılığıyla İPLİK CapacityScheduler güçlü SLA Destek
Uygulama Tarihi Sunucusu ve Uygulama Timeline Sunucusu İPLİK yeni uygulamalar için
sürüm 2.3.0 yeni Nedir:.
- HDF'ler Heterojen Depolama hiyerarşi için destek
- merkezi idare ve yönetim ile HDF'ler veri olarak bellekten.
- İPLİK Distributed Cache HDF'ler aracılığıyla MapReduce çiftlerin Basitleştirilmiş dağılımı.
Hangi sürümü 2.2.0 yeni
- İPLİK - Hadoop için genel amaçlı kaynak yönetim sistemi MapReduce ve diğer diğer veri işleme çerçeveler ve hizmetlerini sağlamak için
- HDF'ler için Yüksek Kullanılabilirlik
- HDF'ler Federasyonu
- HDF'ler Anlık
- HDF'ler verilere NFSv3 erişimi
sürüm 2.1.0-beta yeni Nedir:
- HDF'ler Anlık
- Microsoft Windows Hadoop çalışan için destek
- İPLİK API stabilizasyon
sürüm 2.0.3-alfa yeni Nedir:
- NameNode için HDF'ler HA
İPLİK- Çok kaynak planlaması (CPU ve bellek)
- İPLİK ResourceManager Yeniden
- İPLİK için ölçekte önemli kararlılık (30.000 'den fazla düğümleri ve 14 milyon uygulamaları bugüne kadar, verildiği tarihteki)
sürüm 1.0.0 yeni Nedir:.
- Daha iyi güvenlik
- HBase (/ hsynch / hflush ve güvenlik ekleme).
- webhdfs.
- Hbase için yerel dosyalara Performans gelişmiş erişim.
- Diğer performans geliştirmeleri, hata düzeltmeleri ve özellikleri.
(Güvenlik için tam destek ile)
Hangi sürümü 0.20.2 yeni
- RPC Sunucusu gönderim tamponu korur büyük tepki boyutu hiç gönderdi.
- C ++ kütüphaneleri Debian Lenny üzerine inşa yoktur.
- Bazı c ++ komut dosyaları karınca çalıştırılmadan önce chmodded değildir.
- Akış:. Süreci sağlanan durum mesajları her 10 seoncds yazılır
- IllegalArgumentException.
- Birden böcek Hadoop arşivleri w /.
- dosya sistemi örneklerinin önbelleğe bir örnek başına bazında devre dışı bırakılması için izin ver.
- Configuration.addResource içinde defaultResources için senkronizasyonu eksik.
- GzipCodec decompressorType olarak BuiltInZlibInflater temsil etmemelidir.
- NameNode en HTTPServer InetSocketAddress başlatamazsınız: IllegalArgumentException atılır .
- HTTPServer negatif değerleri ile uyur.
- Namenode nedeniyle ipc Server bellek sızıntısı bellek out çalışır.
- .
- Başarısız testleri yürütme test hedeflerinin kalanını engeller.
- Katkı testleri Clover'ed inşa başarısız.
- Testler 0.20 dalda çalıştırmayın.
- TestStreamingStatus 0.20 dalda başarısız oluyor.
CombineFileInputFormat iş InputFormat olarak kullanılan
IPC istemci hata rpc çağrı askıda neden olabilir
Yorum Bulunamadı