Apache Pig Apache Hadoop projeden kökenli ve işlenen ve saklanan verileri analiz etmek için bir yol sağlayan sorumlu nerede onun modüllerinden birisidir.
Domuz öğrenmek için son derece kolaydır ve hem ilişkisel ve işlevsel stillerini destekler "Domuz Latin" adlı özel bir sorgu dilini kullanır.
Bu verilerden yararlanan bir klasik SQL dili katılır ve filtreler veya onun MapReduce özelliklerini, veri haritacılarla ve redüktörleri kullanabilirsiniz olarak kullanabileceğiniz anlamına gelir.
Varsayılan olarak, Apache Domuz Hadoop kurulumları içinde kullanılan olması gerekiyordu, ama daha yeni sürümleri ayrı bir JVM üzerinden ayrı çalışmasına izin
Bu sürümde Yeni nedir:.
- Takılabilir yürütme motorları (ileride dışı MapReduce motorlarında domuz çalışmasını sağlamak için)
- (süreç çalıştırmak için küçük giriş veri boyutu ile işlere) Otomatik mod yerel
- optimizasyon çeker (homurtu interactiveness iyileştirmek için)
- Sabit sayaçları
- kullanıcı düzeyi kavanoz cache desteği
- domuz komutları kara listeye ve beyaz liste için destek
- Çeşitli performans düzeltmeleri ve debuggability özellikleri
- Bir kaç olmayan geriye doğru uyumlu arayüz değişiklikleri olmayan MapReduce motorları ile domuz iş yapmak için bu sürümde girmiştir
Yerel mod için
sürümünde 0.14.0 yeni nedir: non
- Takılabilir yürütme motorları (izin domuz koşmak Gelecekte -mapreduce motorlar)
- (süreç çalıştırmak için küçük giriş veri boyutu ile işlere) Otomatik mod yerel
- optimizasyon çeker (homurtu interactiveness iyileştirmek için)
- Sabit sayaçları
- kullanıcı düzeyi kavanoz cache desteği
- domuz komutları kara listeye ve beyaz liste için destek
- Çeşitli performans düzeltmeleri ve debuggability özellikleri
- Bir kaç olmayan geriye doğru uyumlu arayüz değişiklikleri olmayan MapReduce motorları ile domuz iş yapmak için bu sürümde girmiştir
Yerel mod için
nedir sürümü 0.11.0 Yeni
- Bu sürüm içerir DateType veri türü, RANK, KÜP ve ROLLUP operatörler, Groovy UDF'leri, özel redüktör tahmini, şema tabanlı küpe ve HCatalog DDL entegrasyonu.
nedir sürümü 0.9.1 Yeni:.
- Bu sürüm Hadoop'un 0.20 ile çalışır
sürümünde 0.6 yeni Nedir:
- contrib projesi olarak eklendi Zebra. Bkz http://wiki.apache.org/pig/zebra
- Eklendi UDFContext, UDFs sonu önden arkaya doğru bilgi aktarmak için bir yol verir ve arka uç JobConf için UDFS erişim sağlar.
- Eklendi fragmanı çoğaltmak katılmak için dış birleşim bıraktı.
- Domuz Latin iş önceliğini ayarlamak için yeteneği eklendi.
- çalışmak için Geliştirilmiş çoklu sorgu bazı durumlarda katıldı.
- Reworked bellek yöneticisi anlamlı Öbek başarısızlıklarının GC Tepegöz ve Out azaltmak için.
- UDF için eklendi Akümülatör arabirimi.
- .
100 hata düzeltmeleri ve iyileştirmeler üzerinde
Gereksinimleri
- Java 1.6.x veya daha yüksek
- Apache Hadoop 0.20.x veya daha yüksek
Yorum Bulunamadı