Apache Pig

Apache Pig Apache Hadoop layihə spawned və emal olunan və saxlanılan məlumatları təhlil etmək üçün bir yol təmin məsul harada onun modulları biridir.
Pig öyrənmək üçün olduqca asan və hər iki relational və funksional üslub dəstəkləyir "Donuz Latın" adlı xüsusi sorğu dil istifadə edir.
Bu data faydalanan bir klassik SQL dil qoşulur və filtreler, və ya onun MapReduce xüsusiyyətləri, data mappers və reduktorlar istifadə edə bilərsiniz kimi istifadə edə bilərsiniz deməkdir.
Mənim cari olaraq Apache Pig Hadoop qurğular daxili istifadə üçün nəzərdə, lakin yeni versiyasını ayrı bir JVM vasitəsilə ayrı-ayrı run imkan

Bu azad Yeni nədir.

• Pluggable icra mühərrikləri (gələcəkdə qeyri-mapreduce motorlarında donuz run imkan)
(in-proses çalıştırmak üçün kiçik input data ölçüsü ilə iş) Auto-yerli rejimi
• optimallaşdırılması Fetch (xortultu interactiveness yaxşılaşdırılması üçün)

Yerli rejimi üçün
• Sabit counters
• istifadəçi səviyyəli jar cache üçün Support
• donuz əmrləri qara siyahıya və ağ liste üçün Support
• Bir neçə performans giderir və debuggability xüsusiyyətləri
• A neçə qeyri-geri uyğun interface dəyişikliklər qeyri-mapreduce mühərrikləri ilə donuz iş üçün bu azad təqdim edilmişdir

versiyası 0.14.0 yeni nədir: qeyri

• Pluggable icra mühərrikləri (imkan donuz run gələcəkdə -mapreduce mühərrikləri)
(in-proses çalıştırmak üçün kiçik input data ölçüsü ilə iş) Auto-yerli rejimi
• optimallaşdırılması Fetch (xortultu interactiveness yaxşılaşdırılması üçün)

Yerli rejimi üçün
• Sabit counters
• istifadəçi səviyyəli jar cache üçün Support
• donuz əmrləri qara siyahıya və ağ liste üçün Support
• Bir neçə performans giderir və debuggability xüsusiyyətləri
• A neçə qeyri-geri uyğun interface dəyişikliklər qeyri-mapreduce mühərrikləri ilə donuz iş üçün bu azad təqdim edilmişdir

nədir versiyası 0.11.0 Yeni

• Bu azad daxildir DateType datatype, RANK, CUBE və toplaması operatorları, Groovy UDFs, xüsusi reduktor qiymətləndirilməsi, şeması-based tuples və HCatalog DDL inteqrasiya.

nədir versiyası 0.9.1 Yeni:.

• Bu azad Hadoop 0,20 ilə işləyir

versiyası 0.6 yeni nədir:

• bir contrib layihə kimi Added Zebra. Bax http://wiki.apache.org/pig/zebra
• Added UDFContext, UDFs son geri ön info keçmək üçün bir yol verir və backend JobConf üçün UDFs imkanı verir.
• Added parça kopya qoşulmaq üçün xarici qoşulmaq ayrıldı.
• Donuz Latın iş prioritet təyin etmək imkanı əlavə edilib.
• ilə işləmək üçün Enhanced multi-query bəzi hallarda qoşulur.
• Reworked yaddaş meneceri əhəmiyyətli Heap uğursuzluqlar GC yerüstü və Out azaltmaq üçün.
• UDFs üçün əlavə Akkumulyator interface.

100 hata düzeltmelerini və təkmilləşdirilməsi ərzində
• .

tələblər

• Java 1.6.x və ya daha yüksək
• Apache Hadoop 0.20.x və ya daha yüksək