Apache Hadoop

Böyük məlumatlar, axtarış motorları, bazar kartları vasitəsilə izlənilən baqqal alış nümunələri və s. kimi mənbələrdən əldə edilən məlumatların minalı ideyasını əhatə edən bir marketinq terminidir. Müasir dünyada internet Məlumatların qaynaqları, daha çox miqyasda emal və emal edilmədən istifadə edilə bilməz hala gətirə bilən məlumat bazaları, hər hansı bir server tərəfindən inanılmaz miqdarda vaxt aparacaq. Apache Hadoop'u daxil edin

Hadoop arxitekturasını bir şəbəkədə birdən çox maşın üzərində işləmə vəzifələrini yaymaq üçün istifadə edərək, işləmə müddəti astronomik olaraq azalır və cavablar kifayət qədər vaxt ərzində müəyyən edilə bilər. Apache Hadoop iki ayrı komponentə bölünür: bir saxlama komponenti və bir emal komponenti. Sadə şərtlərlə Hapood çox fiziki maşından bir virtual server yaradır . Hadoop, həqiqətən, birdən çox maşın arasındakı ünsiyyəti idarə edir, beləliklə onlar hesablamalara işləyən yalnız bir maşın olduğu kimi göründüyü qədər sıx şəkildə işləyirlər. Data birdən çox maşın arasında yayımlanır emal vəzifələri Hadoop memarlığı tərəfindən ayrılmış və əlaqələndirilmişdir

. Sistemin bu növü böyük məlumatların böyük məlumatların ölçüsündə faydalı məlumatlara çevrilməsinin zəruriliyidir. Axtarış sorğularına girən istifadəçilərdən hər saniyə Google tərəfindən alınan məlumatların sayını nəzərə alın. Məlumatların ümumi bir hissəsi olaraq, nereden başlayacağınızı bilməyəcəksiniz, amma Hadoop data dəstini avtomatik olaraq kiçik, mütəşəkkil məlumat alt kümelerine çevirir və bu idarəedici alt kümeyi xüsusi resurslara təyin edir. Bütün nəticələr daha sonra bildirilir və lazımi məlumatlara yığılır.

Sadə bir server qurmaq

Sistemin kompleks səslənməsinə baxmayaraq hərəkət edən hissələrin əksəriyyəti soyuducuya arxalanır. Hadoop serverini qurmaq olduqca sadədir , server komponentlərini sistem tələblərinə cavab verən avadanlıqlara bərpa edin. Daha çox hissəsi kompüter şəbəkəsini planlaşdırır , Hadoop server saxlama və emal rollarını yaymaq üçün istifadə edəcəkdir. Bu, bir lokal şəbəkə qurmaq və ya birdən çox şəbəkəni internet üzərindən birləşdirən daxil ola bilər. Mövcud bulud xidmətlərindən də istifadə edə bilərsiniz və Microsoft Azure və Amazon EC2 kimi populyar bulud platformalarında bir Hadoop klasterini ödəyə bilərsiniz. Bunları ad hocu spin edə biləcəyiniz kimi konfiqurasiya etmək daha asandır və daha sonra onlara ehtiyacınız olmadıqda klasterləri aradan qaldırmaq mümkündür.

2 Apr 18