ابزار و کتابخانه ها
-
آبان- 1397 -4 آبان
مدیریت گرافیکی پروژههای کلانداده با آپاچی نایفای
اگر قصد طراحی یک سامانه پردازش داده با ابزارهای متنوع متنباز امروزی مانند هدوپ، اسپارک، ایگنایت ، فلینک و مشابه…
بیشتر بخوانید » -
مهر- 1397 -27 مهر
گامی به جلو در استفاده تجاری از هدوپ
در 12 مهر ماه سالجاری دو شرکت بزرگ هورتونورکز و کلوداِرا رسما ادغام خود را اعلام کردند. خبری که نویدبخش…
بیشتر بخوانید » -
13 مهر
سامانههای پردازش جریان : استورم و هِرون
در ادامه سری آموزشی آشنایی با فریمورکهای پردازش جریان، در این مقاله به مروری بر آپاچی استورم و نسخه جدید…
بیشتر بخوانید » -
7 مهر
سامانههای پردازش جریان : اسپارک
در این مقاله ابتدا به بررسی معیارهای سنجش سامانه های پردازش جریان میپردازیم و سپس یکی از رایجترین این سامانهها…
بیشتر بخوانید » -
فروردین- 1397 -31 فروردین
نگاهی به امکانات هدوپ ۳ – بخش دوم
در ادامه بررسی امکانات جدید هدوپ ۳ که در بخش اول این نوشتار به آنها اشاره شد، در این مقاله…
بیشتر بخوانید » -
اسفند- 1396 -5 اسفند
نگاهی به تغییرات هدوپ در نسخه ۳ – بخش اول
در ماه های انتهایی سال ۲۰۱۷ بعد از چندین سال کار مداوم، نسخه ۳ هدوپ به صورت رسمی عرضه شد.…
بیشتر بخوانید » -
بهمن- 1396 -4 بهمن
آپاچی پولسار : رقیب تازه نفس کافکا
کافکا به عنوان یک سامانه توزیع پیام مقیاس پذیر، امروزه به یک استاندارد در طراحی سامانه های کلان اطلاعاتی و…
بیشتر بخوانید » -
آبان- 1396 -29 آبان
سیستم فایل پیشنهادی برای ذخیره و بازیابی میلیون ها فایل
یکی از خوانندگان عزیز سایت مهندسی داده، سوالی از بنده پرسیده بود که برای یک سامانه که نیاز به ذخیره…
بیشتر بخوانید » -
فروردین- 1396 -10 فروردین
آموزش اسپارک: مفاهیم پایه
مقدمه در ادامه مباحث آموزشی اسپارک، در این نوشتار به توضیح مفاهیم پایه اسپارک و چگونگی استفاده از آن درون…
بیشتر بخوانید » -
اسفند- 1395 -18 اسفند
نگاهی به روند رشد بسترهای پردازشی کلان داده
از سال ۲۰۰۴ که هدوپ به صورت رسمی معرفی و نسخه های عملیاتی آن برای عموم قابل استفاده شد تا…
بیشتر بخوانید »