خانه / کلان داده / معماری های اطلاعاتی

معماری های اطلاعاتی

معماری های اطلاعاتی استفاده شونده در راه حل های حوزه کلان داده

آشنایی با معماری‌های داده در طراحی سامانه‌های جریان‌پرداز

در این مقاله به بررسی دو معماری مطرح در حوزه کلان‌داده برای طراحی سیستم‌های اطلاعاتی یعنی معماری لامبدا و کاپا می‌پردازیم و با جنبه‌های مختلف آنها آشنا خواهیم شد.

ادامه مطلب »

نگاهی به مفاهیم و ابزار جریان‌پردازی

پردازش جریان

بعد از حدود یک دهه از ظهور و رواج ابزار و کتابخانه­‌های کلان­‌داده، این سامانه­‌ها از لحاظ الگوریتم­‌ها و مدل­‌های پردازشی مقیاس­‌پذیر به یک ثبات نسبی رسیده­‌اند اما مبحث پردازش جریان، به دلیل رواج روزافزون اینترنت اشیاء و دستگاه­‌های هوشمند و لزوم پردازش سریع و لحظه­‌ای حجم عظیم داده­‌های ورودی، به یک موضوع داغ پژوهشی در چند سال اخیر تبدیل شده است

ادامه مطلب »

مدل های ارزیابی بلوغ مدیریت داده

  ارزیابی بلوغ توانمندی یا CMA ( برگرفته شده از Capability Maturity Assessment) ، رویکردی به بهبود فرآیندها و بر اساس یک چارچوب ، مدل بلوغ توانمندی یا CMM ( برگرفته شده از Capability Maturity Model )  ، می باشد که چگونگی روند تکاملی خصوصیات یک فرآیند از وضعیت ad-hoc ...

ادامه مطلب »

نگاهی به روند رشد بسترهای پردازشی کلان داده

از سال ۲۰۰۴ که هدوپ به صورت رسمی معرفی و نسخه های عملیاتی آن برای عموم قابل استفاده شد تا امروزه که با معرفی و رواج استفاده از بسترهای نوین پردازشی کلان داده، هدوپ تا حدود زیادی از دور خارج شده است، شاهد رشد و تکامل سامانه های پردازشی مختلفی ...

ادامه مطلب »

کیودو – لایه ذخیره ساز جدید هدوپ

کیودو (Kudu) به عنوان یک لایه ذخیره ساز جدید و جایگزین HDFS توسط شرکت کلودارا (Cloudera) بعد از سه سال تحقیق و توسعه ، به عنوان یک پروژه متن باز به بنیاد آپاچی پیشنهاد و توسط آپاچی به عنوان یک پروژه نوپا (در حال رشد – incubating) پذیرفته شده است ...

ادامه مطلب »

سایتهای بزرگ از چه نرم افزارهایی استفاده می کنند ؟

قبلاْ مطلبی راجع به اینکه سایتهای بزرگ از چه دیتابیس هایی استفاده می کنند نوشته بودم امروز توی سایتی که کتابخانه ها و نرم افزارهای بازمتن دنیا را فهرست و معرفی می کند متوجه شدم نرم افزارهای بازمتنی که در معماری سایتهای بزرگ دنیا مورد استفادد ه قرار گرفته است ...

ادامه مطلب »