خانه / مطالب دارای برچسب : معماری داده

مطالب دارای برچسب : معماری داده

آشنایی با معماری‌های داده در طراحی سامانه‌های جریان‌پرداز

در این مقاله به بررسی دو معماری مطرح در حوزه کلان‌داده برای طراحی سیستم‌های اطلاعاتی یعنی معماری لامبدا و کاپا می‌پردازیم و با جنبه‌های مختلف آنها آشنا خواهیم شد.

ادامه مطلب »

معماری سایت کافه بازار – از هزاران درخواست در روز به هزاران درخواست در ثانیه

کافه بازار از همان ابتدا ۳۵ میلیون کاربر نداشت و برای رسیدن به این عدد چالش‌های فنی گوناگونی را پشت سر گذاشته است. کافه بازار کارش را با دو نفر توسعه‌دهنده شروع کرد و امروز بیش از صد نفر توسعه‌دهنده در این شرکت کار می‌کنند. اوایل راه کم تجربه بودیم ...

ادامه مطلب »

آپاچی پولسار : رقیب تازه نفس کافکا

کافکا به عنوان یک سامانه توزیع پیام  مقیاس پذیر، امروزه به یک استاندارد در طراحی سامانه های کلان اطلاعاتی و معماریهای بیگ داده تبدیل شده است. برای ساخت یک خط تولید پردازش داده، داده ها را از منابع مختلف مانند شبکه های اجتماعی، حسگرها، فراخوانی های  API، نقاط مهم در ...

ادامه مطلب »

مدل های ارزیابی بلوغ مدیریت داده

  ارزیابی بلوغ توانمندی یا CMA ( برگرفته شده از Capability Maturity Assessment) ، رویکردی به بهبود فرآیندها و بر اساس یک چارچوب ، مدل بلوغ توانمندی یا CMM ( برگرفته شده از Capability Maturity Model )  ، می باشد که چگونگی روند تکاملی خصوصیات یک فرآیند از وضعیت ad-hoc ...

ادامه مطلب »

دریاچه داده : معماری جدید برای زیرساخت تحلیل و پردازش اطلاعات

در دنیای کلان داده، مدتیست که عبارت دریاچه داده به یک اصطلاح فراگیر در حوزه معماریهای پیشنهادی برای پردازش داده ها تبدیل شده است . دریاچه داده از دید مفهومی، یک مکان مشترک برای ذخیره انواع داده های یک سازمان به صورت خام و پردازش نشده است . برخلاف انباره ...

ادامه مطلب »

بستر داده آزاد : یک معماری استاندارد برای طراحی سامانه های کلان داده

یکی از چالش های پیش روی فعالان حوزه مدیریت داده ، وجود ابزارها و شرکتهای مختلفی در حوزه کلان داده است که هر یک مزایا و معایب خاص خودش را دارد و انتخاب بین آنها را دشوار می کند. بخصوص در رابطه با هدوپ که ابزار اصلی ذخیره و تحلیل ...

ادامه مطلب »

لزوم استفاده از صف های توزیع شده در برنامه های مقیاس پذیر

از سال گذشته که درگیر یک پروژه بین المللی در زمینه خواندن اخبار و بررسی محبوبیت هر خبر در شبکه های اجتماعی هستم تا امروز که چند روزی بیشتر به راه افتادن نسخه اول این سایت نمانده است، برای بخش پشت صحنه (Backend) که پیوسته باید سایت های خبری تمام ...

ادامه مطلب »