خانه / اخبار

اخبار

تحولی در پردازش کلان‌داده با آپاچی ایگنایت – رقیب سازمانی اسپارک

پردازش‌های درون حافظه‌ای به دلیل سرعت بالایی که با خود به همراه دارند، از رشد سریعی در چند سال گذشته برخوردار شده اند و آپاچی اسپارک از جمله طلایه داران این حوزه است اما یکپارچه سازی کل حافظه های یک شبکه و ایجاد یک زیرساخت واحد برای تمامی پردازش ها و ذخیره و بازیابی خودکار داده‌ها و نتایج پردازش، کاریست که اسپارک نمی‌تواند انجام دهد. وظیفه ای که امروزه، آپاچی ایگنایت برعهده گرفته است و به عنوان لایه ذخیره سازی سامانه های پردازش داده، مکمل و بخش ضروری بسیاری از پروژه های دیگر بنیاد آپاچی شده است.

ادامه مطلب »

دعوت به همکاری در پروژه طراحی و ایجاد بستر تحلیل ترافیک و ذائقه سنجی کاربران فضای مجازی

دعوت به همکاری پژوهشکده فناوری اطلاعات مرکز تحقیقات مخابرات ایران برای انجام یک پروژه در حوزه فضای مجازی و نیاز به مهندسین داده، برنامه نویسان و افراد آشنا به کلان داده ، هدوپ، یادگیری ماشین و بانکهای اطلاعاتی نوین

ادامه مطلب »

بررسی معماری داده شرکت اوبر

در این مقاله به بررسی سه نسل از معماری داده شرکت عظیم اوبر می‌پردازیم و با مسایل و مشکلاتی که در به کارگیری هدوپ در سیستم‌های واقعی پیش می‌آید به همراه راهکارهای رفع آنها از زبان رضا شیفته‌فر، مدیر تیم کلان داده اوبر، آشنا می‌شویم

ادامه مطلب »

کافکا استریمز :‌پردازش داده بر بستر کافکا

در ادامه آشنایی با چارچوب‌های پردازش جریان، به پروژه کافکا استریمز می پردازیم. این کتابخانه توسعه داده شده کتابخانه محبوب کافکا با هدف ایجاد امکان ساخت خطوط پردازش داده به صورت توزیع شده بر روی کافکا است.

ادامه مطلب »

چطوری کپچای سیستم گلستان رو با کمک یادگیری ماشین بشکنیم؟

همه‌ی ما از کپچا (CAPTCHA) فراری ایم – همون تصاویر مزاحمی رو میگم که نوشته های درهم ریخته است و برای اینکه به فرم یا صفحه ای از سایت دسترسی داشته باشیم باید اونو تایپ کنیم. کپچاها برای تشخیص انسان از بات ها (همون برنامه های اتوماتیک) و معمولا برای ...

ادامه مطلب »

آپاچی اَپکس : چارچوب پردازش داده سازمانی

در ادامه مباحث آشنایی با چارچوب‌های پردازش داده‌های جریانی بنیاد آپاچی، در این نوشتار به معرفی آپاچی اَپکس می‌پردازیم. شرکت DataTorrent یکی از شرکتهای فعال در حوزه پردازش جریان و مستقر در دره سیلیکون آمریکاست. این شرکت در سال ۲۰۱۵ تصمیم گرفت یکی از محصولات تجاری پردازش جریان خود را ...

ادامه مطلب »

سامانه‌های پردازش جریان : استورم و هِرون

در ادامه سری آموزشی آشنایی با فریم‌ورک‌های پردازش جریان، در این مقاله به مروری بر آپاچی استورم و نسخه جدید آن یعنی آپاچی هِرون می پردازیم

ادامه مطلب »

دومین دوره‌ی مدرسه‌ی تابستانه‌ی یادگیری عمیق

شاخه دانشجویی ACM دانشگاه تهران ، برای علاقه‌مندان به مباحث یادگیری عمیق، دومین دوره آموزش کاربردی یادگیری عمیق را در مرداد ماه ۹۷ با سرفصل‌های زیر برگزار می‌کند : مقدمه ای بر شبکه های عصبی بهینه سازی در شبکه های عصبی و یادگیری عمیق شبکه های عصبی کانولوشنال مباحث پیشرفته ...

ادامه مطلب »

یادگیری ماشین – مفاهیم پایه درخت تصمیم #۱

درخت تصمیم چیست؟ در ادامه معرفی الگوریتمهای ضروری یادگیری ماشین، به بررسی مفاهیم پایه درخت تصمیم می پردازیم که یکی از الگوریتم‌ها و روش‌های محبوب در حوزه طبقه‌بندی یا دسته‌بندی داده‌ها، است و در این مقاله سعی شده است به زبان ساده و به‌دوراز پیچیدگی‌های فنی توضیح داده شود. درخت ...

ادامه مطلب »

سامانه انتشار و دسترسی آزاد به اطلاعات

قانون انتشار و دسترسی آزاد به اطلاعات

قانون انتشار و دسترسی آزاد به اطلاعات در سال ۸۸ و در زمان ریاست جمهوری محمود احمدی نژاد با تایید مجمع تشخیص مصلحت نظام، به عنوان یک قانون لازم الاجرا به دستگاه های خصوصی و دولتی ابلاغ گردید که اولین گام در دسترسی آزاد به اطلاعات و سنجش و پایش ...

ادامه مطلب »