خانه / کلان داده (صفحه 2)

کلان داده

فناوریها و مقالات حوزه کلان داده

معیارهایی برای انتخاب نوع فایل در پردازش‌های کلان داده

مقدمه بعد از حدود ۱۳ سال از معرفی هدوپ به عنوان اولین سامانه عمومی پردازش کلان داده، این اکوسیستم به بلوغ رسیده است به گونه‌ای که امروز با معرفی نسخه ۳ هدوپ، بسیاری از اشکالات و نواقص آن برطرف شده است. در این بین، نحوه ذخیره فایلها در اکوسیستم هدوپ ...

ادامه مطلب »

چالش‌ها و فرصت ها در پردازش کلان داده‌های جغرافیایی

داده‌های کلان در یک دهه اخیر تبدیل به واژه پرگفتمان در کلیه سطوح تحقیقاتی و تجاری شده است و کنفرانس‌های متعدد آکادمیک و تجاری در سطح جهان با محوریت اصلی این موضوع برگزار شده است. به موازات آن حجم زیادی از مقالات علمی برآمده از کارهای تحقیقاتی در دانشگاه‌ها نیز ...

ادامه مطلب »

کلان داده، انقلابی که الگوی زندگی، کار و اندیشه ما را تغییر می‌دهد

تیم بسکتبال کلیولند کاوالیرز (Cleveland Cavaliers) با قهرمانی در مسابقات بسکتبال حرفه‌ای ایالات متحده در سال ۲۰۱۶ تاریخساز شد. این نخستین قهرمانی تیم در تاریخ مسابقات بود و باعث شگفتی طرفداران این رشته ورزشی و حتی بازیکنان و مربیان این حرفه در ایالات متحده شد. درآمد تیم کاوالیرز ناگهان به ...

ادامه مطلب »

آموزش اسپارک: مفاهیم پایه

مقدمه در ادامه مباحث آموزشی اسپارک، در این نوشتار به توضیح مفاهیم پایه اسپارک و چگونگی استفاده از آن درون یک کتابچه پایتون (نوت بوک) خواهیم پرداخت. همانطور که می دانید بسیاری از چارچوب های سنتی پردازش داده برای اجرا درون یک کامپیوتر طراحی شده بودند. اما مجموعه داده های ...

ادامه مطلب »

نگاهی به روند رشد بسترهای پردازشی کلان داده

از سال ۲۰۰۴ که هدوپ به صورت رسمی معرفی و نسخه های عملیاتی آن برای عموم قابل استفاده شد تا امروزه که با معرفی و رواج استفاده از بسترهای نوین پردازشی کلان داده، هدوپ تا حدود زیادی از دور خارج شده است، شاهد رشد و تکامل سامانه های پردازشی مختلفی ...

ادامه مطلب »

طلایه داران هوش تجاری دنیا از منظر گارتنر – ۲۰۱۷

گزارش سالیانه شرکت گارتنر در طبقه بندی و تحلیل نرم افزارهای هوش تجاری اخیرا منتشر شده است و نرم افزارهای اصلی هوش تجاری که در حقیقت ابزارهایی هستند که با تحلیل و تصویرسازی سریع و راحت داده ها، کار تصمیم سازی یک سازمان را هدفمند می نمایند، در قالب چهار ...

ادامه مطلب »

نقشه راه توسعه کلان داده در کشور

نقشه راه توسعه کلان داده

استانداردها میزان بلوغ یک صنعت را در طول زنجیره ارزش آن از ابعاد مختلف (فنی/تجاری/فرهنگی) نشان می­دهند و بر اساس بلوغ صنعت به روزرسانی می شوند. نقشه راه یک فناوری اغلب روشی برای شناسایی شکاف بین استانداردهای موجود و استانداردهای مورد نیاز برای رسیدن به وضعیت مطلوب است. کارگروه کلان ...

ادامه مطلب »

معرفی سرویسهای تحلیل داده مایکروسافت

برای باقی ماندن و راضی نگه داشتن کاربران در دنیای بسیار رقابتی امروز نیاز به سرعت بالای پردازش اطلاعات و شناسایی سریع گلوگاه ها و برطرف کردن آنها هستیم. مثالهای زیر بخوبی اهمیت این مساله را بازگو می کنند : مثالهای بالا گوشه ای از نیازهای رو به رشد سامانه ...

ادامه مطلب »

۱۳ چارچوب منبع‌باز برای کسب مهارت در یادگیری ماشین، شبکه های عصبی و یادگیری عمیق

در یک سال گذشته، یادگیری ماشینی به طرز بی‌سابقه‌ای به جریان اصلی دنیای فناوری تبدیل شده است. جالب اینکه روند توسعه محیط‌های ابری ارزان‌قیمت و کارت‌های گرافیکی پرشتاب و قدرتمند، نقش بسزایی در این زمینه داشته‌اند. این عوامل منجر به رشد انفجاری چارچوب‌هایی شده است که اکنون برای یادگیری ماشینی ...

ادامه مطلب »

آشنایی با OpenRefine‌- ابزاری برای پیش پردازش و پاکسازی داده ها – بخش اول

همانطور که میدانید یکی از وقت گیر ترین کارها در عملیات پردازش داده و ساخت مدلهای یادگیری ماشین روی آنها، پاکسازی و پیش پردازش داده هاست. این آموزش به معرفی نرم افزار OpenRefine‌ که قبلاً با نام Google Refine شناخته میشد، به عنوان یکی از ابزارهای متن باز پاکسازی و ...

ادامه مطلب »