خانه / مطالب دارای برچسب : مثال عملی

مطالب دارای برچسب : مثال عملی

Import.io + OpenRefine + Google Fusion Tables = یک مثال عملی جادویی

در ادامه آموزشهای کاربردی در زمینه جمع آوری، پردازش و نمایش داده ها، در این مقاله، با یک مثال ساده تمام این مراحل را با هم انجام خواهیم داد. داده هایی را از وب سایت داده های آزاد شهر اتاوای کانادا با استفاده از نرم افزار ارائه شده در سایت ...

ادامه مطلب »

شروع کار با اسپارک : راه اندازی محیط کار

آموزش اسپارک

اسپارک به عنوان یک جایگزین برای روش سنتی توزیع و تجمیع (MapReduce) در هدوپ، به موتور اصلی پردازش داده های حجیم در اکوسیستم های مبتنی بر کلان داده تبدیل شده است . البته شاید برای بعضی کاربردهای خاص که داده های بسیار حجیم و غیر قابل بارگذاری در حافظه دارند، ...

ادامه مطلب »

دست به کد – استخراج متن وب سایتها با Scrapy

استخراج اطلاعات از وب سایتها با اسکرپی

در بخش دوم از سری آموزشهای پردازش متون فارسی با پایتون با توجه به اینکه در ادامه کار، نیاز به مجموعه ای از متون فارسی برای پردازش خواهیم داشت، تصمیم گرفتم نحوه استخراج متون از سایتها را با کتابخانه Scrapy  توضیح دهم. سعی کرده ام که کدها بسیار ساده و ...

ادامه مطلب »

کلان داده و یادگیری ماشین: عامل برتری فوتبال آلمان در سال‌ های اخیر

همواره آلمانی‌ها به ارائه‌ی یک فوتبال ماشینی شهره بوده‌اند، اما چیزی که در جام جهانی ۲۰۱۴ شاهد آن بودیم، فاصله‌ی زیاد مانشافت، مخصوصا در برابر تیم‌های بزرگ بود که دلیل آن استفاده از کلان داده و ابزار‌های تحلیلی مبتنی بر هوش مصنوعی برای تحلیل بازی حریف و تهیه‌ی یک روش ...

ادامه مطلب »

مجلس گرافی – یک کار مهندسی داده حرفه ای به زبان فارسی

زلیخا گفتن و یوسف شنیدن             شنیدن کی بود مانند دیدن امروزه حرف از مهندسی داده و ضرورت پردازش و استفاده موثر از داده ها به کرات به گوش می خورد اما مثالهای فارسی و بومی که بتوان به علاقه مندان نشان داد که خروجی ...

ادامه مطلب »

تحلیل اکتشافی داده ها در پایتون – بررسی داده های کشتی تایتانیک

مقدمه اولین گام در یادگیری ماشین و مهندسی داده ، بررسی مجموعه داده های موجود و آشنایی با خواص مختلف آماری آنهاست که به نام تحلیل اکتشافی داده (این اینفوگرافیک را از دست ندهید)از آن یاد می کنیم. در بسیاری از موارد، این تحلیل اولیه، عملیات پیش پردازش داده را ...

ادامه مطلب »

آشنایی با مفهوم زنجیره مارکوف

زنجیره مارکوف یک مفهوم ساده است که توانایی بیان اغلب فرآیندهای پیچیده بلادرنگ را دارد. حوزه هایی مانند بازشناسی صدا، شناسایی متن و بسیاری از حوزه های هوش مصنوعی، به نحوی از این اصل ساده استفاده می کنند. در این مقاله به شرح این مفهوم پرداخته ایم . زنجیره مارکوف ...

ادامه مطلب »

طراحی بانک اطلاعاتی مناسب برای تلگرام – یک مثال عملی

آشنایی با بانکهای اطلاعاتی مختلف و نقاط ضعف و قوت هر یک به ما کمک می کند تا بتوانیم بهترین طراحی را برای سیستم های نوین اطلاعاتی داشته باشیم. مدتی بود که ذهن بنده (از سر کنجکاوی) درگیر این شده بود که ساختار اطلاعاتی مورد نیاز برای طراحی یک برنامه ...

ادامه مطلب »

استفاده از بانکهای اطلاعاتی مبتنی بر گراف در سیستم های توصیه گر

یکی از چهار گروه اصلی بانکهای اطلاعاتی NoSQL بانکهای اطلاعاتی مبتنی بر گراف هستند . ساختاری که اطلاعات در آن به صورت گره و یال ذخیره می شوند . معمولاً مثالی که برای کاربردهای این نوع از پایگاه های اطلاعاتی بیان میشود شبکه های اجتماعی مانند فیس بوک و توئیتر ...

ادامه مطلب »