خانه / مطالب دارای برچسب : پردازش زبان طبیعی

مطالب دارای برچسب : پردازش زبان طبیعی

دست به کد : جمع آوری و پردازش توئیت های فارسی

در ادامه سلسله مباحث آموزشی پردازش زبان طبیعی و قبل از اینکه بخواهیم به صورت کامل به مباحث مرتبط با این موضوع به صورت عملی بپردازیم، نیازمند متون فارسی اولیه برای تحلیل های متنی هستیم. با توجه به اینکه نوشته های رسمی روزنامه ها و سایتهای خبری، خیلی نیاز به ...

ادامه مطلب »

مسابقه پیش بینی نتیجه انتخابات بر اساس داده های تلگرام

آیا سیستم های هوش مصنوعی می توانند نتیجه انتخابات ایران را پیش بینی کنند؟ در حالی که اکثر نظر سنجی ها، پیروزی هیلاری کلینتون در انتخابات آمریکا را پیش بینی می کردند، سیستم هوش مصنوعی MogIA نظری متفاوت داشت. همچنین Mogia در مورد سه انتخابات ریاست جمهوری اخیر و دوره ...

ادامه مطلب »

معرفی سرویسهای تحلیل داده مایکروسافت

برای باقی ماندن و راضی نگه داشتن کاربران در دنیای بسیار رقابتی امروز نیاز به سرعت بالای پردازش اطلاعات و شناسایی سریع گلوگاه ها و برطرف کردن آنها هستیم. مثالهای زیر بخوبی اهمیت این مساله را بازگو می کنند : مثالهای بالا گوشه ای از نیازهای رو به رشد سامانه ...

ادامه مطلب »

دست به کد – استخراج متن وب سایتها با Scrapy

استخراج اطلاعات از وب سایتها با اسکرپی

در بخش دوم از سری آموزشهای پردازش متون فارسی با پایتون با توجه به اینکه در ادامه کار، نیاز به مجموعه ای از متون فارسی برای پردازش خواهیم داشت، تصمیم گرفتم نحوه استخراج متون از سایتها را با کتابخانه Scrapy توضیح دهم. سعی کرده ام که کدها بسیار ساده و ...

ادامه مطلب »

مجلس گرافی – یک کار مهندسی داده حرفه ای به زبان فارسی

زلیخا گفتن و یوسف شنیدن             شنیدن کی بود مانند دیدن امروزه حرف از مهندسی داده و ضرورت پردازش و استفاده موثر از داده ها به کرات به گوش می خورد اما مثالهای فارسی و بومی که بتوان به علاقه مندان نشان داد که خروجی ...

ادامه مطلب »

آشنایی با الگوریتم Word2Vec گوگل

برای بسیاری از روشهای پردازش متن و NLP،  نیاز به نمایش عددی کلمات و متون داریم تا بتوانیم از انواع روشهای عددی حوزه یادگیری ماشین مانند اکثر الگوریتم های دسته بندی روی لغات و اسناد استفاده کنیم. یکی از رهیافت هایی که در این حوزه بسیار رایج شده است ، ...

ادامه مطلب »