زمان کنونی: ۱۰ فروردین ۱۴۰۳, ۰۱:۳۵ ب.ظ مهمان گرامی به انجمن مانشت خوش آمدید. برای استفاده از تمامی امکانات انجمن می‌توانید عضو شوید.
گزینه‌های شما (ورودثبت نام)

بحث و همفکری درباره آخرین موضوعات در حوزه داده کاوی

ارسال:
۲۰ خرداد ۱۳۹۲, ۱۰:۳۰ ب.ظ
بحث و همفکری درباره آخرین موضوعات در حوزه داده کاوی
سلام.
لطفا کسانی که در این زمینه در حال کار کردن هستند در این تاپیک تجربیات خودشون را بیان کنند.
داده کاوی یکی از حوزه هایی است که میشه خیلی در این زمینه کار کرد ولی باید دید،جدیدترین رویکردهای آن چیه؟
داده کاوی ۲ مرحله داره:
۱- ابتدا داده های خام باید پردازش بشوند و به قالب مناسبی برای اعمال فرآیند داده کاوی تبدیل بشن.
۲-داده های مرحله ۱،به کمک دسته بندی و خوشه بندی به منظور تشخیص الگو مورد استفاده قرار بگیرند.

مرحله ۱،شامل اینهاست:
۱-پاکسازی
۲-یکپارچه سازی
۳-انتخاب صفات
۴-تبدیل داده ها به قالبی مناسب

در مرحله۲،به منظور تشخیص الگو از الگوریتم های دسته بندی و خوشه بندی استفاده می کنند.
البته تکنیک های داده کاوی به دو دسته نظارتی و غیرنظارتی تقسیم میشن که دسته بندی جز گروه نظارتی و خوشه بندی جز گروه غیرنظارتی ها میشه.فرقشون هم اینه که در نظارتی ها یک متغییر هدف از قبل تعریف شده هست ولی در غیرنظارتی ها متغییر هدف وجود نداره.حالا این متغییر هدف به چه دردی میخوره و چیکار میشه باهاش کرد رو خودمم نمی دونم.Big Grin

بعد با یکسری معیارهای مثل دقت،سرعت و کارایی این الگوریتم ها رو ارزیابی می کنند.

حالا سئوال من اینه که از کجا میشه شناخت خوبی راجع به الگوریتم های داده دسته بندی و خوشه بندی پیدا کرد.من خودم به شخصه به منابع خوبی دسترسی ندارم.ضمناً اگه بخواهیم در زمینه داده کاوی مدل ارائه کنیم چیکار باید بکنیم؟
ممنون میشم اگه شرکت فعالانه دراین تاپیک داشته باشید.

اگر به خطا رفتی، از برگشتن واهمه نداشته باش./برگ در هنگام زوال می افتدمیوه در هنگام کمال می افتدبنگر که چگونه می افتی چون برگی زرد و یا سیبی سرخ.
یافتن تمامی ارسال‌های این کاربر
نقل قول این ارسال در یک پاسخ
 سپاس‌گزاری شده توسط: Lonely Palm , Zx24zx26 , موج , kimiya_496 , سجاد۶۷
ارسال:
۲۱ خرداد ۱۳۹۲, ۰۱:۰۷ ق.ظ
RE: بحث و همفکری درباره آخرین موضوعات در حوزه داده کاوی
سلام
منم چون باید روی این موضوع کار کنم، تازه مطالعه م رو تو این حوزه شروع کردم
در مورد الگوریتم های خوشه بندی، من یه کتاب قبلا خوندم تالیف آقای دکتر منصور مومنی، به اسم " خوشه بندی داده ها (تحلیل خوشه ای)" که بسیار کتاب خوبی بود، گرچه اشتباهاتی هم داشت ولی به نظر نمیرسه از مولف باشه و احتمالا جابجایی تایپی هست...
من در حال حاضر کتاب Mining Text Data رو می خونم که کتاب خوبیه(مجموعه ای از مقالات که اشپرینگر چاپ کرده) ، survey جامعی هم از روش های مختلف دسته بندی و خوشه بندی متن رو داره
این که فرمودین بخواید مدل ارائه کنید یه ذره گنگه برام، منظورتون اینه که بخواین روش جدیدی ارائه کنین یا منظورتون اینه که بخواین شبیه سازی انجام بدین؟

The best defense against logic is ignorance
یافتن تمامی ارسال‌های این کاربر
نقل قول این ارسال در یک پاسخ
 سپاس‌گزاری شده توسط: banou , Dark Knight
ارسال:
۲۱ خرداد ۱۳۹۲, ۰۱:۲۷ ق.ظ (آخرین ویرایش در این ارسال: ۲۱ خرداد ۱۳۹۲ ۰۱:۲۷ ق.ظ، توسط ghaderiyaser.)
بحث و همفکری درباره آخرین موضوعات در حوزه داده کاوی
در حال حاضر چالنج های زیادی تو این زمینه هست و میشه توی این زمینه ها کارکرد. به عنوان مثال کشف درخت تصمیم معتبر در داده ی استریم و پویا یا مثلا کشف و دسته بندی موضوعات متن های فارسی(اگر چه متن کاویه ولی یه جورایی داده کاوی هم هست) و....

if things were easy to find, they wouldn't be worth finding
یافتن تمامی ارسال‌های این کاربر
نقل قول این ارسال در یک پاسخ
 سپاس‌گزاری شده توسط: Lonely Palm , banou , Dark Knight , Aurora , kimiya_496
ارسال:
۲۱ خرداد ۱۳۹۲, ۰۶:۴۴ ق.ظ
بحث و همفکری درباره آخرین موضوعات در حوزه داده کاوی
(۲۱ خرداد ۱۳۹۲ ۰۱:۰۷ ق.ظ)Lonely Palm نوشته شده توسط:  این که فرمودین بخواید مدل ارائه کنید یه ذره گنگه برام، منظورتون اینه که بخواین روش جدیدی ارائه کنین یا منظورتون اینه که بخواین شبیه سازی انجام بدین؟
بله منظورم ارائه روش جدید هست.
اگه در مورد شبیه سازی توضیح هم بدید ممنون میشم.
در ضمن این کتابهایی که خوندید اگه الکترونیکی هست می تونید برام ایمیل کنید؟
اگه هم خریدنی هست اسم انتشاراتشو بهم بدید.
الگوریتم های زیادی در داده کاوی هست ولی نمی دونم باید از کجا اطلاعات دقیق راجع بهشون پیدا کنم؟بهرحال اگه آدم بخواد خوب ازشون سردربیاره باید کامل و دقیق از لحاظ ریاضی باهاشون آشنا باشه.
متشکرم

اگر به خطا رفتی، از برگشتن واهمه نداشته باش./برگ در هنگام زوال می افتدمیوه در هنگام کمال می افتدبنگر که چگونه می افتی چون برگی زرد و یا سیبی سرخ.
یافتن تمامی ارسال‌های این کاربر
نقل قول این ارسال در یک پاسخ
 سپاس‌گزاری شده توسط: Lonely Palm
ارسال:
۲۱ خرداد ۱۳۹۲, ۰۲:۰۳ ب.ظ
RE: بحث و همفکری درباره آخرین موضوعات در حوزه داده کاوی
مرحله شبیه سازی معمولا بعد از ارائه یه تکنیک جدید هست که اساس تز شما رو تشکیل میده، که کارایی روش خودتون رو اثبات کنید. اغلب باید از قبل از وجود دیتاست مربوط به اون کار اطمینان داشته باشید چون در صورتی که شما یه کار خیلی خوب هم انجام داده باشید ولی دیتاستی براش پیدا نشه، کار به شدت مشکل میشه چون ایجاد یه دیتاست استاندارد خودش یه پروژه وقت گیر و تیمی هست و علاوه بر این اعتباری توی مجامع بین المللی ممکنه پیدا نکنه کارتون
نرم افزارهایی که بدرد این کار بخورن رو کامل نمیشناسم اما MATLAB و RapidMiner خیلی تو این زمینه کارایی دارن
کتاب خوشه بندی دکتر مومنی رو باید خودتون تهیه کنید انتشارات خاصی هم نداره، حدس می زنم خود مولف اقدام به چاپش کرده چون تو قسمت ناشر نوشته شده مولف،
مهمان عزیز شما قادر به مشاهده پیوندهای انجمن مانشت نمی‌باشید. جهت مشاهده پیوندها ثبت نام کنید.
رو لینک کردم اما برای کتاب دیگه، الکترونیکی هست و خواستم اینجا ضمیمه ش کنم نشد، ایمیلتون رو پ.خ بفرمایید تا بفرستم خدمتتون
یه چیز دیگه هم اینکه اگر دنبال کتاب فارسی هستید، کتاب داده کاوی کاربردی آقای دکتر صنیعی آباده انتشارات نیاز دانش هم کتاب خوبیه برای اینکه دید جامعی راجع به داده کاوی به آدم میده

The best defense against logic is ignorance
یافتن تمامی ارسال‌های این کاربر
نقل قول این ارسال در یک پاسخ
 سپاس‌گزاری شده توسط: banou , AmiriManesh
ارسال:
۲۱ خرداد ۱۳۹۲, ۰۲:۲۵ ب.ظ
بحث و همفکری درباره آخرین موضوعات در حوزه داده کاوی
من یه سری توضیحات بدم شاید بد نباشه. ما سه روش داریم:
۱- بهینه سازی: خروجی و مدل داریم و هدف ارائه بهترین ورودی هاست که خروجی بهترین حالت باشه.
۲- مدل سازی: ورودی و خروجی داریم و مدل را نداریم و هدف ارائه مدلی است که بهترین نگاشت را انجام دهد.
۳- شبیه سازی: ورودی و مدل رو داریم و هدف تولید خروجی هاست که به مثال واقعی شبیه باشه.

if things were easy to find, they wouldn't be worth finding
یافتن تمامی ارسال‌های این کاربر
نقل قول این ارسال در یک پاسخ
 سپاس‌گزاری شده توسط: انرژی مثبت , Lonely Palm , banou , diligent , mahsaeslami , MShariati , AmiriManesh
ارسال:
۲۲ خرداد ۱۳۹۲, ۰۶:۳۲ ق.ظ
بحث و همفکری درباره آخرین موضوعات در حوزه داده کاوی
(۲۱ خرداد ۱۳۹۲ ۰۲:۲۵ ب.ظ)ghaderiyaser نوشته شده توسط:  من یه سری توضیحات بدم شاید بد نباشه. ما سه روش داریم:
۱- بهینه سازی: خروجی و مدل داریم و هدف ارائه بهترین ورودی هاست که خروجی بهترین حالت باشه.
۲- مدل سازی: ورودی و خروجی داریم و مدل را نداریم و هدف ارائه مدلی است که بهترین نگاشت را انجام دهد.
۳- شبیه سازی: ورودی و مدل رو داریم و هدف تولید خروجی هاست که به مثال واقعی شبیه باشه.
لطفا بیشتر توضیح بدید.برای من نامفهومه.
از کجا می تونم الگوریتم های داده کاوی را بخوبی بشناسم؟منبع درستی ندارم.
متشکرم

اگر به خطا رفتی، از برگشتن واهمه نداشته باش./برگ در هنگام زوال می افتدمیوه در هنگام کمال می افتدبنگر که چگونه می افتی چون برگی زرد و یا سیبی سرخ.
یافتن تمامی ارسال‌های این کاربر
نقل قول این ارسال در یک پاسخ
ارسال:
۲۲ خرداد ۱۳۹۲, ۰۶:۵۴ ق.ظ
بحث و همفکری درباره آخرین موضوعات در حوزه داده کاوی
الگوریتم های داده کاوی دو دسته اند:

۱- دسته بندی: درخت تصمیم، شبکه عصبی و..
۲- توصیفی: خوشه بندی و..
منبع من کتاب داده کاوی آقای tan رو معرفی می کنم. کتاب خوبیه. آفستش تو انقلاب گیر میاد.

if things were easy to find, they wouldn't be worth finding
یافتن تمامی ارسال‌های این کاربر
نقل قول این ارسال در یک پاسخ
 سپاس‌گزاری شده توسط: Lonely Palm , banou , AmiriManesh
ارسال:
۲۲ خرداد ۱۳۹۲, ۰۴:۲۰ ب.ظ
بحث و همفکری درباره آخرین موضوعات در حوزه داده کاوی
الگوریتم های تکاملی مثل pso،AIS،کرم شب تاب و ... را در چه قسمتهایی از داده کاوی میشه استفاده کرد؟

اگر به خطا رفتی، از برگشتن واهمه نداشته باش./برگ در هنگام زوال می افتدمیوه در هنگام کمال می افتدبنگر که چگونه می افتی چون برگی زرد و یا سیبی سرخ.
یافتن تمامی ارسال‌های این کاربر
نقل قول این ارسال در یک پاسخ
 سپاس‌گزاری شده توسط: Lonely Palm
ارسال: #۱۰
۲۲ خرداد ۱۳۹۲, ۰۴:۲۷ ب.ظ
RE: بحث و همفکری درباره آخرین موضوعات در حوزه داده کاوی
(۲۲ خرداد ۱۳۹۲ ۰۴:۲۰ ب.ظ)banou نوشته شده توسط:  الگوریتم های تکاملی مثل pso،AIS،کرم شب تاب و ... را در چه قسمتهایی از داده کاوی میشه استفاده کرد؟
الگوریتم های تکاملی ذاتا برای حل مسائل بهینه سازی مطرح شدن، پس میشه گفت هرجا که مسئله رو میشه به صورت یه مسئله بهینه سازی مدل کرد، این الگوریتم ها هم کاربرد دارن، چه توی خوشه بندی، چه توی دسته بندی، چه توی الگوریتم های یادگیری مدل و ...

The best defense against logic is ignorance
یافتن تمامی ارسال‌های این کاربر
نقل قول این ارسال در یک پاسخ
 سپاس‌گزاری شده توسط: banou , raaheee , AmiriManesh
ارسال: #۱۱
۲۲ خرداد ۱۳۹۲, ۰۵:۰۱ ب.ظ (آخرین ویرایش در این ارسال: ۲۲ خرداد ۱۳۹۲ ۰۵:۰۵ ب.ظ، توسط banou.)
بحث و همفکری درباره آخرین موضوعات در حوزه داده کاوی
آیا میشه در داده کاوی روشی را که با شبکه عصبی انجام شده می توان با یکی از الگوریتم های تکاملی بهینه کرد؟

اگر به خطا رفتی، از برگشتن واهمه نداشته باش./برگ در هنگام زوال می افتدمیوه در هنگام کمال می افتدبنگر که چگونه می افتی چون برگی زرد و یا سیبی سرخ.
یافتن تمامی ارسال‌های این کاربر
نقل قول این ارسال در یک پاسخ
 سپاس‌گزاری شده توسط: Lonely Palm , AmiriManesh
ارسال: #۱۲
۲۲ خرداد ۱۳۹۲, ۰۵:۲۶ ب.ظ
RE: بحث و همفکری درباره آخرین موضوعات در حوزه داده کاوی
(۲۲ خرداد ۱۳۹۲ ۰۵:۰۱ ب.ظ)banou نوشته شده توسط:  آیا میشه در داده کاوی روشی را که با شبکه عصبی انجام شده می توان با یکی از الگوریتم های تکاملی بهینه کرد؟
بله میشه، از الگوریتم های تکاملی برای train کردن شبکه های عصبی استفاده میشه، بنابراین می تونین یکی از شناخته شده ترین اون ها رو برای الگوریتم training شبکه عصبی بکار بگیرین

The best defense against logic is ignorance
یافتن تمامی ارسال‌های این کاربر
نقل قول این ارسال در یک پاسخ
 سپاس‌گزاری شده توسط: banou , raaheee , AmiriManesh
ارسال: #۱۳
۲۲ خرداد ۱۳۹۲, ۰۵:۲۷ ب.ظ
بحث و همفکری درباره آخرین موضوعات در حوزه داده کاوی
فرض کنید ما مجموعه قوانین وابستگی را توسط الگوریتم های استخراج قوانین وابستگی استخراج کرده ایم، این قوانین را به صورت ورودی به الگوریتم های تکاملی می دهیم و کیفیت آنها طی پروسه تکامل بهبود می یابد.

if things were easy to find, they wouldn't be worth finding
یافتن تمامی ارسال‌های این کاربر
نقل قول این ارسال در یک پاسخ
 سپاس‌گزاری شده توسط: Lonely Palm , banou , raaheee , AmiriManesh
ارسال: #۱۴
۲۲ خرداد ۱۳۹۲, ۰۵:۴۲ ب.ظ (آخرین ویرایش در این ارسال: ۲۲ خرداد ۱۳۹۲ ۰۵:۴۳ ب.ظ، توسط banou.)
بحث و همفکری درباره آخرین موضوعات در حوزه داده کاوی
ممنون از توضیحات خوبتون.چندتا سئوال در ذهن من ایجاد شد؟یکی اینکه حالا این بهینه سازی را چطوری ارزیابی کنیم؟معیارهای ارزیابی چه چیزهایی هستند؟ و دوم اینکه برای انجام اینکار پایگاه داده از کجا گیر بیاریم؟

اگر به خطا رفتی، از برگشتن واهمه نداشته باش./برگ در هنگام زوال می افتدمیوه در هنگام کمال می افتدبنگر که چگونه می افتی چون برگی زرد و یا سیبی سرخ.
یافتن تمامی ارسال‌های این کاربر
نقل قول این ارسال در یک پاسخ
 سپاس‌گزاری شده توسط: Lonely Palm
ارسال: #۱۵
۲۲ خرداد ۱۳۹۲, ۰۵:۵۱ ب.ظ
بحث و همفکری درباره آخرین موضوعات در حوزه داده کاوی
معیارهای ارزیابی توسط شخص خبره تعیین و توسط داده کاو فرموله می شوند. پایگاه داده یا همون dataset مشکل اصلی که چه جوری گیر بیان. حالا بعد نیست من اینو مطرح کنم که من می خوام در هفتمین کنفرانس داده کاوی که تو دانشگاه امیرکبیر برگزار میشه مقاله بدم الگه کسی یا کسانی هستن بگن که هم گروهی انجام بشه هم هزینه های کنفرانس تقسیم بر تعداد بشه من خوشحال میشم کسی اگه بخواد.

if things were easy to find, they wouldn't be worth finding
یافتن تمامی ارسال‌های این کاربر
نقل قول این ارسال در یک پاسخ
 سپاس‌گزاری شده توسط: Lonely Palm , banou , raaheee


موضوع‌های مرتبط با این موضوع...
موضوع: نویسنده پاسخ: بازدید: آخرین ارسال
  راهنمایی درباره مقطع کارشناسی ارشد HamidReza1 ۰ ۷۵۴ ۱۴ اسفند ۱۴۰۱ ۱۰:۴۰ ب.ظ
آخرین ارسال: HamidReza1
  تصمیم گیری مهم درباره مکان سرور سایت admin ۴ ۴,۳۲۱ ۲۸ دى ۱۴۰۰ ۰۳:۵۹ ب.ظ
آخرین ارسال: mahsa3323
  انتخاب موضوع پروژه درباره سیستم عامل آیلا ۱۸ ۱۸,۴۲۷ ۱۳ دى ۱۴۰۰ ۰۵:۴۱ ب.ظ
آخرین ارسال: Cimia
  استخدام در فنآوری اطلاعات خدمات حوزه علمیه قم oloom-ensani ۱۵ ۸,۶۸۵ ۲۴ اردیبهشت ۱۴۰۰ ۰۴:۳۹ ب.ظ
آخرین ارسال: oloom-ensani
  بحث در مورد نتایج اولیه ازمون دکتری ۹۲ mkiani ۳۷ ۲۹,۸۹۳ ۱۷ بهمن ۱۳۹۹ ۰۲:۱۹ ق.ظ
آخرین ارسال: hmaryam567
  موضوعات پایان نامه ارشد IT و کامپیوتر αɾια ۳ ۱۵,۱۸۹ ۰۶ آبان ۱۳۹۹ ۰۳:۴۵ ب.ظ
آخرین ارسال: mahtab1928
  همکار در حوزه speech recognition و برنامه نویسی اندروید pasargad7788 ۰ ۱,۹۵۰ ۳۱ خرداد ۱۳۹۹ ۰۹:۰۶ ب.ظ
آخرین ارسال: pasargad7788
  بحث و تبادل نظر راجع به نرم افزارهای شبیه سازی -Ali- ۱۶۸ ۱۰۱,۲۹۸ ۲۸ خرداد ۱۳۹۹ ۰۴:۱۵ ب.ظ
آخرین ارسال: bahareh
  ساختمان داده و پایگاه داده پارسه امیدوار ۴ ۳,۹۶۳ ۱۲ خرداد ۱۳۹۹ ۰۸:۰۳ ب.ظ
آخرین ارسال: marvelous
  سوال درباره بیوانفورماتیک شریف Ella ۴ ۹,۷۸۷ ۲۴ فروردین ۱۳۹۹ ۱۰:۳۹ ب.ظ
آخرین ارسال: ilas

پرش به انجمن:

Can I see some ID?

به خاطر سپاری رمز Cancel

Feeling left out?


نگران نباش، فقط روی این لینک برای ثبت نام کلیک کن. رمزت رو فراموش کردی؟ اینجا به یادت میاریم! close

رمزت رو فراموش کردی؟

Feeling left out?


نگران نباش، فقط روی این لینک برای ثبت نام کلیک کن. close