داده کاوی یکی از تخصص های به روز و مورد نیاز تقریبا تمام کسب و کارهای داده محور است. داده کاوی فرآیندی است که طی آن دیتای خام و بی مفهوم به اطلاعات مفید و با ارزشی برای تصمیم گیری و تعیین اهداف استرا...
داده کاوی یکی از تخصص های به روز و مورد نیاز تقریبا تمام کسب و کارهای داده محور است. داده کاوی فرآیندی است که طی آن دیتای خام و بی مفهوم به اطلاعات مفید و با ارزشی برای تصمیم گیری و تعیین اهداف استراتژیک مشخص سازمانی تبدیل می شوند.
داده کاوی یا دیتا ماینینگ در واقع علمی میان رشته ای است که علوم کامپیوتر، هوش مصنوعی، یادگیری ماشین، ریاضی و آمار را دربر می گیرد. با ساخت فرآیند داده کاوی، می توان دیتاهای حجیم و پیچیده سازمان ها و مؤسسات تحقیقاتی را کشف و الگوهای پنهان آن را تحلیل نمود.
به طور کلی میتوان داده را برابر با طلا دانست. هر چقدر داده های موجود در پایگاه داده یک شرکت افزایش پیدا کند، سرمایه شرکت نیز بیشتر می شود. حال، برای تبدیل کردن این داده های حجیم و تمیز نشده به اطلاعات مفید و گزارشات مناسب برای تصمیم گیری، نیاز است تا از داده کاوی استفاده کرد تا با کشف الگوهای پنهان از پردازش میلیون ها داده، نتایج شگفت انگیزی را بدست آورد و تحلیل کرد.
کاربردهای داده کاوی
حوزه بازرگانی (بازاریابی مستقیم، بخش بندی بازار، رتبه بندی اعتباری و …)
پزشکی (تشخیص سرطان و بازاریابی دارو)، نفت و گاز (حوزه استخراج و بهره برداری)
بانک و بیمه (کشف تخلف و کلاهبرداری، مدیریت ریسک، افزایش صدور بیمه نامه و …)
و…
یادگیری ماشین (Machine learning) را نیز می توان فرآیند بکارگیری هوش در سیستم یا ماشین بدون برنامه نویسی آشکار (explicit programming) تعریف کرد.
در این دوره چه مباحثی آموزش داده شده است؟
در این دوره، به آموزش جامع مفاهیم داده کاوی پرداخته می شود و به طور کامل، مفاهیم مربوط با داده کاوی و یادگیری ماشینی را یاد خواهید گرفت.
سرفصل های دوره آموزش جامع مبانی و مفاهیم داده کاوی و یادگیری ماشین
فصل اول: معرفی دوره (آشنایی با مفاهیم اولیه)
تعریف داده کاوی (data mining)
اهمیت داده کاوی
کاربرد داده کاوی در صنایع و کسب و کارهای مختلف
تعریف فرآیند داده کاوی
تعریف یادگیری ماشین (machine learning) و کاربرد آن در داده کاوی
تفاوت میان داده کاوی و علم داده (data science)
هدف دوره
فصل دوم: جبر خطی در داده کاوی و یادگیری ماشین
تعریف جبر خطی
اهمیت جبر خطی در داده کاوی
بردارها و محاسبات برداری
نرم برداری
ماتریسها و محاسبات ماتریس
فصل سوم: آشنایی با انواع دیتا
دیتای ساختار یافته (Structured data)
دیتای نیمه ساختار یافته (Semi-structured data)
دیتای بدون ساختار (Unstructured data)
فصل چهارم: تحلیل آماری و رسم نمودار در داده کاوی و یادگیری ماشین
آشنایی با انواع نمودار (پیاده سازی در پایتون)
تعریف آمار و علم آمار
ابزارهای مورد استفاده برای تهیه گزارش آماری
آشنایی با شاخصهای مرکزی و پراکندگی
متغیرها
همبستگی و ماتریس همبستگی
نمودار پراکندگی (scatterplot)
Crosstab
توابع Aggregation
آشنایی با مفهوم Group by
استفاده از تابع Group by برای محاسبه فراوانی یک متغیر کیفی
استفاده از نمودار هیستوگرام برای محاسبه فراوانی یک متغیر کمی
مفهوم significance یا P-value
آزمون های آماری پارامتریک
آزمون های آماری ناپارامتریک
تعریف نمونه گیری
مزایا و معایب نمونهگیری دار داده کاوی
انواع روش پرکاربرد نمونه گیری
فصل پنجم: پیش پردازش داده ها
پر کردن مقادیر NULL (کمی، کیفی اسمی و ترتیبی)
فیلتر کردن رکورد یا وِیژگی
تولید ویژگی (feature generation)
ساخت Dummy برای ویژگیهای کیفی
طبقه بندی مجدد مقادیر (Reclassification)
Join
Append
بخش بندی دیتا (Train_Test_Split)
نرمالسازی
استاندارد سازی
تعریف کاهش ابعاد
اهمیت کاهش ابعاد
تعریف انتخاب ویژگی (Feature selection)
اهمیت انتخاب ویژگی
انواع روش انتخاب ویژگی
فصل ششم: سریهای زمانی
تعریف سری زمانی
تعریف برازش (Fitting) و پیش بینی (Forecasting)
مدل ARIMA
شاخصهای نیکویی برازش
میانگین
خطای معیار (SE)
R2 ایستایی
میانگین مجذور خطا (RMSE)
میانگین قدر مطلق درصد خطا (MAPE)
ماکزیمم قدر مطلق درصد خطا (MAX PE)
میانگین قدر مطلق خطا (MAE)
ماکزیمم قدر مطلق خطا (MAX AE)
معیار اطلاعاتی نرمال شده بیز (Normalized BIC)
فصل هفتم: رگرسیون خطی
تعریف رگرسیون خطی
رابطه خطی
R Square
خطای معیار تخمین
فرضیه آماری آزمون معناداری کل مدل رگرسیون (به کمک جدول Anova)
مقدار ثابت (B0)
مقدار ضریب متغیر مستقل (B1)
فاصله اطمینان
Regularization
مفهوم Overfitting
فصل هشتم: خوشه بندی (Clustering)
تعریف خوشه بندی
اهمیت خوشه بندی
تفاوت خوشه بندی با کاهش ابعاد
انواع روش خوشه بندی
مفهوم distance / similarity
Dendrogram
مفهوم Agglomerative clustering
مفهوم Linkage و انواع آن
مفهوم Ward
فصل نهم: طبقه بندی (Classification)
تعریف طبقه بندی
تفاوت طبقه بندی با خوشه بندی
اهمیت طبقه بندی
آشنایی با الگوریتمهای طبقه بندی، مفاهیم و کاربردهای آنها
کارنامه طبقه بندی و ارزیابی مدل
فصل دهم: آنالیز RFM
تعریف اولیه
اهمیت RFM
مفهوم Recency
مفهوم Frequency
مفهوم Monetary
فصل یازدهم: قواعد انجمنی
آشنایی با مفاهیم قواعد انجمنی
محاسبات مربوطه
لینک دوره های دیگر
آموزش داده کاوی و یادگیری ماشینی با IBM SPSS modeler
آموزش داده کاوی و یادگیری ماشینی با پایتون
آموزش متن کاوی با پایتون
آموزش یادگیری عمیق با پایتون
پکیج آموزش جامع علم داده با پایتون
آموزش داده کاوی با رپیدماینر
آموزش تصویر کاوی با رپیدماینر
آموزش متن کاوی و وب کاوی با رپیدماینر
پکیج آموزش جامع علم داده با رپیدماینر RapidMiner
آموزش جامع هوش تجاری BI و تحلیل داده با تبلو Tableau
حاصل دوره
تسلط به مفاهیم فرآیند داده کاوی
تسلط به مفاهیم جبر خطی و آمار در داده کاوی
تسلط به مفاهیم پیش پردازش دیتا
تسلط به الگوریتم های یادگیری ماشین (نظارتی و غیر نظارتی)
تسلط به مفاهیم آنالیز RFM برای شناسایی مشتریان وفادار و سود آور