عنوان مقاله : نگاهی بر داده کاوی و کشف قوانین وابستگی

خرید این محصول

» :: عنوان مقاله : نگاهی بر داده کاوی و کشف قوانین وابستگی

خرید این محصول

پایان نامه وب کاوی در صنعت‎

خرید این محصول

» :: پایان جریده وب کاوی در صنعت‎

شرح مختصر : حرف افزایش چشمگیر جرم اطلاعات و توسعه وب، احتیاج به روش ها و تکنیک هایی که بتوانند امکان دستیابی کارا به سمت داده‌ها و استخراج داده‌ها از آنها را آماده کنند، بیش از پیش احساس می شود. وب کاوی یکی از زمینه های پژوهشی است که با به سمت کارگیری تکنیک های داده کاوی به کشف و استخراج خودکار اطلاعات از اسناد و سرویس‌های وب می پردازد. باب حقیقت وب کاوی، فرآیند انکشاف اطلاعات و اندیشه ناشناخته و مفید از داده های وب می باشد. روش های وب کاوی حرف اساس ثانیه که چه نوع داده ای را مورد کاوش قرار می دهند، به سه دسته کاوش محتوای وب، بررسی قالب وب و کاوش استفاده از وب تقسیم می شوند. طی این اعلام پس از معرفی وب کاوی و بررسی مرحله‌ها آن، ارتباط وب کاوی با سایر اساس های تحقیقاتی بررسی شده و به چالش ها، مشکلات و کاربردهای این اساس تحقیقاتی اشاره باده شود. همچنین هر یک از انواع وب کاوی به تفصیل مورد بررسی قرار باده گیرند که باب این پروژه بیشتر به وب کاوی در صنعت می پردازم. برای این منظور الگو ها، الگوریتم ها و کاربردهای هر طبقه شناسایی می شوند.

فهرست :

مقدمه

دوران دوم: داده کاوی

مقدمه ای حرف داده کاوی

چه چیزی سبب احداث داده کاوی شده است؟

مراحل انکشاف دانش

جایگاه داده کاوی در میان علوم مختلف

داده کاوی چه کارهایی نمی تواند انجام دهد؟

داده کاوی و انبار داده ها

داده کاوی و OLAP

کاربرد آموزش ابزار و آمار در داده کاوی

توصیف داده ها در داده کاوی

خلاصه سازی و به سمت تصویر در اتیان داده ها

خوشه بندی

تجزیه لینک

مدل های سابق بینی داده ها

دسته بندی

رگرسیون

سری های زمانی

مدل ها و الگوریتم های داده کاوی

شبکه های عصبی

درخت تصمیم

Multivariate Adaptive Regression Splines(MARS)

Rule induction

Knearest neibour and memorybased reansoning(MBR)

رگرسیون اسم

تجزیه تفکیکی

مدل افزودنی بسیار (GAM)

Boosting

سلسله مراتب انتخابها

داده کاوی و مدیریت بهینه وب سایت ها

داده‌کاوی و مدیریت اندیشه

فصل سوم: وب کاوی

تعریف وب کاوی

مراحل وب کاوی

وب کاوی و زمینه های پژوهشی مرتبط

وب کاوی و داده کاوی

وب کاوی و بازیابی اطلاعات

وب کاوی و استحصال اطلاعات

وب کاوی و یادگیری ماشین

اشکال وب کاوی

چالش های وب کاوی

مشکلات ومحدودیت های وب کاوی باب سایت های ایرانی زبان

محتوا کاوی وب

فصل چهارم: وب کاوی در صنعت

انواع وب کاوی در صنعت

وب کاوی در تکنیک نفت، گاز و پتروشیمی

مهندسی مخازن/ اکتشاف

مهندسی برخه برداری

مهندسی حفر

بخشهای مدیریتی

کاربرد های اندیشه داده کاوی در تکنیک بیمه

کاربردهای دانش داده کاوی باب مدیریت شهری

کاربردهای داده کاوی باب صنعت بانکداری

بخش بندی مشتریان

پژوهش های کاربردی

نتیجه گیری

منابع و ماخذ ایرانی

مرجع‌ها و منابع لاتین و سایتهای اینترنتی

خرید این محصول

مفاهیم و کاربرد های داده کاوی پروژه دوره کارشناسی

خرید این محصول

» :: مفاهیم و کاربرد های داده کاوی پروژه دوره کارشناسی
چکیده:
امروزه با گسترش سیستم های پایگاهی و حجم بالای داده ها ی ذخیره شده در این سیستم ها ،
نیاز به ابزاری است تا بتوان داده های ذخیره شده را پردازش کردواطلاعات بازده از این پردازش
را در اختیار کاربران قرار داد .
و ابزارهای الوان گزارش گیری معمولی ، می توان SQL حرف استفاده از پرسش های ساده در
اطلاعاتی را در اختیار کاربران رسم انصاف تا بتوانند به نتیجه گیری در مورد داده ها و روابط منطقی
میان آنها بپردازند اما وقتی که جرم داده ها اسم باشد ، کاربران هر چند زبر دست و با تجربه باشند
نمی توانند الگوهای مفید را باب میان جرم انبوه داده ها تشخیص دهند و یا اگر قادر به این کار هم
حرف شند ، هزینه عملیات از نظر نیروی انسانی و مادی بسیار بالا است .
از سوی دیگر کاربران معمولا فرضیه ای را مطرح می کنند و سپس حرف اساس گزارشات مشاهده
شده به سمت اثبات یا اثر فرضیه می پردازند ، در حالی که امروزه نیاز به روشهایی است که اصطلاحا به
کشف اندیشه بپردازند یعنی با کمترین دخالت کاربر و به صورت خودکار الگوها و رابطه های
منطقی را بیان نمایند .
داده کاوی یکی از مهمترین این روشها است که به وسیله آن الگوهای مفید در داده ها با کمینه
مداخله کاربران شناخته می شوند و اطلاعاتی را باب اختیار کاربران و تحلیل گران قرار می دهند تا
براساس آنها تصمیمات بااهمیت و حیاتی در سازمانها اتخاذ شوند .
باب داده کاوی از بخشی از علم آمار به آوازه تحلیل اکتشافی داده ها استفاده می شود که در آن بر
کشف داده‌ها نهفته و غریب از درون حجم انبوه داده ها تاکید می شود . علاوه بر این داده
کاوی با خرد مصنوعی و یادگیری ماشین نیز ارتباط تنگاتنگی دارد ، بنابراین می توان حرف در
5
داده کاوی تئوریهای پایگاه داده ها ، هوش مصنوعی ، یادگیری ماشین و علم احصا را در هم می
آمیزند تا زمینه کاربردی آماده شود .
باید توجه داشت که اصطلاح داده کاوی زمانی به سمت کار برده می شود که با حجم بزرگی از داده ها ،
در حد مگا یا ترابایت ، مواجه باشیم . باب تمامی منبع‌ها داده کاوی بر این مطلب تاکید شده است .
هر چاه جرم داده ها بیشتر و روابط میان آنها پیچیده تر باشد دسترسی به اطلاعات نهفته در میان
داده ها مشکلتر می شود و نقش داده کاوی به عنوان یکی از روشهای کشف دانش ، مشعشع تر می
گردد .
6
فهرست مطالب
مفاهیم و کاربرد های داده کاوی .......................................................................................................
مفاهیم و کاربرد های داده کاوی .......................................................................................................
چکیده: ........................................................................................................................................... 4
مقدمه: . .......................................................................................................................................... 11
دوران اول – مفاهیم داده کاوی . ..................................................................................................... 14
مدیریت ذخیره سازی و دستیابی اطلاعات ............................................................................... 14
ساختار بانک اطلاعاتی سازمان: ................................................................................................ 15
16................................................................................................ (Data Mining) : داده کاوی
مفاهیم پایه در داده کاوی ......................................................................................................... 18
تعریف داده کاوی .................................................................................................................... 18
تاریخچه داده کاوی .................................................................................................................. 19
مراحل فرایند کشف دانش از پایگاه داده ها . ............................................................................. 21
انبارش داده ها . ......................................................................................................................... 22
انتخاب داده ها ......................................................................................................................... 22
تبدیل داده ها............................................................................................................................ 23
کاوش در داده ها . ..................................................................................................................... 23
تفسیر نتیجه .............................................................................................................................. 24
عملیاتهای داده کاوی . ............................................................................................................... 24
7
مدلسازی پیشگویی کننده ......................................................................................................... 25
تقطیع پایگاه داده ها ................................................................................................................. 26
تحلیل پیوند ............................................................................................................................. 26
تشخیص انحراف ..................................................................................................................... 27
الگوریتم های داده کاوی .......................................................................................................... 27
شبکه های عصبی ..................................................................................................................... 28
درخت های انتخاب ................................................................................................................. 29
استقراء رسم . ........................................................................................................................... 30
الگوریتمهای ژنتیک .................................................................................................................. 31
الگو فرآیند دو سویه ................................................................................................................ 31
تعریف مساله . ........................................................................................................................... 32
ساختن یک پایگاه داده داده کاوی ............................................................................................ 33
جستجوی داده . ......................................................................................................................... 34
آراسته سازی داده برای مدل سازی . ............................................................................................ 35
اسم مدل داده کاوی ............................................................................................................ 35
تائید ارج آسان ....................................................................................................................... 36
ارزیابی و تفسیر؛ تایید اعتبار مدل ............................................................................................ 36
ایجاد معماری الگو و نتایج . ...................................................................................................... 36
سابقه داده کاوی ....................................................................................................................... 38
صفت داده کاوی ...................................................................................................................... 40
8
نرمافزارهای دادهکاوی .............................................................................................................. 42
درک قلمرو .............................................................................................................................. 44
استعمال از نتایج . ........................................................................................................................ 44
اکتشاف : .................................................................................................................................. 46
الگو پیش بینی : ....................................................................................................................... 46
تحلیلهای دادگاهی : ................................................................................................................. 46
52...................................................... DM Commercial Tools ابزارهای تجاری داده کاوی
منابع اطلاعاتی مورد استفاده ..................................................................................................... 53
خزانه داده ................................................................................................................................... 54
پیشرفت در تکنولوژیهای داده پردازی ...................................................................................... 54
دیتا مارت ................................................................................................................................. 55
انبار داده ها .............................................................................................................................. 56
عناصر داده کاوی ..................................................................................................................... 58
فنون داده کاوی ........................................................................................................................ 59
ابزارهای پرس و جو: ............................................................................................................... 60
فنون آماری:.............................................................................................................................. 60
مصور سازی: . ........................................................................................................................... 60
پردازش تحلیلی پیوسته: ........................................................................................................... 61
یادگیری مبتنی بر مورد: ............................................................................................................ 61
درختان تصمیم گیری: .............................................................................................................. 61
9
قوانین وابستگی: ....................................................................................................................... 61
شبکه های عصبی : . .................................................................................................................. 62
الگوریتم ژنتیکی: ...................................................................................................................... 62
محدودیت های داده کاوی ....................................................................................................... 64
حفاظت از حریم شخصی در سیستمهای دادهکاوی ................................................................. 64
دوران دوم : کاربردهای داده کاوی ................................................................................................. 67
کاربرد داده کاوی در کسب و کار هوشمند بانک ...................................................................... 68
داده کاوی درمدیریت ارتباط بامشتری . ..................................................................................... 69
کاربردهای داده کاوی باب کتابخانه ها و محیط های دانشگاهی ................................................. 71
کاربردهای داده کاوی در کتابخانه ها . ....................................................................................... 71
داده کاوی و مدیریت موسسات دانشگاهی . .............................................................................. 73
کاربردهای داده کاوی در موسسات دانشگاهی ......................................................................... 73
داده کاوی و مدیریت بهینه وب سایت ها ................................................................................ 74
دادهکاوی و مدیریت دانش ....................................................................................................... 75
کاربرد دادهکاوی در آموزش عالی ............................................................................................ 76
فصل سوم – بررسی موردی 1: وب کاوی .................................................................................... 78
معماری وب کاوی ................................................................................................................... 78
مشکلات ومحدودیت های وب کاوی در سایت های فارسی زبان . .......................................... 84
فحوا کاوی وب ...................................................................................................................... 85
دوران چهارم – بررسی موردی 2 : داده کاوی در شهر الکترونیک ................................................. 87
10
زمینه دادهکاوی در شهر الکترونیک ......................................................................................... 90
کاربردهای دادهکاوی باب شهر الکترونیک ................................................................................ 91
کشف علایق و انگیزههای شهروندان و تولید سرویسهای شخصیسازی . .................................. 92
تجدید ساختار سایت وب شهر و افزایش کارایی سیستم ......................................................... 93
تقویت برنامهریزیهای دولت و ترویج نوآوری.......................................................................... 95
تندرستی تحلیلها و تصمیمات دولت ............................................................................................. 96
چالشهای دادهکاوی در آبادی الکترونیک . .................................................................................. 96
کیفیت دادهها ........................................................................................................................... 97
قابلیت انتقال دادهها و استعمال از اطلاعات ............................................................................... 97
چالش ارزیابی مدلهای دادهکاوی . ............................................................................................. 98
امعان نتایج متدهای دادهکاوی ............................................................................................... 100
پیچیدگی و هزینه زمانی ........................................................................................................ 102
محرمانگی دادهها .................................................................................................................. 102
نتیجه گیری . ............................................................................................................................... 104
مراجع و ماخذ فارسی . ............................................................................................................... 106
مراجع و منابع لاتین و سایتهای اینترنتی . ................................................................................... 107
11
مقدمه:
با انبساط فناوری اطلاعات و ارتباطات 1 درجهان و ورود سریع آن به سمت زندگی روزمره مردم مسائل
و ضرورتهای تازهای بهوجودآمدهاست. امروزه انسان بسط یافته کسی است که به اطلاعات
دسترسی داشتهباشد و دسترسی به سمت داده‌ها نه یک ضرورت،که یک قدرت محسوبمیشود.
دراینمیان شهرها به سمت آغاز مراکز قدرت انسانی و تمدنهای بشری بیش از پیش اهمیتیافتهاند. به
اعتقاد الوین تافلر، آدم کره زمین تا به امروز سه موج اساسی تحول راپشت سرگذاشته اند :
موج اول، خیزاب انقلاب کشاوزی است که زمان آغاز ثانیه برکسی مشخص نیست.
موج دوم، انقلاب صنعتی است که به پشت آفرینش ماشین بخار در سال 1764 آغاز شد.
موج سوم یا اغتشاش انفورماتیک است که ازسال 1946 که آدم به ساخت کامپیوتر نائل آمده آغاز
گشتهاست.
اگر باب خیزاب دوم سختافزارها به کمک انسانها میآمدند، درموج سوم این نرمافزارها هستند که به
خدمت بشر میشتابند و تفکرات و تصورات آدمی را به سمت شکل کدهای صفر و یک و با کمک امواج
ماهوارهای تبادل میکنند.
در خیزاب سوم، انسان هر روز که بیشتر یاد میگیرد، بیشترمی فهمدکه با حقیقت بعد دارد. خیزاب
سوم راموج خردورزی نیز لقب داده اند زیرا در این عرصهها، انسانها دیگر فرصت ندارند زیاد حرف
هم صحبتکنند، تمام چیز تعریف شده و برای هر تعریف، یک کد درنظرگرفته شده است.
از سوی دیگر باب دنیای به تشدد رقابتی امروز، اطلاعات بعنوان یکی از فاکتورهای تولیدی مهم
پدیدار شده است. در نتیجه تلاش برای استخراج اطلاعات از داده ها توجه بسیاری از افراد دخیل
1 Information and Communication Technology(ICT)
12
باب

خرید این محصول

عنوان پروژه: وب¬ کاوی در صنعت

خرید این محصول

» :: آغاز پروژه: وب¬ کاوی در صنعت

عنوان پروژه:

وب­ کاوی در صنعت

چکیده

با افزایش چشمگیر حجم اطلاعات و توسعه وب، نیاز به روش ها و تکنیک هایی که بتوانند امکان دستیابی کارا به داده‌ها و استخراج اطلاعات از آنها را فراهم کنند، بیش از پیش عاطفه می شود. وب کاوی یکی از زمینه های تحقیقاتی است که با به کارگیری تکنیک های داده کاوی به سمت کشف و استخراج خودکار اطلاعات از اسناد و سرویس‌های وب می پردازد. در واقع وب کاوی، فرآیند کشف اطلاعات و اندیشه غریب و مفید از داده های وب می باشد. روش های وب کاوی حرف اساس آن که چاه نوع داده ای را مناسبت کاوش رسم می دهند، به سه دسته کاوش محتوای وب، کاوش ساختار وب و کاوش استعمال از وب تقسیم می شوند.   طی این گزارش پشت از معرفی وب کاوی و بررسی مرحله‌ها آن، ارتباط وب کاوی با سایر زمینه های تحقیقاتی بررسی شده و به سمت چالش ها، مشکلات و کاربردهای این زمینه تحقیقاتی استعاره می شود. همچنین تمام یک از انواع وب کاوی به تفصیل مناسبت بررسی قرار می گیرند که در این پروژه افزون‌تر به وب کاوی در صنعت می پردازم. برای این غرض مدل ها، الگوریتم ها و کاربردهای هر طبقه معرفی می شوند.

سیاهه مطلب‌ها

عنوان                                                                                                                شماره صفحه

فصل اول:آغاز

مقدمه. 1

فصل دوم:داده کاوی

2- 1 مقدمه ای حرف داده کاوی .. 6

2-1-1 چه چیزی انگیزه پیدایش داده کاوی شده است؟ . 7

2-2 مراحل انکشاف دانش ... 9

2- 3 جا داده کاوی در میان علوم مختلف .. 12

2-4 داده کاوی چه کارهایی نمی تواند انجام دهد؟. 14

2-5 داده کاوی و انبار داده ها 14

2-6 داده کاوی و OLAP.. 15

2-7 کاربرد آموزش ماشین و آمار در داده کاوی .. 16

2-8 تشریح داده ها در داده کاوی .. 16

2-8-1 خلاصه سازی و به پرتره در اتیان داده ها 16

2-8-2 خوشه بندی.. 17

2-8-3 تحلیل لینک... 18

2-9 الگو های پیش پوز داده ها 18

2-9-1 دسته بندی.. 18

2-9-2 رگرسیون.. 18

2-9-3 پوشیده های زمانی.. 19

2-10 مدل ها و الگوریتم های داده کاوی.. 19

2-10-1 شبکه های آتشی‌مزاج .. 19

2-10-2 دار تصمیم . 22

2-10-3 Multivariate Adaptive Regression Splines(MARS) 24

2-10-4 Rule induction. 25

2-10-5 K-nearest neibour and memory-based reansoning(MBR) 25

2-10-6 رگرسیون اسم .. 26

2-10-7 تحلیل تفکیکی.. 27

2-10-8 الگو افزودنی بسیار ( GAM) 28

2-10-9 Boosting. 28

2-11 سلسله مراتب انتخابها 28

2-12داده کاوی و تدبیر بهینه وب سایت ها 30

2-13داده‌کاوی و مدیریت اندیشه ... 31

فصل سوم: وب کاوی

3-1 تعریف وب کاوی.. 33

3-2 مراحل وب کاوی.. 33

3-3 وب کاوی و زمینه های تحقیقاتی مرتبط.. 34

3-3-1 وب کاوی و داده کاوی.. 34

3-3-2 وب کاوی و بازیابی اطلاعات.. 35

3-3-3 وب کاوی و استخراج اطلاعات.. 36

3-3-4 وب کاوی و یادگیری ماشین.. 37

3-4 اشکال وب کاوی .. 37

3-5 خرامیدن های وب کاوی .. 38

3-6مشکلات ومحدودیت های وب کاوی باب سایت های فارسی  لسان .. 39

3-7 محتوا کاوی وب.. 40

فصل چهارم: وب کاوی در صنعت

4-1 اشکال وب کاوی در صنعت .. 43

4-1-1وب کاوی در صنعت نفت، گاز و پتروشیمی.. 43

4-1-1-1 مهندسی مخازن/ اکتشاف.. 43

4-1-1-2مهندسی برخه برداری .. 44

4-1-1- 3مهندسی حفاری.. 44

4-1-1-4بخشهای مدیریتی.. 44

4-1-2 کاربرد های دانش داده کاوی باب صنعت بیمه . 45

4-1-3کاربردهای دانش داده کاوی در مدیریت شهری.. 46

4-1-4کاربردهای داده کاوی در صنعت بانکداری.. 47

4-1-4-1بخش بندی مشتریان.. 47

4-2 پژوهش های کاربردی.. 48

خرید این محصول

عنوان پروژه: وب¬ کاوی در صنعت

خرید این محصول

» :: عنوان پروژه: وب¬ کاوی باب تکنیک

عنوان پروژه:

وب­ کاوی در تکنیک

خرید این محصول