آموزش داده کاوی در فارکس با استفاده از SPSS Modeler

[optiondataminer]

تمرین اول

خب با تشکر از جناب جبل عاملی

خب بترتیب نود ها رو توضیح می دیم نود اول نود history هست , این نود چیکار می کنه؟
اگر ما داده ها همونطور که آموزش داده شده وارد نرم افزار کنیم نمی تونیم برای پیشبینی ازش استفاده کنیم , چرا؟ چون spss modeler هر خط رو بطور مستقل بررسی می کنه فرض کنیم 6 عدد وارد کردیم
در ابتدا این 6 عدد به صورت زیر هستند
x1
x2
x3
x4
x5
x6
وقتی از نود هیستوری استفاده می کنیم اعداد پیشت سر هم رو در یک ردیف قرار میده و پیشبینی رو برای ما امکان پذیر می کنه مثلا اگر اندازه هیستوری رو 3 قرار بدیم داده ها به این شکل در میاند
x1,x2,x3
x2,x3,x4
x3,x4,x5
x4,x5,x6
همانطور که ملاحظه می کنید الان در هر سطر 3 داده وجود دارد و مثلا می تونیم به شبکه عصبی بگیم با دو داده ی اول داده ی سوم رو تخمین بزن

در این مثال ما ستون open رو انتخاب کردیم و تعداد داده ها رو برابر 20 قرار دادیم


در این صورت نرم افزار به ما ستون های 20 ستری میده که می تونیم از این ستون ها برای خوشه بندی و پیش بینی استفاده کنیم . یعنی با 20 قیمت قبل قیمت بعدی رو پیشبینی کنیم

نود مهم بعدی نود type ه و همونطور که از اسمش بر میاد نوع متغیر ها رو مشخص می کنیم که مثلا اسمی هستن (مثل زن - مرد) =یوسته هستند , گسسته هستند , ورودی هستند یا خروجی
پیوسته و گسسته و اسمی بودن نیاز به توضیح نداره , اما ورودی یا هدف بودن یعنی فیلدی که می خوایم اون رو پیشبینی کنیم رو به عنوان هدف قرار می دیم



بعد روی نود شبکه ی عصبی کلیک می کنیم , همونطور که می بینیم گزینه ی open که به عنوان target انتخاب کرده بودیم در قسمت بالای شبکه قرار داره , در قسمت پایین سمت راست فیلد هایی که می خوایم بر اساس اون ها پیش بینی انجام بشه رو انتخاب می کنیم, من فقط فیلدهای open_1 تا open_20 رو گذاشتم و بقیه ی فیلدها رو به قسمت چپ (بدون استفاده در شبکه عصبی) انتقال دادم

دکمه ی run رو میزنیم و شبکه ی عصبی شروع به یادگیری می کنه و برای برخی از دوستان مثل جناب جبل عاملی ممکنه اتفاق عجیبی رخ بده!

خب لطفا دوستان تا همینجا پیش برند

[Jabalameli]

یه سوال

چرا توی منوی ادیت هیستوری برای من چیزی نشون نمیده ؟ خالیه

[yahya_a]

آقای عاملی روی اون نودها راست کلیک کرده و سپس کانکت یا شورتکات F2 رو انتخاب کنید
اما تصویر حاصله برای من متفاوت هست چرا؟

[optiondataminer]

یه سوال

چرا توی منوی ادیت هیستوری برای من چیزی نشون نمیده ؟ خالیه

جناب جبل عاملی فایل csv تون رو باز بفرمایید و بالاش رو ویرایش کنید به این صورت که خط datetime,time,open,high,low,close,volume رو قرار بدید , سپس فایل csv رو ببندید و مجددا در spss modeler فایل رو سلکت کنید

جناب یحیی شما هم همینطور نیاز هست فایل csv رو ویرایش بفرمایید

[yahya_a]

جناب optiondataminer پوزش نمیخوام تاپیک آموزشی تون شلوغ بشه اما این Open رو که در تصویر آخر قرار داید بین نود ها پیدا نمیکنم! از طرفی پیغام خصوصی بنده هم متاسفانه غیر فعال هست!!

[optiondataminer]

جناب optiondataminer پوزش نمیخوام تاپیک آموزشی تون شلوغ بشه اما این Open رو که در تصویر آخر قرار داید بین نود ها پیدا نمیکنم! از طرفی پیغام خصوصی بنده هم متاسفانه غیر فعال هست!!

خواهش دارم جناب یحیی اتفاقا خیلی خوبه اینجا سوال پرسیده بشه چون ممکنه سوال باقی دوستان هم باشه
یا بایستی فایل csv رو ویرایش بفرمایید یا اینکه از اولین گزینه استفاده بکیند اولین گزینه همون open هست

برای اینکه گزینه رو اضافه کنیم کافی ه روی اون فلش مثلث به پایین کلیک کنیم

[Jabalameli]

سلام و خسته نباشید optiondataminer عزیز

نتایج خیلی جالب بود و بیشتر از میزان دقت و رشته بندی که بین نورون ها و بیشترین آیتم های تاثیر گذار داشت تحت تاثیر قرار گرفتم. خداراشکر تا الان که خوب هست. یه سوال تخصصی ، ما الان مثلا کلوز را به عنوان تارگت انتخاب کردیم و این یعنی این که از این داده برای یادگیری استفاده نمیکنه درسته ؟ اگه درسته چرا این را به عنوان هم اینپوت و هم تارگت معرفی نکنیم تا بیشتر در موردش یاد بگیره ؟

یه سوال دیگه : چرا اینقدر دقتش توی شبیه سازی زمانی که یک فاکتور فقط به عنوان داده بهش داده میشه و همون یک داده ( مثلا کلوز ) ازش برای خروجی خواسته میشه بالا هست ولی زمانی که داده های دیگرم بهش اضافه میکنیم به صورت پلکانی از دقتش کم میشه ؟


ممنون از راهنماییتون

[optiondataminer]

سلام و خسته نباشید optiondataminer عزیز

نتایج خیلی جالب بود و بیشتر از میزان دقت و رشته بندی که بین نورون ها و بیشترین آیتم های تاثیر گذار داشت تحت تاثیر قرار گرفتم. خداراشکر تا الان که خوب هست. یه سوال تخصصی ، ما الان مثلا کلوز را به عنوان تارگت انتخاب کردیم و این یعنی این که از این داده برای یادگیری استفاده نمیکنه درسته ؟ اگه درسته چرا این را به عنوان هم اینپوت و هم تارگت معرفی نکنیم تا بیشتر در موردش یاد بگیره ؟

یه سوال دیگه : چرا اینقدر دقتش توی شبیه سازی زمانی که یک فاکتور فقط به عنوان داده بهش داده میشه و همون یک داده ( مثلا کلوز ) ازش برای خروجی خواسته میشه بالا هست ولی زمانی که داده های دیگرم بهش اضافه میکنیم به صورت پلکانی از دقتش کم میشه ؟


ممنون از راهنماییتون

با سلام مجدد

جناب جبل عاملی زمانی که یک عامل رو به عنوان تارگت می دیم , در یادگیری ازش استفاده می کنه , منتهی در یادگیری ازش به عنوان عامل خروجی استفاده میکنه نه عامل ورودی
در مورد انتخاب ورودی ها بطوری که دقت بالاترین حالت باشه مبحثی هست به اسم feature selection که بالاتر از سطح مقدماتی داده کاوی ه ولی با سعی و خطا میشه بهش رسید

حالا که شما به این قسمت رسیدید بحث خوشه بندی رو هم توضیح میدم که کورس رو کامل کنیم

[optiondataminer]

خوشه بندی و یافتن خطوط مقاومت و حمایت

جناب جبل عاملی پیش از بحث خوشه بندی یک نکته رو عرض کنم , هرچه قدر ما اطلاعات بیشتری به شبکه عصبی بدیم از یک حدی بیشتر! شبکه قدرت یادگیریش کمتر میشه , انگار به آدمی که بخواید شما 4 تا درس شیمی و فیزیک و ریاضی رو همزمان یاد بدید. تیو پست بعدی ارتباط خوشه بندی و شبکه ی عصبی رو میگم که چطور میشه از خوشه بندی به عنوان ورودی شبکه ی عصبی استفاده کرد و این موضوع چه چیزی رو در بازار به ما نشون میده

خب این تمرین در واقع تمرین یافتن ساپروت و رزیستنس های بازاره با استفاده از خوشه بندی

نود sample داده های اول رو انتخاب می کنه یعنی آموزش فقط با استفاده از نمونه 300 تایی اول انجام میشه
فقط در اینجا بهتره تعداد رو 10 قرار بدیم به جای 5

[polino]

سلام . با تشکر از وقتی که میگذارین .

لطفا میشه بگین مشکل کار من چیه که بعد از ران ، این ارور رو میده :


ضمنا ورودی برنامه هم در دو تصویر زیر نشان میدم تا بهتر بتونید مشکل من رو بررسی کنید :

[optiondataminer]

سلام . با تشکر از وقتی که میگذارین .

لطفا میشه بگین مشکل کار من چیه که بعد از ران ، این ارور رو میده :


ضمنا ورودی برنامه هم در دو تصویر زیر نشان میدم تا بهتر بتونید مشکل من رو بررسی کنید :

با سلام و درود

دوست عزیز تنها آیتم های open داخل بخش یادگیری شبکه عصبی هستند؟

[optiondataminer]

روی خود الماس زرد کلیک بفرمایید ببینید باز می شه؟

[polino]

روی خود الماس زرد کلیک بفرمایید ببینید باز می شه؟

بله در قسمت اموزش شبکه عصبی فقط دیتای اپن (از 1 تا 20) وجود دارد

پس از اتمام کار ، اروری که تصویرش رو در پست قبل گذاشتم ، میاد و الماس هم نمی سازه . البته دیشب دو بار ران کردم و الماس رو ساخت و در مورد تحلیل داده های درون الماس سوال داشتم که متاسفانه امروز هر چه ران کردم ارور داد.

مشکل چیه به نظرتون ؟؟؟ اگر ممکنه فایلی که خودتون ساختین رو بزارین تا اون رو ران کنم البته اگر کمکی می کنه .

در مورد تعیین نوع داده های ورودی برخی رو continuous و برخی رو categorical در تظر گرفتین . علت چیست و هر نوع چه معنایی داره و چه اثری در نتیجه خروجی داره ؟

ممنون

[optiondataminer]

خب چه سوال دقیقی , نوع انتخابی باید continuous باشه نه categorical
البته spss مدلر در هر حال آموزش ما رو جواب میده منتهی برای داده های عددی پیوسته مثل قیمت continues انتخاب می کنیم , برای دسته بندی اسمی مثلا بازار رنج یا ... از categorical

با continuous امتحان بفرمایید ببینید درست میگیره یا خیر

[polino]

خب چه سوال دقیقی , نوع انتخابی باید continuous باشه نه categorical
البته spss مدلر در هر حال آموزش ما رو جواب میده منتهی برای داده های عددی پیوسته مثل قیمت continues انتخاب می کنیم , برای دسته بندی اسمی مثلا بازار رنج یا ... از categorical

با continuous امتحان بفرمایید ببینید درست میگیره یا خیر

ممنون . نوع داده ها رو به صورت پیوسته قرار دادم درست شد . البته شما در پست 61 (لینک زیر) دیتاهارو به همین صورت دسته بندی کرده بودین . از این رو من هم به این صورت دسته بندی کردم .

( http://forum.broker-fa.org/f7/%D8%A2...tml#post163919)

اگر ممکنه یه تحلیل از نتایج ارائه کنین. البته قطعا نتایج من نمیتونه درست و مفید باشه اما شما لطفا به صورت تیپیکال بهش نگاه کنید که چطور باید تفسیر بشه و چه اطلاعاتی به ما میده .

پ.ن: اگر ممکنه یه اسم حتی اسم مستعار بدین تا راحت تر بتونیم در ارتباط باشیم . والا شما با این همه وجنات از صنایع و مدیریت گرفته تا ای تی و منابع انسانی ، خودتون تمام معاونتهای یک شرکت کامل رو دارین فقط مونده یه معاونت تولید یا بهرهبردار هم بهش اضافه بشه که دیگه تکمیل میشه. البته بروبچ صنایع حتی تو این دو مورد هم دستی بر اتش دارند .