آموزش داده کاوی در فارکس با استفاده از SPSS Modeler

[optiondataminer]

پیشبینی خطای پیشبینی شبکه عصبی

خب کم کم داریم به 2 درس آخر کورس آموزشی می رسیم

پیشبینی شبکه ی عصبی همونطور که میدونیم همراه با خطاست , یکی از کارهایی که میشه کرد مقدار خطا رو استخراج کرد , از یک شبکه ی عصبی جدید خواست که خطا رو پیشبینی کنه و در نهایت مقدار پیشبینی رو به پیشبینی اولیه اضافه (یا منها کنه ) که در این صورت با استفاده از 2 شبکه ی عصبی مقدار پیشبینی دقیق تری خواهیم داشت

[optiondataminer]

کاهش خطای پیشبینی با پیشبینی خطا

خب همونطور که در این تصاویر می بینیم با پیشبینی خطا و جمع مقدار پیشبینی با پیشبینی اولیه خطای کل رو کاهش دادیم

[optiondataminer]

ممنون . نوع داده ها رو به صورت پیوسته قرار دادم درست شد . البته شما در پست 61 (لینک زیر) دیتاهارو به همین صورت دسته بندی کرده بودین . از این رو من هم به این صورت دسته بندی کردم .

( http://forum.broker-fa.org/f7/%D8%A2...tml#post163919)

اگر ممکنه یه تحلیل از نتایج ارائه کنین. البته قطعا نتایج من نمیتونه درست و مفید باشه اما شما لطفا به صورت تیپیکال بهش نگاه کنید که چطور باید تفسیر بشه و چه اطلاعاتی به ما میده .

پ.ن: اگر ممکنه یه اسم حتی اسم مستعار بدین تا راحت تر بتونیم در ارتباط باشیم . والا شما با این همه وجنات از صنایع و مدیریت گرفته تا ای تی و منابع انسانی ، خودتون تمام معاونتهای یک شرکت کامل رو دارین فقط مونده یه معاونت تولید یا بهرهبردار هم بهش اضافه بشه که دیگه تکمیل میشه. البته بروبچ صنایع حتی تو این دو مورد هم دستی بر اتش دارند .

خب بخش اول که مدل سازمری هست داره دقت پیشبینی رو میده که برابر با 99% هست! البته این 99% نباید ما رو خوشحال کنه چون شبکه ی عصبی طبق محاسبات خودش 99 درصد رو حساب می کنه در عمل شاید جهت حرکت قیمت بعدی رو 50% (یعنی همون حالت تصادفی!) بتونه حساب کنه

بخش دوم مهم ترین آیتم هایی که در پیشبینی استفاده شده رو نوشون میده و میگه این آیتم ها بیشترین تاثیر رو در پیشبینی درست داشتند low_7, ... این بنوعی کلید اینکه حرکت فعلی قیمت در چند کندل قبل و در چه قیمت هایی نهفته است رازش رو بنوعی به ما میده

بخش بعدی نمودار مقدار واقعی به مقدار پیشبینی شده است

و در نهایت هم خود شبکه عصبی رو نشون میده


مهم ترین استفاده همون طور که در پست قبل گفتم ابتدا باید خطای پیشبینی رو بسنجیم, بعد خطا رو تحلیل کنیم و یک گام دیگه داده کاوی رو پیش ببریم که در پست های آتی توضیح میدم

[optiondataminer]

[kiumarth]

نصب

سلام دوستان
من که هنوز نتونستم برنامه رو نصب کنم همه کار کردم پیتون نصب کردم ، spss Statistic نصب کردم
حتی دوباره ار یه سایت دیگه برنامه که حدود 4 گیگ شامل 32 و 64 بود دانلود کردم ولی نشد که نشد
ارور زیر میده


یکی میتونه مراحل نصب رو بگه که من چیکار نکردم و نصب نشد؟

من کارای زیر رو انجام دادم


1 - نصب SPSS_Modeler_142_win64
2 - نصب SPSS_Modeler_Server_142_win64
3 - نصب ModelerClient64 که در فولدر اپدیت64 بود
و کپی کرک در محل نصب

4- نصب SPSS Statistic و کرک آن

[مهدی اف ایکس]

عرض خسته نباشید مجدد ,

یعنی ما در نهایت میتونیم به فرض با آموزش دادن کندلهای [30 دقیقه] در سشن آسیا و یا بازار اروپا (در حرکات نرم تر) ، یک نقطهء ورود مناسب
رو استخراج و با یک حد سود و ضرر (خطوط حمایت و مقاومت) ، با احتمالی بالای (باز فرضا) 70 درصد واقعی (طبق نتیجه ای که به هر حال در استیتمنت لایو مشخص میشه)
به نتیجهء دلخواه (به اصطلاح معنی دار) برسیم ؟

ببخشید اگر سوال رو طولانی مطرح کردم

[optiondataminer]

عرض خسته نباشید مجدد , یعنی ما در نهایت میتونیم به فرض با آموزش دادن کندلهای [30 دقیقه] در سشن آسیا و یا بازار اروپا (در حرکات نرم تر) ، یک نقطهء ورود مناسب رو استخراج و با یک حد سود و ضرر (خطوط حمایت و مقاومت) ، با احتمالی بالای (باز فرضا) 70 درصد واقعی (طبق نتیجه ای که به هر حال در استیتمنت لایو مشخص میشه) به نتیجهء دلخواه (به اصطلاح معنی دار) برسیم ؟ ببخشید اگر سوال رو طولانی مطرح کردم

خواهش میکنم بطور کلی بله میشه استفاده کرد منتهی بطور خاص سوالتون بسیار کلی هست وقتی ما یک استراتژی داریم ابتدا مدل اون استراتژی رو می سازیم بعد روی اون مدل داده کاوی انجام می دیم ابتدا باید دید مدل چیه با توجه به اون مدل داده کاوی انجام داد

[polino]

سلام دوستان
من که هنوز نتونستم برنامه رو نصب کنم همه کار کردم پیتون نصب کردم ، spss Statistic نصب کردم
حتی دوباره ار یه سایت دیگه برنامه که حدود 4 گیگ شامل 32 و 64 بود دانلود کردم ولی نشد که نشد
ارور زیر میده


یکی میتونه مراحل نصب رو بگه که من چیکار نکردم و نصب نشد؟

من کارای زیر رو انجام دادم


1 - نصب SPSS_Modeler_142_win64
2 - نصب SPSS_Modeler_Server_142_win64
3 - نصب ModelerClient64 که در فولدر اپدیت64 بود
و کپی کرک در محل نصب

4- نصب SPSS Statistic و کرک آن

سلام
من ابتدا استاتیک رو نصب کردم و سپس مدلر . نسخه سرور و کلاینت لازم نیست .

[yahya_a]

سلام مجدد
یه سوالی برام پیش اومد که هدف از این کار داده کاوی در جفت ارزها چی هست؟

در واقع اینطور متوجه شدم ما گذشته یک جفت ارز رو به سیستم میدیم و یک سری شرط و قید براش میزاریم، در انتها انتظار داریم به ما بگه در آینده قیمت بالا می ره یا پایین!! درسته آیا؟


اگر بلی این که به ما میگه تا چند درصد قابل اتکا هست؟


اگر نزدیک 50 یا کمی بیشتر باشه عملا کاربردی شاید نباشه! چرا که با سکه انداختن و انتخاب 50 درصدی بین شیر و خط هم میشه به نتیجه مشابه رسید! پس انتظار خیلی بیشتری باید داشته باشیم


اما اگر اختلاف بیشتری داشته باشه معنی ش این میشه ما در این بازار میتونیم به سود پایدار برسیم، برداشت من درسته آیا؟


برای مثال ما بیایم و اطلاعات یک جفت ارز رو از تاریخی که بودجود اومده تا امروز بدیم به یک سوپر کامپیوتر تا به ما بگه فردا قیمت بالا میره یا پایین!


سوال این جاست آیا در عمل همچین چیزی ممکن هست؟ و آیا کسی تا قبل از این تلاشی در این راستا انجام داده و نتیجه چی شده؟


بیشتر فکرم به این مطلب معطوب شده چقدر میتونه این مورد میتونه کاربردی باشه؟

البته از زحمات شما و وقتی که گذاشتید کمال تشکر رو دارم اما یکدفعه این فکرها به سرم زد

[optiondataminer]

سلام مجدد
یه سوالی برام پیش اومد که هدف از این کار داده کاوی در جفت ارزها چی هست؟

در واقع اینطور متوجه شدم ما گذشته یک جفت ارز رو به سیستم میدیم و یک سری شرط و قید براش میزاریم، در انتها انتظار داریم به ما بگه در آینده قیمت بالا می ره یا پایین!! درسته آیا؟


اگر بلی این که به ما میگه تا چند درصد قابل اتکا هست؟


اگر نزدیک 50 یا کمی بیشتر باشه عملا کاربردی شاید نباشه! چرا که با سکه انداختن و انتخاب 50 درصدی بین شیر و خط هم میشه به نتیجه مشابه رسید! پس انتظار خیلی بیشتری باید داشته باشیم


اما اگر اختلاف بیشتری داشته باشه معنی ش این میشه ما در این بازار میتونیم به سود پایدار برسیم، برداشت من درسته آیا؟


برای مثال ما بیایم و اطلاعات یک جفت ارز رو از تاریخی که بودجود اومده تا امروز بدیم به یک سوپر کامپیوتر تا به ما بگه فردا قیمت بالا میره یا پایین!


سوال این جاست آیا در عمل همچین چیزی ممکن هست؟ و آیا کسی تا قبل از این تلاشی در این راستا انجام داده و نتیجه چی شده؟


بیشتر فکرم به این مطلب معطوب شده چقدر میتونه این مورد میتونه کاربردی باشه؟

البته از زحمات شما و وقتی که گذاشتید کمال تشکر رو دارم اما یکدفعه این فکرها به سرم زد

نه اتفاقا کاملا سوال بجایی هست , اول ما باید مسئله رو تعریف کنیم , مسئلمون پیشبینی جهت ه (مثل مسئله ی من) مسئله مون چیه - تا اینجا ما فقط مبانی رو یاد گرفتیم
من گفتم اگر همین جوری اطلاعات رو به شبکه ی عصبی بدیم 50 درصده در صورتی که اگر بیشتر کار کنیم دقت شبکه ی عصبی بالا میره , مثلا یک سوال ورودی شبکه ی عصبی چند تا قیمت باشه 20 تا 100 تا 500 تا؟ برای داده ی آموزشی از چند تا داده استفاده بشه (نود sample) بیست تا 4000تا یا کل هیستوری بازار ؟

(اتفاقا زمانی که کل هیستوری رو بذاریم اتفاقا دقت بشدت کاهش پیدا می کنه)

از خوشه بندی قبل داده کاوی ساتفاده بشه یا نشه؟

وقتی حالت های مختلف داده کاوی رو ضرب کنیم می بینیم که شاید 9 ملیون حالت مختلف برفرض باشه و این موضوع در واقع موجب میشه که حالتی که شما فرمودید که هر کسی که با spss modeler آشنا بشه بیاد سریع پیشبینی با دقت بالا کنه در نتیجه افرادی که خوب می تونند مسئله تعریف کنند , پاکسازی داده کنند و ... می تونند به جواب برسند

مثلا من نگفتم اگر از داده ها لگاریتم بگیریم قدرت شبکه ی عصبی بیشتر میشه

در کل داده کاوی یک امر تجربی ه , قدم به قدم بر اساس مدلی که داریم به جواب نزدیک می شیم , کار ساده نیست شاید 1 % - 1% پیش بریم , بسته به فرد 6 ماه طول بکشه تا به جواب برسیم ولی یک رویکرد علمی به بازاره

[optiondataminer]

خب برای اختتام کورس آموزشی هم تعیین مقدار tp و sl مناسب پس از کراس دو مووینگ رو قرار می دیم که بطور کاربردی مورد استفاده ی دوستان قرار بگیره

[optiondataminer]

شاید حالا چندتا سیگنال با دقت بالا رو اینجا بذارم دوستان علاقه مند بشند

[Behrooz_MB]

سلام
اگر میشد آموزشها به صورت ویدیویی باشه (حتی بدون صدا) خیلی عالی میشد. با صدا که عالی تر.


اگه میشه یه مقدار بیشتر در مورد نتایج به دست امده توضیح دهید.
فقط یه سوال دیگه برام مونده ، فرمودید در زمانی که تعداد کم باشه از آمار و وقتی تعداد زیاد باشه از داده کاوی استفاده میکنیم ، این تعداد حدودا چند تاست؟ یعنی مثلا زیر 100 هزار نمونه از آمار و بالای صد هزار نمونه از داده کاوی.
از زحماتی که کشیدید تشکر میکنم.

[optiondataminer]

سلام
اگر میشد آموزشها به صورت ویدیویی باشه (حتی بدون صدا) خیلی عالی میشد. با صدا که عالی تر.


اگه میشه یه مقدار بیشتر در مورد نتایج به دست امده توضیح دهید.
فقط یه سوال دیگه برام مونده ، فرمودید در زمانی که تعداد کم باشه از آمار و وقتی تعداد زیاد باشه از داده کاوی استفاده میکنیم ، این تعداد حدودا چند تاست؟ یعنی مثلا زیر 100 هزار نمونه از آمار و بالای صد هزار نمونه از داده کاوی.
از زحماتی که کشیدید تشکر میکنم.

ببینید اگر ذات مسئله پیچیده باشه از داده کای و استفاده می کنیم

مثلا رابطه ی دو جفت ارز gbpjpy و eurusd در حالت عادی شاید بگیم ضریب همبستگی این دو جفت ارز مثلا 0.5 هست , ولی با داده کاوی می تونیم بگیم این دو جفت ارز 9 رفتار مختلف نسبت به هم دارند و هر وقت رفتار ایکس در gbpjpy مشاهده بشه به احتمال 70% رفتار ایگرگ در eurusd مشاهده میشه

یعنی زمانی که داده ها بسیاز زیاد باشند و رفتار پیچیده باشه , عدد دقیقی نداره بستگی به مسئله داره ولی 1000 تا به بالا مسئله رو قابل استفاده برای الگوریتم های داده کاوی می کنه

[jiomanjy]

ممنون از وقتی که میذارید
ولی همون طوری که دوستمون گفتند اگه یه ویدیو حتی بدون صدا هم باشه خیی تاثیر گذاری آموزش ارزشمند تون رو بالا میبره
با تشکر مجدد