🕳️ الدرس 28: فخاخ الباكتست والتحقق
من السهل جدا أن تصنع استراتيجية تربح مئة في المئة في الماضي. يكفي أن تعدل الأرقام حتى تناسب الشارت. لكن هذه الاستراتيجية غالبا ستخسر من أول أسبوع حقيقي. في الدرس العشرين تعلمنا الباكتست، واليوم نتعلم كيف نكشف كذبه.
الفخ الأول: الإفراط في التحسين، أو Overfitting. كلما أضفت شرطا أو عدلت رقما ليتحسن الماضي، تقترب استراتيجيتك من حفظ الضجيج بدل فهم السوق. والعلامة: نتائج رائعة، مع شروط كثيرة وأرقام دقيقة جدا، مثل متوسط لسبع وثلاثين شمعة بالضبط.
الفخ الثاني: النظر إلى المستقبل، أو Look-ahead Bias. أي أن تستخدم الاستراتيجية معلومة لم تكن متاحة لحظة القرار. مثل الدخول عند افتتاح الشمعة بناء على إغلاقها، أو استخدام بيانات إطار أكبر قبل أن تغلق شمعته. والنتيجة دائما: أداء خيالي.
الفخ الثالث: تجاهل التكاليف: السبريد، والعمولة، والانزلاق، والسواب. في السكالبينغ على الذهب، قد تأكل التكلفة جزءا كبيرا من متوسط ربحك. واستراتيجية تربح عشر R في الصفقة قبل التكاليف، قد تخسر بعدها.
الفخ الرابع: العينة الصغيرة. عشرون صفقة رابحة لا تثبت شيئا، فقد تكون حظا. وكلما زاد عدد الصفقات، وتنوعت ظروف السوق فيها، بين اتجاه ونطاق، وهدوء وأخبار، زادت ثقتك في النتائج.
والآن أدوات التحقق. الأولى: الفصل بين البيانات. تقسم التاريخ إلى جزأين: جزء تبني عليه الاستراتيجية، وجزء لا تلمسه أبدا حتى النهاية، يسمى خارج العينة، أو Out-of-Sample. فإذا انهارت النتائج في الجزء الثاني، فقد حفظت الماضي ولم تفهمه.
الأداة الثانية: الاختبار المتدحرج، أو Walk-Forward. تحسن الاستراتيجية على سنة مثلا، ثم تختبرها على الأشهر الثلاثة التالية، ثم تتقدم وتكرر. وهكذا تحاكي ما سيحدث فعلا: تبني على الماضي، وتتداول المستقبل.
الأداة الثالثة: استقرار المعاملات. جرب قيما قريبة من أرقامك: إذا كانت الاستراتيجية تربح مع متوسط عشرين، وتخسر مع تسعة عشر وواحد وعشرين، فهي هشة. أما الاستراتيجية القوية فتعطي نتائج متقاربة على مساحة واسعة من القيم، كهضبة، لا كقمة حادة.
الأداة الرابعة: محاكاة مونت كارلو، أو Monte Carlo. تأخذ صفقاتك، وتعيد ترتيبها عشوائيا آلاف المرات. فترى ليس تراجعا واحدا، بل توزيعا كاملا: ما أسوأ تراجع محتمل؟ وكم مرة يحدث؟ وغالبا ستكتشف أن التراجع الذي يجب أن تستعد له أكبر مما رأيته في الباكتست.
ثم يأتي الاختبار الأمامي على حساب تجريبي، ثم حساب حقيقي صغير. والقاعدة: إذا كانت النتائج الحية أسوأ بكثير من الباكتست، فالمشكلة غالبا في الباكتست، لا في السوق.
سؤال: استراتيجية ربحت ثلاثمئة في المئة على البيانات التي بنيت عليها، وخسرت عشرين في المئة على بيانات خارج العينة. ماذا يعني ذلك؟ ... الجواب: إفراط في التحسين على الأرجح. فالاستراتيجية حفظت ضجيج الماضي، والنتيجة خارج العينة هي الأقرب للحقيقة.
وتذكر: حتى أفضل تحقق لا يضمن المستقبل. لكنه يحول سؤالك من: هل ربحت في الماضي؟ إلى سؤال أهم: هل هذه الأفضلية حقيقية بما يكفي لأخاطر عليها بمال حقيقي؟
لنلخص: احذر الإفراط في التحسين، والنظر إلى المستقبل، وتجاهل التكاليف، والعينة الصغيرة. وتحقق بالبيانات خارج العينة، والاختبار المتدحرج، واستقرار المعاملات، ومحاكاة مونت كارلو. ثم حساب تجريبي، ثم حقيقي صغير.
وفي الدرس القادم: أنظمة السوق، أو كيف تعرف متى تعمل استراتيجيتك، ومتى يجب أن توقفها.
تنبيه: التداول ينطوي على مخاطر عالية. هذا الدرس لأغراض تعليمية فقط، وليس نصيحة استثمارية.
اعرض الجواب
إفراط في التحسين على الأرجح: حفظت ضجيج الماضي، والنتيجة خارج العينة هي الأقرب للحقيقة.