الاختبار الخلفي بصدق: التفصيل والتطلع والنجاة

لديك منحنى رأس مال يصعد إلى اليمين. ونسبة شارب فوق 2، ودراوداون أقصى تستطيع التعايش معه، وبضع مئات من الصفقات. استغرق الأمر عطلة أسبوع من الضبط، والنتيجة تبدو مستحقة.

هي على الأرجح بلا قيمة، لأسباب ميكانيكية لا لأي قصور في المهارة. الاختبار الخلفي لا يختبر استراتيجية. هو يقيس مدى جودة وصف قاعدة لمجموعة بيانات رأيتها بالفعل. وهاتان دعويان مختلفتان، والثانية لا تدعم أي استنتاج يتعلق بالمال. وإذا كانت لديك استراتيجية تفخر بها، فاقرأ ما تبقى وأنت تضعها في ذهنك.

التفصيل الزائد ليس إهمالاً، بل مشكلة عدّ

الصياغة المعتادة أن التفصيل الزائد يحدث حين تضيف معاملات كثيرة. وهذا جزء منه. أما الجزء الأكبر فهو عدد المرات التي نظرت فيها.

كل اختبار تجريه على مجموعة البيانات نفسها محاولة. غيّرت نافذة وأعدت التشغيل: محاولة. أضفت مرشّحاً وأعدت التشغيل: محاولة. جرّبت أصلاً آخر لأن الأول كان مخيباً: محاولة. وبعد 200 محاولة على التاريخ نفسه، تكون أفضل نتيجة في المظهر هي بالضبط ما تتوقعه من التشويش وحده، سواء وُجدت أفضلية أم لا.

وعند عتبة دلالة قدرها 5%، تنتج 200 محاولة مستقلة نحو 10 نتائج «ذات دلالة» زائفة بمحض الصدفة. ثم تختار أنت أفضلها، وهذا تحديداً إجراء الاختيار الذي يضمن أن تلتقط نتيجة إيجابية كاذبة.

وعدد المحاولات لا يظهر تقريباً في تقرير أحد، مع أنه يجب أن يكون أول رقم يُذكر. سجّل كل إعداد اختبرته، بما فيها المهجور، وعامل النتيجة النهائية كسحبة واحدة من ذلك البحث كله.

والعدّ أكبر من تجاربك أنت. فإذا كنت تختبر تقاطع متوسطات متحركة على مؤشر ستاندرد آند بورز، فأنت لست الأول. آلاف الناس اختبروا صيغاً من هذه الفكرة على التاريخ نفسه، والصيغ التي فشلت لم تُنشر قط. أنت ورثت بحثاً لم تُجره.

انحياز التطلع يختبئ في كود عادي

انحياز التطلع هو استخدام معلومة عند اللحظة t لم تكن متاحة عند اللحظة t. سهل الصياغة ويُنتهك باستمرار.

استخدام سعر الإغلاق إشارةً وتنفيذاً معاً. قاعدتك تُشغَّل على إغلاق اليوم وتُنفَّذ عند إغلاق اليوم. وفي التداول الحقيقي لا يمكنك معرفة الإغلاق قبل وقوعه. الفجوة صغيرة على الشموع اليومية السائلة وهائلة على أي شيء داخل اليوم أو ضحل السيولة.

البيانات المعاد ذكرها. الأرقام الاقتصادية تُراجَع. وقاعدة بيانات تعرض القيمة النهائية المنقّحة على التاريخ الأصلي تتيح لقاعدتك استخدام رقم لم يكن موجوداً لأسابيع.

المؤشرات المحسوبة على السلسلة كاملة. أي تطبيع أو ترتيب أو درجة معيارية تُحسب عبر التاريخ كله تحقن معلومة مستقبلية في كل شمعة مبكرة.

والعَرَض هو منحنى رأس مال ناعم على نحو مريب، بنسبة فوز عالية ودراوداونات ضحلة. وهذا الشكل يعني عادةً أن النظام تُسلَّم إليه الإجابات بدل أن يتنبأ.

النجاة خاصية في بياناتك لا في كودك

إذا كان عالمك هو قائمة الأصول الموجودة اليوم، فأنت قد استبعدت أصلاً كل ما مات. الأسهم المشطوبة، والعملات التي فشلت، والمنصات التي انهارت، والأزواج التي توقف تداولها. كل واحد منها كان ضمن العالم القابل للاستثمار في حينه وهو غائب عن اختبارك.

وفي الكريبتو الأمر حاد. فمجموعة العملات ذات التاريخ السعري الكامل الممتد سنوات عينة منتقاة بشدة: تلك التي نجت. والاستراتيجية المختبَرة على الناجين فقط تبدو متينة لأن الإفلاس أُزيل من العينة.

التكاليف ليست خطأ تقريب

تُضاف الاحتكاكات أخيراً، إن أُضيفت أصلاً، وهي تغيّر الاستنتاجات أكثر من أي معامل. أدرج السبريد الذي تدفعه فعلاً بدل السعر الأوسط المعلن، والانزلاق السعري الذي يتناسب مع التقلب وحجم المركز، والعمولات وتكاليف التمويل أو التبييت على المراكز المحتفظ بها.

والنظام الذي ينجو عند تكلفة صفرية ويموت عند تكلفة واقعية لم يكن نظاماً قط. هو كان وصفاً للسعر الأوسط. ضاعِف احتكاكاتك المفترضة وانظر ما الذي يتبقى. فإذا اختفت الأفضلية، فقد كانت داخل السبريد.

كيف يبدو الاختبار الصادق

قسّم البيانات قبل أن تبدأ، ولا تلمس الجزء المحجوز. طوّر على قطاع واحد، ثم شغّل مرة واحدة على بيانات لم تفحصها قط. مرة واحدة. فإذا عدت وعدّلت بعد رؤية تلك النتيجة، صار الجزء المحجوز ملوَّثاً ولم يعد لديك جزء محجوز.

فضّل التحليل المتدحرج. لائِم على نافذة، وتداول النافذة التالية، ثم تقدّم. هو يقارب طريقة عملك الحقيقية، ويكشف الاستراتيجيات التي لم تعمل إلا في حالة سوقية واحدة.

وأبلغ عن عدد المحاولات والاحتكاكات وحساسية المعاملات. النتيجة التي تنجو من تغيير قدره 10% في كل معامل أثمن من نتيجة أفضل لا تنجو منه.

ثم توقّع أن يكون الأداء الحي أسوأ على أي حال. بعض التدهور طبيعي حتى مع منهجية نظيفة، لأن الأسواق تتغير ولأنك لا تستطيع إزالة انتقائك الخاص إزالة تامة.

لهذا فالسجلات الأمامية أهم من الاختبارات الخلفية. تجزّئ Indikora كل إشارة منشورة بخوارزمية SHA-256 وتسلسلها بالتي قبلها، فلا يمكن تحرير السجل العلني ولا تأريخه بأثر رجعي، وتنشر معايرة الاحتمالات - فحين تقول 60%، تستطيع أن تفحص كم مرة صحّ ذلك. وكلاهما مستحيل مع اختبار خلفي يُكتب بعد الواقعة بحكم التعريف.

الاستراتيجية التي ضبطتها في عطلة أسبوع قد تكون سليمة رغم كل هذا. لكنك لا تعرف ذلك بعد، والموقف الصادق هو أن تقول هذا بصوت عالٍ قبل أن تخصص لها أي حجم.