इंजीनियरिंग फील्ड नोट। चार हफ्तों में हमें सात ट्रेडिंग विचार दिए गए — उनमें से अधिकांश मात्रात्मक शोधकर्ता से व्लादिस्लाव फ्रीडिनहमने प्रत्येक को बनाया, उसी फेल-क्लोज्ड प्रोटोकॉल के खिलाफ परीक्षण किया, और लिखा कि क्या हुआ। उनमें से किसी ने भी सिद्ध बढ़त नहीं बनाई। यह नोट स्कोरबोर्ड है, क्योंकि दिलचस्प हिस्सा निर्णय नहीं है — यह है कि हर विफलता ने एक स्थायी उपकरण पीछे छोड़ा, और उपकरण अब वही हैं जो अगले परीक्षण को सस्ता बनाते हैं।
प्रोटोकॉल जो हर विचार को पूरा करता है
एक विचार को एक बैकटेस्ट से निर्णय नहीं मिलता। यह गेटों की सीढ़ी चढ़ता है, जिनमें से प्रत्येक ने नीचे के सात विचारों में से कम से कम एक को मार दिया है। क्रम मायने रखता है: सस्ते, क्रूर गेट पहले आते हैं।
स्कोरबोर्ड
सात प्रयोग, चार सप्ताह, एक प्रोटोकॉल। अंतिम कॉलम वह संख्या है जिसने प्रत्येक को समाप्त किया।
| EXPERIMENT | विचार | VERDICT | वह संख्या जिसने इसे समाप्त किया |
|---|---|---|---|
| पाइन समानता 04 जुलाई · FVB संकेतक |
चार बाजार-स्थिति फिल्टर स्टैक करें; केवल तब व्यापार करें जब सभी सहमत हों | शून्य परिणाम | समग्र बनाम एकल फिल्टर, नमूने से बाहर: माध्य −27%, 5 सिक्कों में से 1 पर मदद की |
| तीन-इंजन पदानुक्रम 08 जुलाई · deda3 |
संरचना, फिर सापेक्ष शक्ति, फिर शीर्ष पर एक मैक्रो परत | तैयार नहीं | 10 में से 0 रणनीति-समय सीमा कोशिकाओं ने गेट पार किया; ~4,900 परीक्षण |
| पुनः अनुकूलन कैडेंस 13 जुलाई · deda5 |
बाजार लगभग स्थिर हैं, इसलिए हर हफ्ते सेटअप को फिर से फिट करें | शोर से नीचे | शार्प 2.38 24-सर्वश्रेष्ठ शोर तल के मुकाबले 3.57; 47 ट्रेड बनाम ट्रेडर का अपना 100 न्यूनतम |
| औसत सीढ़ी 16 जुलाई · deda7 |
प्रवेश से नीचे दो लिमिट ऑर्डर जोड़ें, एक साझा स्टॉप | उत्पादन नहीं | 172,224 संयोजनों में से, 0–16% तेज़ फ्रेम पर नमूने के बाहर सकारात्मक थे; ग्रिड औसत −48% से −90% |
| बाजार-व्यापी वीटो 16 जुलाई · deda6 |
बाजार से मत लड़ो: केवल तभी ट्रेड करें जब परिसंपत्ति और प्रमुख सहमत हों | केवल शासन | सबसे अच्छा दिखने वाला सेल एक सूचना-मुक्त जुड़वांसे मेल खाता था; कठिन संस्करण की लागत −28 अंक अल्फा थी |
| शासन-स्विचिंग एमएल 26 जुलाई · deda8 |
ग्रेडिएंट बूस्टिंग को चुनने दें कि कौन सी रणनीति वर्तमान स्थिति में फिट बैठती है | REFUTED | 0 का 169 प्रतीकों ने भविष्य कहनेवाला लिफ्ट दिखाया; मॉडल हर स्लाइस और फोल्ड में स्थिरांक से भी बदतर था |
| चैनल ब्रेक प्लस ऑसिलेटर 27 जुलाई · deda9 |
वोल्टेज चैनल तोड़ें जबकि परिसंपत्ति और प्रमुख दोनों मुड़ें | कोई चौड़ाई नहीं | 29 अन्य सिक्कों में स्थानांतरित यह पारित हुआ 1 जहां अकेले भाग्य देता है 0.55; माध्य अल्फा −0.25% |
अध्ययन के लायक तीन विफलताएं
1. विरलता भ्रम
पहले अभियान ने एक शीर्षक उत्पन्न किया +14.52% नमूने के बाहर एक सेल पर। यह बेकार था, और कारण रणनीति अनुसंधान में सबसे आम जाल है: रिटर्न सिक्कों पर एक माध्य था, और लगभग हर सिक्का जिसने इसमें योगदान दिया था, उसमें एक से तीन ट्रेड थे। ठीक से मापा गया — वास्तविक नमूना आकार के साथ कितने सिक्के नमूने के बाहर लाभदायक थे — वही सेल स्कोर किया 0 का 19.
उसी अभियान ने घंटों के भीतर दूसरा सबक सिखाया। पहली लहर का स्टार सेल — तेज़ फ्रेम पर 20 सिक्कों में से 13 लाभदायक — वाष्पित हो गया जब हमने 30 दिनों के इतिहास को कई वर्षों से बदल दिया। गहरे डेटा पर उस फ्रेम पर हर सेटअप नकारात्मक था, −9.2% से −41.5% तक। कमजोर परिणाम के लिए समाधान अधिक ट्यूनिंग नहीं, बल्कि अधिक इतिहास है।
2. सूचना-मुक्त जुड़वां
एक फिल्टर जो ट्रेड छोड़ देता है, लगभग हमेशा आपकी जीत दर में सुधार करेगा, क्योंकि यह ट्रेड हटाता है। यह किनारा नहीं है, यह अंकगणित है। अंतर बताने का एकमात्र तरीका एक जुड़वां फिल्टर बनाना है जो नमूने को उसी मात्रा में पतला करता है बिल्कुल कोई जानकारी नहीं — एक यांत्रिक हर-दूसरे-संकेत वीटो — और उसके मुकाबले तुलना करें।
हमने किया, बाजार-व्यापी वीटो विचार पर। दैनिक फ्रेम पर असली फिल्टर उत्कृष्ट दिखा। सूचना-मुक्त जुड़वां थोड़ा बेहतर दिखा। चार-घंटे के फ्रेम पर जुड़वां ने सक्रिय रूप से नुकसान पहुंचाया जबकि असली फिल्टर ने मदद की। एक ही विचार, एक ही कोड, विपरीत निष्कर्ष — और जुड़वां के बिना हम दैनिक संस्करण भेज देते।
3. जब मॉडल एक स्थिरांक से हार जाता है
सबसे महत्वाकांक्षी विचार यह था कि ग्रेडिएंट बूस्टिंग को बाजार की स्थिति पढ़ने दें — डॉलर सूचकांक, फंडिंग, ओपन इंटरेस्ट, वॉल्यूम डेल्टा, संरचना टूटना, सहसंबंध, भावना — और तय करें कि कौन सा रणनीति परिवार अभी उपयुक्त है। हमने इसे मौजूदा गेटों के अंदर एक उम्मीदवार रैंकर के रूप में बनाया, न कि एक ओरेकल के रूप में, और इसे पूरे ब्रह्मांड में चलाया।
169 प्रतीकों में से 0 ने भविष्य कहने वाली वृद्धि दिखाई। मॉडल ने आठ बाजार स्लाइस और सभी चार फोल्ड में हर एक में एक स्थिर भविष्यवाणी से भी बदतर स्कोर किया। एक भावना सुविधा जोड़ने से यह बदतर हो गया, बेहतर नहीं। लेकिन उसी रन ने पूरी श्रृंखला का सबसे उपयोगी आउटपुट उत्पन्न किया: वह कॉन्फ़िगरेशन जो बस व्यापार करने से इनकार कर दिया जब अपेक्षित मूल्य नकारात्मक था, शून्य व्यापार लिया, शून्य लौटाया, और हर मॉडल को हराया। नो ट्रेड एक प्रथम श्रेणी का उत्तर है, और यह जीत गया।
असफलताओं ने क्या बनाया
यह वह हिस्सा है जो चक्रवृद्धि करता है। प्रत्येक प्रयोग ने पाइपलाइन में एक उपकरण छोड़ा, और पाइपलाइन अब इतनी सख्त है कि अंतिम विचार एक सप्ताह के बजाय एक ही दिन में गलत साबित हो गया।
एक परिणाम को "यह कितने उपकरणों पर टिकता है" के रूप में पढ़ा जाता है, कभी माध्य रिटर्न के रूप में नहीं। तीन विचार मारे गए जो लाभदायक लग रहे थे।
हर फिल्टर की तुलना एक जुड़वां से की जाती है जो बिना किसी जानकारी के नमूना पतला करता है। वीटो अध्ययन के बाद से अनिवार्य।
5,000 पैरामीटर सेट खोजें और सबसे अच्छा निर्माण से शानदार दिखता है। तल वास्तव में किए गए प्रयासों की संख्या से गणना की जाती है, और उम्मीदवार को इसे पार करना होगा।
एक छोटी रणनीति जो 93% गिरी संपत्ति पर कुछ भी चतुर किए बिना पैसा बनाती है। अल्फा मिलान निष्क्रिय स्थिति घटाने के बाद मापा जाता है — लंबी रणनीतियों के लिए लंबा बेंचमार्क, और दो-तरफा के लिए दोनों में से बेहतर।
प्रशिक्षण डेटा प्रत्येक परीक्षण विंडो के आसपास काट दिया जाता है, क्योंकि विंडो से पहले खोली गई स्थिति अभी भी उसके अंदर खुली हो सकती है। अंतर मापा धारण समय से आकार दिया जाता है, और रन रिपोर्ट करता है जब यह बहुत छोटा होता है बजाय एक लीकी संख्या प्रकाशित करने के।
प्रत्येक पुनः-फिट के बाद हम परिणाम को आगे बढ़ती दूरी पर मापते हैं। यह उत्तर देता है कि कितनी बार पुनः-अनुकूलन करना है — और प्रकट करता है जब कभी क्षय होने के लिए कुछ नहीं था।
समीक्षक गलत संख्याओं की तलाश करते हैं जो क्रैश नहीं होतीं, फिर एक दूसरा पास प्रत्येक निष्कर्ष का खंडन करने की कोशिश करता है। इसने एक चुपचाप अक्षम संकेतक, एक लुक-आगे रिसाव जिसे एक मौजूदा परीक्षण ने सही के रूप में जोर दिया था, और एक बेंचमार्क को गलत दिशा के खिलाफ तुलना करते हुए पकड़ा है।
परहेज एक वैध उत्तर है जिसका अपना गेट है। मशीन-लर्निंग रन में इसने हर मॉडल को बेहतर प्रदर्शन किया।
अंतिम प्रयोग सब कुछ चालू के साथ कैसा दिखा
सबसे हालिया विचार — एक अस्थिरता चैनल तोड़ें जबकि संपत्ति और प्रमुख दोनों मुड़ते हैं — तैयार पाइपलाइन से मिला। यह एक उपयोगी प्रदर्शन है कि एक निष्पक्ष परीक्षण अब कितनी तेजी से चलता है, और एक रणनीति कितने अलग तरीकों से कमी पाई जा सकती है।
- खोज: तीन समय-सीमाओं में 913 पैरामीटर सेट, एक विजेता के बजाय एक व्यापार-बंद सीमा के रूप में प्रस्तुत। सर्वश्रेष्ठ इन-सैंपल परिणाम: +12.2%।
- होल्डआउट: 30 सबसे मजबूत उम्मीदवारों में से, एक ने हर गेट पार किया — और उसने केवल समान छोटी स्थिति रखने से 0.01 प्रतिशत अंक 14 व्यापारों पर बेहतर प्रदर्शन किया।
- चौड़ाई: 29 अन्य सिक्कों में अपरिवर्तित स्थानांतरित, जहां अकेले संयोग 0.55 की भविष्यवाणी करता है। प्रति सिक्का अलग से पुनः खोजा गया, 25 में से 1 पर पारित, जहां संयोग 1.25 की भविष्यवाणी करता है — भाग्य से नीचे।
- क्रॉस-एसेट: 50 गैर-क्रिप्टो इंस्ट्रूमेंट्स पर यह मुश्किल से चला — 41 ने कोई ट्रेड नहीं बनाया, क्योंकि प्रतिशत-चौड़ाई चैनल एक क्रिप्टो-अस्थिरता निर्माण है। लागू नहीं बल्कि लाभहीन नहीं, और सटीक कहने लायक।
- शेल्फ लाइफ: प्रत्येक पुनः-फिट के बाद केवल पहले खंड में सकारात्मक, 500 डॉलर की पुस्तक पर प्रति दस दिन लगभग 65 सेंट के लायक। क्षय होने के लिए कुछ नहीं।
किसी और की रणनीति का परीक्षण करने के बारे में जानने लायक दो बातें
चार्ट स्क्रिप्ट को परीक्षण योग्य इंजन में पोर्ट करना वह जगह है जहाँ शांत त्रुटियाँ रहती हैं। इस श्रृंखला से दो उदाहरण, दोनों ने उत्तर बदल दिया:
- एक नियंत्रण जो कुछ नहीं करता। नवीनतम स्क्रिप्ट में, मूविंग-एवरेज ब्लॉक जिसे व्यापारी हफ्तों से ट्यून कर रहा था — टाइमफ्रेम, अवधि, शिफ्ट — केवल चार्ट पर खींचा गया है। यह कभी भी प्रवेश शर्त में प्रवेश नहीं करता। वे इनपुट एक भी ट्रेड नहीं बदल सकते, और उन्हें अनुकूलित करने का कोई भी प्रयास मायने नहीं रखता।
- एक स्टॉप जो सशस्त्र नहीं है। वही स्क्रिप्ट अपने स्टॉप की गणना औसत प्रवेश मूल्य से उस समय करती है जब स्थिति अभी भी खाली है, इसलिए प्लेटफ़ॉर्म चुपचाप ब्रैकेट को छोड़ देता है। इसलिए पहली स्थिति तब तक असुरक्षित चलती है जब तक दूसरा प्रवेश एक को सशस्त्र नहीं करता। इसे वास्तविक तरीके के बजाय सहज तरीके से मॉडल करने से बैकटेस्ट −2.00 से +15.90 डॉलर हो गया — संकेत, परिमाण नहीं।
दोनों में से कोई भी व्यापारी की आलोचना नहीं है। दोनों कारण हैं कि एक रणनीति को मूल रिपोर्ट के खिलाफ पुनः लागू और अंतर किया जाना चाहिए, न कि भरोसा किया जाना चाहिए, और यही कारण है कि हम अंतर प्रकाशित करते हैं।
आठवाँ विचार, और विधि कहाँ से आई
श्रृंखला में एक आठवाँ प्रवेश है जो स्कोरबोर्ड पर नहीं है, क्योंकि यह एक रणनीति नहीं है। जुलाई 2026 में व्लादिस्लाव ने प्रकाशित किया सर्च एज: ए मार्केट रेजिम-अवेयर डिसीजन इंजन फॉर अल्गोरिदमिक क्रिप्टो ट्रेडिंग — नियमों के सेट के बजाय एक वास्तुकला, और हमारे सारांश के बजाय उसके अपने शब्दों में पढ़ने लायक।
हम इसका परीक्षण नहीं कर सके, क्योंकि इसमें निष्पादित करने के लिए कुछ भी नहीं है। हम जो कर सकते थे वह था इसके प्रस्तावों की जाँच करना जो हम पहले ही माप चुके थे, और उन हिस्सों को लेना जो हमें याद थे:
- इसका मूल हम पहले ही खंडन कर चुके थे। ग्रेडिएंट-बूस्टिंग चयनकर्ता ऊपर मशीन-लर्निंग प्रयोग के समान परिकल्पना है, और यह 169 प्रतीकों पर विफल रहा। यह वास्तुकला का खंडन नहीं है — यह इसके परीक्षण का परिणाम है, जो होना अधिक उपयोगी है।
- इसका सत्यापन अनुभाग हमने अपनाया। शुद्ध और एम्बार्गोड क्रॉस-वैलिडेशन हमारे पाइपलाइन में एकमात्र वास्तविक अंतर था, और यह अब लागू है, जिसमें मापा होल्डिंग समय से आकार का छेद और एक आत्म-जांच शामिल है जो लीकी संख्या प्रकाशित करने से इनकार करती है। साथ ही ट्रेड-ऑफ फ्रंटियर पर जोखिम-समायोजित अक्ष, और शेल्फ-लाइफ माप।
- इसका सबसे मजबूत बिंदु हमने स्वतंत्र रूप से पुष्टि की। नो ट्रेड एक प्रथम श्रेणी के निर्णय के रूप में पूरी श्रृंखला में एकमात्र चीज है जो मापने योग्य रूप से जीती।
क्या एक फैसला बदलेगा
इनमें से कोई भी विचार हमेशा के लिए बंद नहीं है। प्रत्येक की एक स्पष्ट शर्त है जो इसे फिर से खोलेगी, और शर्तें जानबूझकर गलत साबित करने योग्य हैं:
- मैक्रो परत परीक्षण योग्य हो जाती है जब इतिहास कई मैक्रो रेजिम को कवर करता है, न कि केवल एक;
- बाजार-व्यापी वीटो शिप करने योग्य हो जाता है जब यह एक रेजिम के माध्यम से रहता है जिसमें इसे ट्यून नहीं किया गया था;
- औसत सीढ़ी दिलचस्प हो जाती है जहाँ इसका परिणाम ग्रिड में व्यापक होता है न कि केवल एक दायाँ पूंछ;
- चैनल ब्रेक तब दिलचस्प हो जाता है जब वह उन उपकरणों पर टिकता है जिन पर इसे कभी फिट नहीं किया गया था;
- मशीन-लर्निंग कोर एक अलग लक्ष्य परिभाषा के साथ दिलचस्प हो जाता है, न कि अधिक सुविधाओं के साथ।
जब तक ऐसा नहीं होता, ईमानदार आउटपुट ऊपर स्कोरबोर्ड और उसके नीचे के उपकरण हैं। हम एक ऐसा कर्व प्रकाशित करने के बजाय सात नकारात्मक और एक काम करने वाला टेस्ट बेंच प्रकाशित करना पसंद करेंगे जो केवल अतीत में मौजूद है।