Если у вашего счёта есть лимит открытых позиций — а он есть у всех, — бывают дни, когда приходит больше меток, чем помещается. То, какие из них войдут, обычно решает случайность. Мы пошли измерить, сколько весит эта случайность, и она весит больше почти всего, что мы сравнивали.
Та же стратегия, те же данные и те же правила, прогнанные двадцать пять раз. Результаты от 185,73 до 304,78. Сто девятнадцать пунктов разницы, не тронув ни одного правила.
Система генерирует метки. На счёте есть место для нескольких позиций одновременно: скажем, для десяти. В спокойные дни проблем нет. В дни, когда приходит пятнадцать меток, а мест десять, кто-то должен решить, какие пять останутся за бортом.
В большинстве программ это решение никто не принимает. Его принимает порядок, в котором символы идут в списке, а он почти всегда алфавитный. То есть: войдёт сделка или нет, может зависеть от того, что компания называется Adobe, а не Zoom.
И это не редкий случай. В бэктесте нашей системы из 11.988 меток, сгенерированных за шестнадцать с половиной лет, при десяти одновременных позициях до торговли доходят только 1.488. 87,6 % не входят никогда — не потому, что плохие, а потому, что, когда они пришли, места не было. При такой пропорции разрешение ничьей — не мелочь: это большая часть того, что в итоге происходит.
Мы прогнали одну и ту же конфигурацию двадцать пять раз, изменив одну-единственную вещь: порядок, в котором разрешается ничья между метками одного дня. Ни одно правило входа, выхода или риска не тронуто.
| По 25 прогонам, одинаковым во всём, кроме разрешения ничьей | Результат (R) |
|---|---|
| Худший | 185,73 |
| Медиана | 251,66 |
| Лучший | 304,78 |
| Размах от края до края | 119,05 |
| Стандартное отклонение | 30,96 |
Следствие неудобное, и оно-то и нужно: если вы сравниваете две конфигурации, прогоняя каждую один-единственный раз, и разница между ними — тридцать пунктов, вы ничего не измерили. Эта разница целиком помещается в случайность распределения.
Мы проверили это на собственных сравнениях. Мы испытали пятнадцать вариаций системы по одному прогону на каждую, и одиннадцать казались отличными от оригинала. Когда каждую повторили двадцать пять раз и сравнили медианы, отличными остались только четыре. Десять были в пределах шума, а одна указывала ровно в обратную сторону от того, что подсказал единственный прогон.
Потому что дефицитный ресурс — не метка, а место. Когда сделка входит, она занимает место на недели. Всё, что приходит тем временем и не помещается, исчезает — и не возвращается. Каждое разрешение ничьей меняет не одну сделку: оно меняет всю цепочку того, что можно было торговать потом.
Поэтому эффект так велик. Складываются не двадцать мелких независимых различий: одно начальное различие распространяется по шестнадцати годам сцепленных решений.
И есть практическое следствие, которое видно сразу: то, сколько времени держится открытой каждая сделка, важно столько же, сколько то, какие вы выбираете, потому что время в открытой позиции — это то, что занимает место.
Чтобы ответить на вопрос, работает ли стратегия или вам повезло, — на который почти никто не отвечает. Рабочий ответ простой: прогоните одну и ту же проверку несколько раз, меняя то, что не должно иметь значения, и посмотрите, насколько двигается результат. Это движение — ваш запас шума. Любое улучшение меньше него — не улучшение: это удачный прогон.
Особенно это полезно перед тем, как платить за испытание проп-фирмы. Если ваша система, повторённая двадцать раз на одной и той же истории, даёт результаты от убытка до прибыли, вы уже знаете, что результат реального испытания будет сильно зависеть от случайности — и это полезная информация до того, как вы вложите деньги, а не после.
И это меняет то, на что стоит смотреть, когда вы сравниваете две версии: не на число, а на число и его разброс. Версия, которая в среднем даёт то же самое, но колеблется вдвое меньше, — лучшая версия, хотя заголовок этого не скажет.
Он не говорит, что результаты на истории бесполезны. Он говорит, что неповторённый результат не позволяет сравнивать две похожие вещи. Он не говорит, что двадцати пяти повторений достаточно: столько мы сделали, а с большим числом запас сужается. Он не говорит, что этот запас — запас вашей системы: он зависит от того, сколько меток вы генерируете, сколько у вас мест и сколько длятся ваши сделки, так что его нужно мерить на своей. И он ничего не говорит о том, что кому-либо делать со своими деньгами.
С проверкой, которую можете сделать вы сами и которая стоит одного вечера: повторите свой бэктест, изменив порядок ваших символов. Если результат сильно двигается, ваш лимит позиций решает больше, чем ваш критерий входа, и вы знаете, над чем работать.
И с другим способом читать любое число: прежде чем спрашивать, сколько оно дало, спросите, сколько раз его прогоняли. Если ответ — один, то вы смотрите на возможность, а не на результат.
Если хотите тянуть за ниточку дальше
Два других отчёта серии: сколько истории нужно, прежде чем доверять стратегии и почему высокий процент попаданий — не хорошая новость. Все они на sophronepsis.com/informes.html.
А если хотите научиться смотреть на это самостоятельно, шестидневный маршрут находится на app.sophronepsis.com/empieza.
Отчёт — это снимок одного дня. Внутри платформы измерения пересчитываются, когда приходят новые данные, каждая стратегия идёт со своей проверкой рядом, а наставник отвечает на то, что вы спросите, в любое время. sophronepsis.com/mentoria.html
Это исследование, а не проповедь. Если найдёте ошибку в методе или в расчётах, напишите нам на hola@sophronepsis.com, и мы исправим её публично. Sophronepsis · Ждать. Наблюдать. Исполнять.
Бэктест: 11.988 меток, сгенерированных на 148 акциях и 16,6 года дневных данных, 10 одновременных позиций, выход на 3 R. 25 прогонов, одинаковых во всём, кроме разрешения ничьей между метками одного дня. Измерено на 148 акциях и 16,6 года дневных данных, с издержками 0,05 % комиссии и 0,05 % проскальзывания и без брокерских издержек за перенос позиции через ночь. Каждая конфигурация прогоняется 25 раз с перемешиванием очерёдности между метками одного дня, и публикуется медиана. Образовательный контент, а не финансовая консультация. Мы не продаём сигналы и не управляем чужим капиталом. Familia FVR · Sophronepsis.