Сколько сделок нужно, чтобы послужной список что-то значил?

Эта статья — о том, как проделать эту арифметику самостоятельно. Она не сделает вас популярным среди тех, кто продаёт стратегию, потому что честный ответ таков: очень многие опубликованные записи, включая некоторые с подлинно реальными сделками, ничего не доказывают.

Сколько сделок нужно, чтобы оценить торговую стратегию?

Для приблизительного представления о винрейте — несколько сотен. Для уверенности, что преимущество реально, а не является удачей, — ближе к тысяче, и то лишь если эти сделки охватывают более одного рыночного режима. Всё, что меньше сотни сделок, следует считать анекдотом, а не результатом.

Причина — формула, которую можно рассчитать в таблице. Неопределённость вокруг наблюдаемого винрейта примерно равна квадратному корню из p, умноженному на (1 минус p), делённому на число сделок, где p — наблюдаемый винрейт. Умножьте это на 1,96, и вы получите 95%-й доверительный интервал: диапазон, в котором правдоподобно находится истинный винрейт.

Примените это к записи с винрейтом 55%, и результат отрезвляет.

Перечитайте первые две строки. Запись из 50 сделок с 55% выигрышных статистически неотличима от подбрасывания монеты. Это не критика трейдера. Это утверждение о том, что могут подтвердить пятьдесят наблюдений, и оно применимо в равной мере к вашим собственным результатам.

Что на самом деле говорит винрейт 55%?

Сам по себе — почти ничего, даже с тысячей сделок за спиной. Винрейт без среднего выигрыша и среднего убытка — это число без смысла, потому что стратегия, выигрывающая 80% времени, может стабильно терять деньги, а стратегия, выигрывающая 35% времени, может прекрасно приумножать капитал.

Рассмотрим две записи, обе с 500 сделками.

Стратегия А выигрывает 72% времени. Средний выигрыш — 40 евро, средний убыток — 130 евро. Математическое ожидание на сделку равно 0,72, умноженным на 40, минус 0,28, умноженные на 130, то есть 28,8 минус 36,4 — убыток 7,60 евро на каждой сделке. За 500 сделок это 3800 евро потерь при винрейте, который выглядит великолепно на рекламной странице.

Стратегия Б выигрывает 38% времени. Средний выигрыш — 210 евро, средний убыток — 90 евро. Математическое ожидание равно 0,38, умноженным на 210, минус 0,62, умноженные на 90, то есть 79,8 минус 55,8 — прибыль 24 евро на сделку. За 500 сделок это 12 000 евро от записи, которая выглядит посредственно в заголовке.

Стратегия А — это форма, которую порождает раннее срезание прибыльных сделок и позволение убыткам расти, и это самый распространённый убыточный паттерн в розничной торговле. Его же проще всего продвигать, потому что винрейт — это число, которое люди сохраняют в виде скриншота. Всегда просите средний выигрыш, средний убыток и число сделок вместе — или просите математическое ожидание в R, которое сворачивает все три показателя в одну цифру. Риск и прибыль подробно объясняет это соотношение.

Почему время важнее числа сделок?

Потому что рынки меняются, а преимущество стратегии — это утверждение об условиях, которые могут больше не действовать. Тысяча сделок, совершённых за восемнадцать месяцев одной трендовой среды с низкими ставками и низкой волатильностью, говорит о том, как стратегия ведёт себя в этой среде, и ничего — о любой другой.

Именно поэтому высокочастотная запись может набрать тысячу сделок за шесть месяцев и всё равно оставаться слабым доказательством, тогда как свинг-стратегия с 300 сделками за пять лет может быть более сильным доказательством, несмотря на меньшую выборку. Вам нужно, чтобы выборка охватывала смену режимов: цикл повышения ставок и цикл снижения, всплеск волатильности и вязкое лето, хотя бы один настоящий кризисный месяц.

Просите историю сделка за сделкой с датами и смотрите, через что прошла запись, а не только на её итог. Запись, начатая в 2023 году, не видела настоящего шока ликвидности. Запись, пропускающая месяцы вокруг кризиса, вероятно, была отфильтрована.

Разрыв между аккуратным бэктестом и тем, что реально исполнялось на рынке, — отдельная проблема, и бэктест против реальных результатов разбирает, где эти цифры обычно расходятся.

Может ли убыточная стратегия хорошо выглядеть год?

Да, легко, и это та часть математики, которую игнорируют, потому что она неудобна. Если тысяча человек каждый запускает стратегию вообще без преимущества, чистая случайность подарит примерно 25 из них год, который выглядит превосходно, а нескольким — год, который выглядит впечатляюще.

Именно эти записи и продвигаются, потому что остальные 975 тихо перестают публиковаться. Вы видите не выборку стратегий. Вы видите выживших после процесса отбора, и именно поэтому таблица лидеров лучших по доходности счетов — один из наименее информативных документов в финансах. Победители наверху таблицы лидеров копитрейдинга отобраны за то, что выиграли, и это верно независимо от того, существует ли где-либо в этой совокупности реальное преимущество.

Практическая защита — просить о вещах, которые выживаемость не может подделать. Сколько счетов или стратегий этот провайдер вёл за период, и где записи тех, что были прекращены? Какова полная история именно этого счёта, с его первой сделки, а не с даты начала, которую кто-то выбрал? Проверяется ли запись третьей стороной, которую провайдер не может редактировать?

Этот последний вопрос — почему верификация важнее самих цифр, и это стандарт, которого придерживается сама TIC: запись Myfxbook на /results публикуется полностью, включая плохие месяцы, потому что запись, которую издатель может тихо подчистить, — это не запись. О том, как на самом деле читать такую страницу, рассказывает статья «Как читать послужной список Myfxbook».

Меняет ли размер выборки то, как вы читаете просадку?

Да, причём в направлении, которого люди меньше всего ожидают. Максимальная просадка в послужном списке — не свойство стратегии. Это худшее, что случилось в окне наблюдения, и чем дольше вы наблюдаете, тем хуже становится эта цифра.

Стратегия, наблюдаемая шесть месяцев, может показать максимальную просадку 9%. Та же самая неизменная стратегия, наблюдаемая пять лет, очень вероятно покажет нечто значительно худшее, потому что было больше времени для плохой серии. Восприятие краткосрочной цифры как потолка — вот как инвесторы оказываются шокированы просадкой, которую стратегия всегда была способна произвести.

Полезная привычка: какую бы максимальную просадку ни показывала короткая запись, предполагайте, что реальная способность к просадке существенно больше, и спросите себя, смогли бы вы пережить её, не отказавшись от позиции в худший момент. Статьи «Что на самом деле означает просадка» и «Просадка, коэффициент Шарпа и чтение послужного списка» подробнее разбирают, как эти цифры рассчитываются и как их неверно трактуют.

Та же логика применима к коэффициентам Шарпа. Коэффициент Шарпа, рассчитанный по двенадцати месячным доходностям, имеет вокруг себя огромный доверительный интервал — настолько широкий, что коэффициент Шарпа 1,8 за один год и коэффициент Шарпа 0,6 за один год не являются надёжно различимыми стратегиями. Коэффициент Шарпа обретает смысл на горизонте лет, а не кварталов.

Что спрашивать, прежде чем доверять любой записи

Пять вопросов по порядку, и провайдер, который не может на них ответить, уже вам всё сказал.

Ничто из этого не говорит вам, что стратегия будет работать. Статистика может лишь сказать, достаточно ли доказательства сильны, чтобы их стоило рассматривать, а честный ответ для большинства продвигаемых записей — нет. Умение отбраковывать записи — это большая часть мастерства, и это то же суждение, что разобрано в статье «Комплексная проверка перед тем, как доверять торговому провайдеру».