Что такое OOS-проверка

Зачем вообще что-то проверять дважды

Любую торговую идею можно подогнать под прошлое. Если перебрать достаточно вариантов параметров — периодов индикатора, уровней стопа и тейка, набора тикеров — почти всегда найдётся комбинация, которая на исторических данных выглядит прибыльной. Проблема в том, что такая «прибыльность» часто объясняется не реальной закономерностью рынка, а банальной подгонкой под конкретный отрезок истории. На новых данных, которых не было во время подбора, эффект обычно исчезает.

Как устроена проверка out-of-sample (OOS)

Чтобы отличить настоящую закономерность от подгонки, весь период истории делится на две части по одной фиксированной дате:

  • In-sample (IS) — более ранняя часть истории.
  • Out-of-sample (OOS) — более поздняя часть, которая в проверке не используется вообще никак до самого конца.

Правило теста (параметры стратегии, пороги, список тикеров) формулируется один раз и применяется к обеим частям одинаково — без подстройки отдельно под каждую. Затем результаты IS и OOS сравниваются независимо.

Как читать результат

Стратегия считается прошедшей проверку, только если средний результат положительный в обеих частях — и в IS, и в OOS отдельно. Если результат хороший только в одной части (чаще всего — в старой, уже «знакомой» истории) и исчезает или меняет знак в новой — это явный признак подгонки, а не рабочей закономерности.

В отчётах на этом сайте в таблицах результатов есть колонка «OOS» или явная пометка «держится / не держится» (holds) — это и есть итог именно этой проверки, отдельно от общих агрегированных цифр по всему периоду.

Что это не исключает

Прохождение OOS-проверки не гарантирует прибыль в будущем — рынок меняется, и ни одна историческая проверка не защищает от этого полностью. Но стратегия, которая не проходит даже эту базовую проверку, тем более не заслуживает доверия — если эффект не воспроизводится даже на части той же самой исторической выборки, рассчитывать на него в реальной торговле нет оснований.

Читать ещё

MES Retest: серия тестов — от S&P 500 до акций и крипто, вопрос издержек

Тестируем стратегию «MES 30m EMA9/200 Retest (Dynamic Cap)» с TradingView — необычный случай в нашей серии: вместо одного теста на одном инструменте мы прошли целую цепочку проверок на четырёх разных рынках, чтобы разобраться в вопросе, который редко ставят явно — «при каких издержках эта стратегия вообще может работать?». Оригинал: MES 30m

Автор: Админ

VWAP Strategy: тест на NASDAQ — слишком строгие фильтры

Тестируем индикатор-стратегию «VWAP Strategy (Trend + Mean Reversion)» с TradingView — универсальный VWAP-инструмент с двумя независимыми режимами и пятью слоями фильтров, без привязки к конкретному активу или бирже. Протестировали на индексе NASDAQ Composite, ≈4-часовые бары. Оригинал: VWAP Suite на TradingView. 5 и 4 сделки за 2.9 года — на каждый из двух

Автор: Админ

BB-RSI Overbought DCA Short: тест шорт-стратегии на ATOM

Тестируем стратегию «BB-RSI Overbought DCA — Short Strategy» с TradingView — первая шорт-стратегия в нашей серии тестов DCA-ботов. Шорт на бессрочных фьючерсах ATOM (Cosmos) на Bybit, 30-минутный таймфрейм. Оригинал: BB-RSI Overbought DCA — Short Strategy на TradingView. +0.04% итог за 7 лет (при падении ATOM −13.7%) 63 закрытых сделки, win rate

Автор: Админ

Gold DCA Long: тест непрерывного DCA-бота на токенизированном золоте

Тестируем стратегию «[3Commas] Gold DCA Long» с TradingView — непрерывный DCA-бот без входного сигнала на токенизированном золоте XAUT (Tether Gold) на споте Bybit, 2-часовой таймфрейм. В отличие от всех ранее протестированных нами DCA-стратегий, здесь нет вообще никакого фильтра входа (не RSI, ничего) — бот торгует «nonstop reload»: как только сделка закрывается по

Автор: Админ