Как понять, что советник на живом счёте всё ещё торгует как в бэктесте

Overton

Администратор
Сообщения
31 878
Реакции
7 840
Советник на живом счёте ушёл в просадку. Это обычная полоса или он уже работает не так, как на тесте? Худшая просадка в бэктесте показывает только один вариант развития событий, а не предел. Как с этим жить и где проводить границу, после которой советника выключают, разбирают участники ветки на форуме MQL5.

Сколько сделок нужно, чтобы сравнение что-то значило​

Один из участников обсуждения на MQL5 привязывает размер проверки к числу живых сделок:
Eduardo Cumplido написал(а):
Если я хочу оценить советника после 100 живых сделок, мне нужно минимум 20–30 отдельных окон по 100 сделок, то есть 2000–3000 сделок в бэктесте. И окна должны охватывать разные рыночные условия, а не много сделок из одного спокойного года.
Если истории меньше, окна перекрываются и сдвигаются на 10–20 сделок. Окон становится много, но они делят между собой большую часть сделок, поэтому худшие 5% выглядят стабильнее, чем есть на самом деле. Тот же участник предлагает в таком случае считать границу ориентиром и не выключать советника в ту же минуту, когда её коснулись.

Другой участник, у которого около двух сделок в неделю, подсчитал: это примерно 100 сделок в год, а 2000 сделок означают двадцать лет истории. Для таких систем перекрывающиеся окна могут оказаться единственным вариантом.

Ресэмплинг вместо окон​

César De Los Reyes Sanchez предлагает обойти перекрытие. Список сделок из бэктеста перетасовывается несколько тысяч раз, но блоками по несколько сделок, чтобы серии убытков оставались вместе. В каждом прогоне берётся столько сделок, сколько есть в живой выборке. При 100 живых сделках можно сразу читать 95-й и 99-й перцентили просадки. Один из участников ответил, что это хороший способ обойти проблему с окнами.

Идею двух линий предложил сам участник с двухнедельными сделками, а César связал с ней перцентили:
  • 95-й перцентиль - порог «присмотреться или уменьшить лот»
  • 99-й перцентиль или худшая просадка бэктеста плюс запас - порог «выключить»
Он советует записать оба числа до старта, чтобы не решать на эмоциях посреди просадки. При этом бутстрэп отвечает только на вопрос, похожа ли просадка на обычное невезение. Изменился ли рынок, он не покажет, поэтому списки сделок из живого счёта и теста всё равно стоит сравнивать.

Что важно в Monte Carlo​

В последнем ответе ветки, отвечая на вопрос о множителе 1.2–1.5x, сказали, что он начинался как правило из опыта, а потом его проверили Monte Carlo на сделках бэктеста. Вывод из этой проверки такой:
  • Тасовать блоками, а не отдельными сделками. При тасовке по одной серии убытков рвутся, и просадки получаются занижены. Золото ходит фазами, поэтому убытки приходят кластерами.
  • Смотреть на распределение, а не на среднее. Полезна высокая перцентиль симулированных максимальных просадок, сравнённая с максимумом бэктеста.
  • Так же моделировать самый длинный период без нового максимума эквити. Он разбрасывается ещё сильнее, чем просадка.
В том же ответе прямо сказано, что фиксированный множитель нельзя переносить с одного советника на другой: всё зависит от числа сделок и от того, насколько кластеризованы убытки.
⚠ Monte Carlo только перетасовывает то, что уже произошло. Если рынок изменится так, как его не было в истории, ни одна симуляция не предупредит об этом.

А вы где проводите свою линию: при какой просадке смотрите на советника внимательнее, а при какой выключаете? И записываете ли эти числа до старта?
 
По одной просадке я бы советника не выключал, особенно если живых сделок пока мало. Сначала стоит сравнить с тестом сами сделки: средний результат, длительность, частоту входов и серии убытков. Иначе обычную полосу неудач легко принять за поломку стратегии 9хотя длинная полоса неудач - это по факту тоже звоночек)

Порог лучше определить заранее: один для снижения лота, другой для остановки. Monte Carlo с перемешиванием блоков поможет понять обычный диапазон просадки, но смену рыночного режима не покажет. Поэтому смотреть нужно и на статистику, и на то, не начал ли советник вести себя иначе, чем в бэктесте.
 
Назад
Сверху