Как с вами связаться

Введите сообщение

Как с вами связаться

Введите сообщение

Аватар сообщества ГЕРМАН БАТЦ

ГЕРМАН БАТЦ

ГЕРМАН БАТЦ

Красивый график доходности на бирже — почему он обманывает создателя

24

    Идеальный бэктест — плохой знак: как торговая стратегия учится обманывать своего создателя Чем красивее история доходности, тем больше вопросов к торговой системе Лид. Большинство разработчиков радуется, когда стратегия показывает на истории плавную доходность, небольшую просадку и высокий процент прибыльных сделок. Я бы в этот момент перестал радоваться и начал допрос. Рынок редко выдаёт идеальные результаты. Зато их охотно выдаёт алгоритм, которому позволили выучить правильные ответы заранее. Все ищут лучшую стратегию. Компьютер находит лучшую иллюзию Представим, что мы проверили одну торговую гипотезу и получили сильный результат. Это повод изучать её дальше. Теперь представим, что мы перебрали тысячу вариантов: разные периоды индикаторов, фильтры волатильности, часы входа, стопы, цели и правила выхода. Один вариант почти неизбежно окажется красивее остальных. Проблема в том, что победитель мог найти не устойчивую закономерность, а случайный рисунок конкретного исторического отрезка. Чем больше вариантов мы перебираем, тем выше шанс обнаружить комбинацию, которая отлично описывает прошлое и ничего не знает о будущем. Это и есть переобучение: стратегия выглядит умной, потому что заранее увидела ответы. Исследователи Дэвид Бейли, Джонатан Борвейн, Маркос Лопес де Прадо и Цзи Цзинь Чжу посвятили отдельную работу оценке вероятности переобучения бэктеста. Авторы подчёркивают, что обычное разделение данных на обучающую и контрольную части в инвестиционных тестах может давать ненадёжную оценку, и предлагают специальную схему комбинаторной перекрёстной проверки. Исследование The Probability of Backtest Overfitting, версия от 27.02.2015. Цена скрытого кладбища экспериментов Допустим, исследователь показывает стратегию с коэффициентом Шарпа 2. На презентации это выглядит убедительно. Но важен вопрос: сколько моделей было проверено до неё? Если это единственная заранее сформулированная гипотеза — одна ситуация. Если победителя выбрали из 500 вариантов, а остальные 499 исчезли из отчёта, статистический смысл результата меняется. Зритель видит победителя. Исследователь должен учитывать весь перебор. Поэтому журнал экспериментов важнее красивого финального PDF. В нём должны оставаться: исходная гипотеза до запуска теста; все проверенные варианты, включая провальные; причина изменения параметров; набор данных и период; модель комиссий, спреда и проскальзывания; критерий, по которому стратегия признаётся пригодной или отклоняется. Если не фиксировать неудачные попытки, разработчик начинает считать каждую новую версию первой. Очень удобная бухгалтерия: расходы исчезают, остаётся только лучший результат. Реальная торговля не обязана повторять симуляцию Бэктест исполняет правила на исторических данных. Он не испытывает сомнений, не отменяет заявку в последний момент и не увеличивает позицию после серии убытков. Но даже технически честная симуляция зависит от допущений: какие цены были доступны, мог ли объём исполниться, учитывались ли задержка, спред, комиссии, финансирование и недостаток ликвидности. Американская National Futures Association в требованиях к гипотетическим результатам указывает, что симуляция не является реальной торговлей, использует преимущество ретроспективного взгляда и не способна полностью воспроизвести влияние финансового риска на поведение участника. NFA Compliance Rule 2-29. Это пример исследовательской осторожности, а не изложение требований к белорусской компании «ТехноИнвест». Бэктест полезен. Он нужен, чтобы отбрасывать слабые идеи, проверять механику и оценивать возможное поведение стратегии. Ошибка начинается там, где инструмент исследования превращают в сертификат будущей прибыли. Четыре проверки, которые портят красивую картинку Первая — отложенный период. Финальный участок данных нельзя постоянно открывать после каждого изменения, иначе он постепенно становится частью обучения. Проверили, поправили, снова посмотрели — и вот «независимый» тест уже прекрасно знаком разработчику. Вторая — проверка устойчивости параметров. Если стратегия работает только при периоде 19, но разваливается при 18 и 20, перед нами может быть случайная точка. Область приемлемых параметров убедительнее одиночного пика, хотя сама по себе ничего не доказывает. Третья — разные рыночные режимы и инструменты. Тренд, боковик, высокая и низкая волатильность, спокойные и кризисные участки должны анализироваться отдельно. Стратегия не обязана быть прибыльной везде. Она обязана честно показывать, где перестаёт работать. Четвёртая — стресс допущений. Увеличиваем расходы, ухудшаем цену исполнения, добавляем задержку, убираем несколько лучших сделок. Если небольшое ухудшение уничтожает доходность, оценённого преимущества может не хватить для реальной торговли. Простота тоже не гарантирует качества Простая стратегия тоже может быть выбрана после огромного числа проб и оказаться случайной. Риск определяется не количеством строк кода, а процессом поиска и проверки. Как я бы строил исследовательский процесс Сначала формулируется причина, почему эффект может существовать. Затем фиксируются правила и критерии провала. После этого проводится первичный тест, проверка чувствительности и оценка на данных, которых стратегия не видела. Финальный этап — наблюдение без капитала или с заранее ограниченным риском, если такая проверка допустима для конкретной системы. На каждом шаге идея может быть закрыта. Это нормально. Задача исследовательского процесса — не доказать, что автор был прав. Его задача — как можно дешевле обнаружить, где он ошибся. В THE ULTIMA бэктест должен быть не рекламным плакатом, а частью системы контроля. Сценарии, данные, исполнение и риск существуют вместе. Если стратегия выигрывает только в идеально подобранном прошлом, она не прошла испытание — она выучила декорации. Рынок не платит за самый красивый график из тысячи. Он выставляет счёт за тот единственный вариант, который мы решили запустить. Следующий шаг: откройте последний бэктест и добавьте к нему три числа: сколько вариантов проверялось до победителя, как результат изменяется у соседних параметров и что происходит при удвоенных торговых расходах. Если этих данных нет, исследование ещё не закончено. Начальник отдела продаж ООО «ТехноИнвест Групп» | Банковский холдинг ОАО «Технобанк» https://investtb.by +375 29 757 40 85 +375 25 776 02 59 ▫️ [Мой телеграм](https://t.me/the_ultima_trading) e-mail: herman.v@investtb.by Данный материал носит информационный характер и не является индивидуальной инвестиционной рекомендацией или предложением о покупке или продаже указанной ценной бумаги.

    Пост взят с международного финтех-медиа ресурса

    Другие новости сообщества / ГЕРМАН БАТЦ

    EXPRESS NEWS

    • ЦБ РФ оставил ключевую ставку на уровне 14%
      ЦБ РФ оставил ключевую ставку на уровне 14%
    • Похороны короля Норвегии Харальда V состоялись в среду в Осло. Харальд V родился 21 февраля 1937 года, он занимал престол с 1991 года
      Похороны короля Норвегии Харальда V состоялись в среду в Осло. Харальд V родился 21 февраля 1937 года, он занимал престол с 1991 года

    • США нанесли ракетный удар по иранскому танкеру вблизи порта Джаск, сообщил IRIB. По данным телеканала, команда судна была успешно эвакуирована сразу после атаки

    • Бернэм отказался сокращать соцрасходы ради увеличения расходов на оборону. При этом он подчеркнул, что его правительство подтверждает данное ранее обещание довести расходы на оборону до 3,5% от ВВП к 2035 году

    • Возможность проведения трехстороннего саммита с участием Путина, Трампа и Си Цзиньпина на АТЭС будет, сообщил Песков

    • Вучич утвердил решения о роспуске парламента Сербии и проведении внеочередных выборов 25 октября
      Вучич утвердил решения о роспуске парламента Сербии и проведении внеочередных выборов 25 октября

    • Россия предложит провести российско-германо-американский бизнес-форум в 2027 году для возобновления делового диалога. Об этом заявил глава РФПИ Кирилл Дмитриев

    • Рубио назвал состоявшиеся переговоры по Украине в Москве и Киеве содержательными. Госсекретарь США также отметил, что считает возможным в ближайшие недели разработать план шагов по урегулированию на Украине
      Рубио назвал состоявшиеся переговоры по Украине в Москве и Киеве содержательными. Госсекретарь США также отметил, что считает возможным в ближайшие недели разработать план шагов по урегулированию на Украине

    • Ситуацию в регионе необходимо учитывать при проведении «Интервидения» в Саудовской Аравии, сроки будут обозначены позднее, заявил Лавров

    • Кремль не исключает разговора Путина и Трампа по итогам поездки переговорщиков США в Москву и в Киев, сообщил Песков
      Кремль не исключает разговора Путина и Трампа по итогам поездки переговорщиков США в Москву и в Киев, сообщил Песков

    • Трамп в Truth Social назвал Луну собственностью США

    • Старший сын Трампа прибыл в Таллин, пишет газета Postimees. Цель его визита неизвестна. Посольство США в Эстонии в ответ на запросы со стороны Postimees и портала Delfi отказалось комментировать поездку Дональда Трампа-младшего
      Старший сын Трампа прибыл в Таллин, пишет газета Postimees. Цель его визита неизвестна. Посольство США в Эстонии в ответ на запросы со стороны Postimees и портала Delfi отказалось комментировать поездку Дональда Трампа-младшего

    • Факт встречи Путина с Уиткоффом и Кушнером означает атмосферу доверия, по крайней мере, на этом канале общения, отметил Песков в разговоре с журналистом «Вестей» Зарубиным

    • Трехсторонняя встреча лидеров РФ, США и Китая не исключается, заявил ТАСС Рябков
      Трехсторонняя встреча лидеров РФ, США и Китая не исключается, заявил ТАСС Рябков

    • РФ и США надо развивать взаимодействие в тех сферах экономики и бизнеса, где это отвечает взаимным интересам, заявил ТАСС Силуанов

    • Трамп заявил, что США могут «очень скоро» нанести удар по предполагаемому иранскому ядерному объекту близ Натанза под горой Коланг Газ-Ла
      Трамп заявил, что США могут «очень скоро» нанести удар по предполагаемому иранскому ядерному объекту близ Натанза под горой Коланг Газ-Ла

    • Москва в ближайшее время примет ответные меры на закрытие генконсульства РФ в Бонне, заявил посол в Германии Нечаев

    • Председатель Верховного суда России Игорь Краснов прибыл с официальным визитом в Нью-Дели, передает корреспондент ТАСС
      Председатель Верховного суда России Игорь Краснов прибыл с официальным визитом в Нью-Дели, передает корреспондент ТАСС

    • Трамп заявил, что США в ближайшее время возобновят продажи боеприпасов союзникам

    • Пашинян заявил, что Армения не собирается вводить визы для граждан России
      Пашинян заявил, что Армения не собирается вводить визы для граждан России

    • Китай готов развивать обмены с РФ в сферах культуры, туризма и образования, сообщил вице-премьер Госсовета КНР

    • РФ за полноформатное восстановление отношений с США, сообщил Путин. Контакты РФ с администрацией США продолжаются, президент видит позитивный настрой Трампа на конструктивную работу
      РФ за полноформатное восстановление отношений с США, сообщил Путин. Контакты РФ с администрацией США продолжаются, президент видит позитивный настрой Трампа на конструктивную работу

    • Трамп заявил, что для бизнеса было бы отлично поддерживать хорошие отношения с Россией

    • Трамп заявил, что готов провести встречу с Путиным, когда стороны будут готовы заключить мирное соглашение по Украине
      Трамп заявил, что готов провести встречу с Путиным, когда стороны будут готовы заключить мирное соглашение по Украине

    • ВС США уничтожили 28 кораблей в Ормузском проливе в ночь на 1 сентября, заявил Трамп в интервью автору подкаста Lt. Dan Дэну Патрику

    • ЕК предложила включить в 22-й пакет санкций 1600 российских физлиц и компаний, заявила Каллас
      ЕК предложила включить в 22-й пакет санкций 1600 российских физлиц и компаний, заявила Каллас

    • Трамп думает над тем, чтобы назвать Ормузский пролив в свою честь. «Как и сама Америка, Ормузский пролив станет "горячее", чем когда-либо!» — отметил американский президент

    • «Большое число» россиян могут внести в новые санкционные списки ЕС, которые предложила ФРГ. Об этом заявил глава МИД страны Йоханн Вадефуль

    • Добыча нефти в Венесуэле может превысить 1,5 млн баррелей в сутки в первой половине следующего года. Об этом заявил Крис Райт в интервью телеканалу CNBC
      Добыча нефти в Венесуэле может превысить 1,5 млн баррелей в сутки в первой половине следующего года. Об этом заявил Крис Райт в интервью телеканалу CNBC

    • Каллас заявила, что вызвала исполняющего обязанности постпреда России при ЕС в связи с инцидентом в Лейпциге

    • Ушаков опроверг, что Путин не захотел встречаться с главой ЦРУ, и подчеркнул в разговоре с журналистом Life Юнашевым, что таких планов и не было

    • В ФРГ делают всё, чтобы изничтожить всё позитивное, что было накоплено в отношениях с РФ десятилетиями. Об этом заявила Мария Захарова на полях ВЭФ

    • Бессент отметил важность контактов с РФ для урегулирования на Украине
      Бессент отметил важность контактов с РФ для урегулирования на Украине
    • Контакты между спецслужбами осуществляются всегда, заявил Путин, говоря о визите главы ЦРУ
      Контакты между спецслужбами осуществляются всегда, заявил Путин, говоря о визите главы ЦРУ

    • США уничтожат Иран в случае новых ответных атак, утверждает Трамп в интервью Fox News. Он считает, что иранские власти «не останавливаются», и назвал их действия «безумными» и «глупыми»

    • Германия идет по дальнейшему пути эскалации, обвинения в отношении России после инцидента в Лейпциге не подкреплены никакой аргументацией со стороны Берлина, заявил Дмитрий Песков
      Германия идет по дальнейшему пути эскалации, обвинения в отношении России после инцидента в Лейпциге не подкреплены никакой аргументацией со стороны Берлина, заявил Дмитрий Песков

    • США нанесли удар по аэропорту в Джирофте на юге Ирана, сообщила иранская гостелерадиокомпания

    • Пашинян назвал очень хорошей встречу с Путиным в Бишкеке и заявил о намерении в ближайшее время совершить визит в Москву
      Пашинян назвал очень хорошей встречу с Путиным в Бишкеке и заявил о намерении в ближайшее время совершить визит в Москву
    • Трамп заявил, что не за горами проведение крупнейшей атаки на Иран, после которой почти ничего не останется
      Трамп заявил, что не за горами проведение крупнейшей атаки на Иран, после которой почти ничего не останется
    • Встреча Путина и Эрдогана завершилась, продлившись около полутора часов, передает корреспондент ТАСС
      Встреча Путина и Эрдогана завершилась, продлившись около полутора часов, передает корреспондент ТАСС

    Вы уверены, что хотите выйти из аккаунта?