Здесь представлены некоторые основные направляющие, которые помогут вам выбрать цели тестирования.
Процент выигрышей (Percent Winners)
Наиболее успешные трейдеры, используя метод следования за трендом, получают от 35 до 45 процентов выигрышей. Сложно получить более 55 процентов, в чем вы сможете убедиться, когда мы будем проводить настоящее тестирование. Будьте особенно внимательны к воздействию, которое оказывают остановки на процент выигрышей.
Отношение среднего выигрыша к среднему проигрышу (Ratio of Average Win to Average Loss)
Эта величина должна превосходить 1:1 (безубыточность). Очевидно, значение 3; 1 или 4:1 выглядит хорошо, но, если вы получаете скромный процент выигрышей 2:1 или даже менее, это также принесет вам достаточный доход.
Обшая отдача и максимальный убыток (Total Return and Maximum Drawdown)
Эти величины, присущие контракту или портфелю, выражаются в долларах. Например, общая отдача по контрактам SP должна сравниваться только с максимальным убытком по контрактам SP. Общая отдача и максимальный убыток являются прекрасным выражением для отношения риск/вознаграждение. Из них обоих убыток более важен. Можно выражать обе величины в процентах от маржи, но маржа - это движущаяся мишень, которая связана с контрактными месяцами и может часто и внезапно меняться, таким образом, она не всегда может давать точную меру.
Волатильность и вероятность провала (Volatility and Probability of Ruin)
Вычисление этих двух ключевых величин даст вам представление о том, насколько надежной будет ваша торговая система в реальном времени. Первой величиной, которую надо вычислить, является стандартное отклонение ваших торговых результатов. Чем больше стандартное отклонение, тем более волатильными будут ваши торговые результаты. Чем меньше стандартное отклонение, тем менее волатильными будут результаты. При прочих равных выбирайте систему с меньшей волатильностью (минимальным стандартным отклонением) в терминах индивидуальных торговых результатов.
Вторая ключевая величина - это вероятность провала (POR - probability of ruin). POR дает трейдеру выраженную в процентах вероятность того, что баланс его счета будет опускаться до определенной точки прежде, чем подниматься до определенной более высокой точки. В вычисление включены шесть величин: процент выигрышей, средняя прибыльная торговля в долларах, средний проигрыш в долларах, начальный баланс счета, уровень, на котором можно сказать, что счет провалился, и уровень, на котором можно сказать, что состояние счета успешное.
POR базируется на той идее, что в любой торговой системе события возникают регулярно и могут возникать ненормальные события, но все они подчиняются теории вероятности. Например, монетка, подбрасываемая бесконечное количество раз, будет иметь отношение выпадений орел/решка 1:1, но примерно в одном из 1024 случаев орлел будет выпадать 10 раз подряд. Любая торговая система, таким образом, живет с вероятностью того, что независимо от изменения рыночных условий, она будет до некоторой степени саморазрушающейся. POR - это вероятность такого самоуничтожения. Уровень, до которого мы можем контролировать процент выигрышей и отношение выигрыша к проигрышу, диктует степень контроля, которым мы обладаем над нашей торговой системой. Мы не имеем возможности контролировать рыночные условия, но мы, по крайней мере, будем уверены, что наша торговая система не будет самоуничтожаться по собственному разумению. Существует несколько способов вычисления вероятности провала (или риска провала). Мы будем использовать простейшую формулу, которую можно найти в работе П. Гриффина "TheTheory of Blackjack". Следующая таблица показывает репрезентативное множество значений процентов выигрышей и отношений среднего дохода к среднему проигрышу. Для упрощения вычислений мы приняли начальный баланс счета равным $25000, цель дохода равной $50000 и уровень проигрыша (провала) равным $ 12000. (Смотрите рисунок 3-2.)

Как вы можете видеть из в таблицы, FOR резко меняется с изменением процента выигрышей и отношений выигрыш/проигрыш. Небольшая поправка в системе, которая дает в результате положительное изменение любого из отношений, может сделать громадный вклад в будущие возможности системы.
POR может оказаться очень показательным. Например, средний СТА, управляющий сегодня общественными паями, вероятно, имеет процент выигрышей от 35 до 40 процентов, причем большинство из них менее 40 процентов, 35-процентная доля выигрышей требует высокого отношения среднего выигрыша к среднему проигрышу для того, чтобы система была успешной. Это прекрасно и просто достижимо, когда рынки находятся в состоянии тренда, но, когда они становятся неспокойными, отношение дохода к потерям резко падает, и FOR поднимается до пугающих высот. Тщательное слежение за этими двумя статистическими величинами и возможное изменение вашей торговой системы для учета нетрендовых рынков может быть необходимым для обеспечения выживания.
Тестирование вхождений, выходов и остановок
После того, как вы подобрали элементы вашей торговой системы, возникает соблазн немедленно протестировать ее как единое целое. Кроме всего прочего, система по своему составу и определению есть совокупность взаимосвязанных частей, и кажется разумным, что она должна тестироваться в комплексе. Проблема такого подхода заключается в том, что один элемент системы может улучшать или ухудшать результаты относительно остальных. У вас может быть прекрасный метод вхождений, однако, если у вас слабые выходы, это забракует ваши вхождения вместе с оставшейся частью системы, если результаты совокупной производительности не удовлетворят вашим стандартам. Также хорошо бы знать, насколько часто используется один элемент по сравнению с остальными. Если ваш контроль рисков состоит из двух типов остановок, простой долларовой остановки и недавнего пика или впадины, то в процессе разработки и тестирования вам поможет знание того, как часто включается каждая из этих остановок.
По этим причинам мы разработали методы, которые разделяют части торговой системы и позволяют тестировать их независимо. Эти методы неидеальны, потому что части системы часто неразрывно связаны, но мы находим их весьма полезными. Заметьте, что любые демонстрируемые нами результаты тестирования не являются утверждениями о превосходстве одного метода над другим. Мы пытаемся показать процесс, а не быть арбитрами в дискуссии о том, какие технические исследования лучше. Мы настоятельно рекомендуем, чтобы вы провели эти процедуры самостоятельно в контексте собственных потребностей и пришли к своим собственным заключениям.
Тестирование вхождений
Тестирование ваших любимых методов вхождений может оказаться очень разоблачительным (и болезненным). Мы все слишком часто убеждались, что многие дорогие нашему сердцу предположения о правильности способа вхождения в рынок оказывались в лучшем случае посредственными. Когда вы станете экспертом в тести- . ровании систем, вы, вероятно, обнаружите, что важность вхождений уменьшается, и что способ, которым вы выходите с рынка, становится более важным фактором. Все, что вы можете требовать от вхождения, это чтобы оно вам дав ало более чем случайный потенциал дохода. После того, как вы это получили, только от вашей стратегии выхода зависит, сможете ли вы поймать столько дохода, сколько возможно, поддерживая при этом убытки на разумном уровне.
Одним из наиболее важных статистических параметров, получаемых при тестировании систем, является процент выигрышей по отношению к проигрышам (% выигрышей). При прочих равных высокий процент выигрышей, очевидно, предпочтительней низкого процента выигрышей. К счастью, если отношения среднего дохода к средним потерям установлены правильно, это может принести на продолжительном периоде прибыль, даже если процент выигрышей упал до очень малфй величины. Большинство долгосрочных трейдеров умудряются выживать, вылавливая то тут, то там очень большие доходы, и приходят к итогу всего в 35 - 45 процентов выигрышных торгов. Проблема в том, что, несмотря на малые потери и большие доходы, чем меньше процент выигрышей, тем более непостоянными будут торговые результаты. К некоторому моменту скачки баланса счета от вершины к впадине станут невыносимы для всех, кроме трейдеров с самыми крепкими нервами.