Иван «Noob_X»
О специалисте
До прихода в Cobalt Noob_X несколько лет занимался прикладной статистикой вне трейдинга — проверкой гипотез в задачах, где цена ошибки первого рода была так же высока, как и цена бездействия. Оттуда пришла привычка, которая определяет всю его работу сейчас: гипотеза не становится фактом от того, что она понравилась на графике, а становится им только после проверки на данных, которые ещё не видел никто из команды.
В Cobalt Noob_X отвечает за исследовательский конвейер: от первой идеи о рыночной неэффективности до решения, попадёт ли она хотя бы в бумажную торговлю. Большая часть гипотез, которые проходят через его подразделение, отсеивается — и он считает это нормальным результатом работы, а не признаком того, что команда ищет плохие идеи. Его зона ответственности заканчивается там, где начинается распределение реального капитала между одобренными стратегиями — это уже решение портфельного управления, а не исследований.
Опыт
Результаты: что сработало и что нет
Как Noob_X работает
Для каждой гипотезы Noob_X требует не одну цифру доходности, а набор: результат на выборке, где идея была найдена, результат на отдельной выборке, которую никто из авторов гипотезы не видел на момент её формулировки, и результат в другом режиме волатильности, а не просто в другом временном отрезке. Отдельно оценивается deflated Sharpe ratio — поправка на то, сколько всего вариантов гипотезы было перебрано, прежде чем нашёлся работающий. Идея, показавшая хороший результат на одном из ста перебранных вариантов, статистически ближе к случайности, чем к закономерности, даже если цифра на экране выглядит убедительно.
Ответственность Noob_X заканчивается решением «эта гипотеза прошла проверку и достойна бумажной торговли или небольшого реального объёма». Он не решает, сколько капитала выделить одобренной стратегии в общем портфеле — это вопрос портфельного управления и зона Alex N. Такое разделение сделано намеренно: человек, заинтересованный в том, чтобы его же гипотеза получила больше капитала, плохо годится на роль того, кто определяет размер этой доли.
Главная ошибка, которую он видит у исследователей вне и внутри компании, — тестирование одной и той же идеи в десятках вариаций параметров с последующим предъявлением только лучшего результата как итога исследования. Формально это не подлог: каждый отдельный тест был честным. Но если перебрать 40 комбинаций периода скользящей средней, две-три из них покажут хороший результат просто по теории вероятностей, без всякой рыночной закономерности за этим. Поэтому у Noob_X принято фиксировать количество перебранных вариантов гипотезы до того, как известен результат, а не после.
Успех своего подразделения Noob_X не измеряет числом одобренных стратегий за год — наоборот, здоровым он считает год, где отклонено значительно больше идей, чем принято. Метрика, которая волнует его сильнее, — доля одобренных гипотез, которые продолжают работать спустя год после выхода в реальную торговлю. Если эта доля падает, проблема не в рынке, а в том, что фильтр на входе стал мягче, чем должен быть.