VALIDATE / OVERFIT RISK

Лучший внутри выборки может оказаться худшим после выбора.

PBO анализирует поведение набора кандидатов на разбиениях и показывает риск того, что процедура отбора вознаграждает случайный пик.

EVIDENCE / VERDICTRESILIENT
UNSEEN
HOLDOUTPASSDSR0.93PBO18%
ДОМЕН СИСТЕМЫ03 / VALIDATE

Испытать кандидата до риска

  1. DISCOVER
  2. OPTIMIZE
  3. VALIDATE
  4. RUN
  5. OBSERVE
01

Набор кандидатов

Метрика требует истории сравнимых вариантов, а не одного опубликованного победителя.

02

Разбиения

In-sample ранги сопоставляются с поведением тех же вариантов вне соответствующего участка.

03

Риск отбора

Высокий PBO — сигнал сузить пространство или пересмотреть механизм гипотезы.

04

Не вероятность убытка

PBO оценивает риск переобучения процедуры, а не будущую вероятность отрицательной сделки.

РАМКА РЕШЕНИЯ

Какая независимая проверка ещё может отвергнуть кандидата?

Читайте holdout, устойчивость во времени, поправку на перебор и stress-траектории как разные доказательства. Их согласие важнее одной зелёной метрики.

01

Защитить невидимые данные

02

Учесть каждую попытку

03

Принимать FAIL и недостаток данных

РЕЗУЛЬТАТ

Validation verdict

Важно

Исторические, статистические и модельные результаты не являются обещанием будущей доходности. kquant предоставляет вычислительные инструменты и техническое исполнение, но не оценивает пригодность конкретной сделки для пользователя.