Точность и базлайны

Простыми словами

Агрегированная точность определения режима по методике v2.1. Каждая цифра — с выборкой, периодом, горизонтом и версией. Это не доходность вашей стратегии.

Версия = p{промпт}.s{скоринг}.f{fusion}. Shadow = p2.s2.f1 (не влияет на ботов).

Строки — модели + Итог; столбцы — версии промпта + Итого. Нажмите на ячейку — детализация.

Итог — решение для ботов (согласие моделей + порог evidence), а не среднее арифметическое их точности.

Поэтому % Итога часто выше, чем у Claude / Gemini / OpenAI по отдельности: слабые и спорные сигналы уходят в OFF.

N у Итога считается по прогонам (run), у моделей — по голосам; цифры n не обязаны совпадать.

Точность = (верно + 0.5×частично) ÷ оценено. N/A и «ждём» в знаменатель не входят.

Confusion matrix (all models)

Лог ротаций моделей

When Model Field Old New