Files
jellybit/docs/tasks/items/recognition-accuracy.md
T
av d2d386945e tasks: выкинуты задачи про сбор базы человеком
- закрыты few-shot на правках человека и eval-харнес с размеченным корпусом:
  направление — тюнинг автоматического распознавания без участия человека
- цель распознавания переписана: точность видна по рабочему потоку, а не по
  фиксированному корпусу
- поправлены ссылки на удалённые задачи в CLAUDE.md, review.md,
  research/README.md и в задаче про confidence-гейт
2026-08-06 13:41:49 +03:00

1.6 KiB

🎯 Раздача узнаётся верно без подсказок человека

  • Тип: goal
  • Секция: Направления
  • Зачем: распознавание ошибается молча и правдоподобно, а смена модели или правка промпта идёт вслепую — сдвига точности не видно ни до, ни после
  • Теги: decomposed

Ради чего: распознавание — единственное место, где система может ошибиться молча и правдоподобно. Сегодня о его точности судят по впечатлению, и сдвиг от смены модели или правки промпта заметен только задним числом.

Размеченный корпус и обучение на правках человека из этой цели исключены сознательно (REJECTED.md, 2026-08-06): базу руками не собираем, точность поднимаем тюнингом автоматического распознавания.

Завершение

Достигнута, когда решение auto/review опирается на измеримую силу совпадения с записью метабазы, а не на самооценку модели, и доля раздач, ушедших в ревью или поправленных после авто-раскладки, видна по рабочему потоку и не растёт от версии к версии.