0xExqui.OS
Тёмная Светлая

ПРОЦЕСС / ЭКСПЕРИМЕНТ

A/B Pilot

ПрП 2.2 и кандидат 2.3 на одной продуктовой задаче.

05 / A/B PILOT

Процесс проверяется
реальной задачей.

Кандидат 2.3 победил как направление развития, но не получил чистой процессной победы.

Оба прогона получили отрицательный итог.

Сравнение диагностическое, а не контролируемое: одна задача, общий контекст и неполный учёт. Сопоставимые ролевые агенты — только часть всей работы. Processed tokens не являются стоимостью.

Задачей было создание ранней версии этой страницы. Обе первые страницы оказались недостаточными. Я считаю сам способ проверки нового процесса на реальной задаче важным ноу-хау.

−8,8%новых токенов у сопоставимых ролей
−1,8%обработанных токенов у тех же ролей

v0.2 продолжает эксперимент: v0.1.1 опубликована, но её структура и пользовательский опыт не решили мою задачу.

Полный разбор и два результата →

Эффективность
с оговорками.

Метрики ниже относятся к сопоставимым ролевым агентам. Контекст у прогонов общий; часть инженерной работы и взаимодействий не учтена одинаково. Это наблюдение, не доказательство причинного эффекта.

+94,7%тяжелее Pre-Challenge
−10,2%легче Challenge
3/2 → 2/1code review: обращения / возвраты

2.2

Processed tokens
17 048 338
Новые токены
1 017 106
Агенты
10
Pre-Challenge
4 цикла · 3 возврата · 2 роли
Code review
3 обращения · 2 возврата

Отрицательный итог: Работающий пакет, но программа начата без EPIC-000

кандидат 2.3

Processed tokens
16 748 544
Новые токены
928 128
Агенты
8
Pre-Challenge
3 цикла · 2 возврата · 6 ролей
Code review
2 обращения · 1 возврат

Отрицательный итог: Работающий пакет, но Challenge не замкнулся на exact candidate

Весь пилот, включая общий контекст

Challenge занял 49,2% processed tokens и был в 2,28× больше Delivery. Это другая граница учёта, чем сравнение ролей выше; processed tokens не стоимость.

Discovery

Доля processed
8,7%
Processed tokens
7 903 790
Новые токены
560 302

Pre-Challenge + DoR

Доля processed
16,4%
Processed tokens
14 891 334
Новые токены
831 302

Delivery

Доля processed
21,6%
Processed tokens
19 601 083
Новые токены
620 347

Challenge

Доля processed
49,2%
Processed tokens
44 673 179
Новые токены
1 205 403

DoD + Closure

Доля processed
4,1%
Processed tokens
3 692 237
Новые токены
94 669

Два фактических
результата.

Оригинальные PNG — неизменное визуальное доказательство. HTML-копии восстановленные: точные исходники 2.3 не были полностью заморожены до поздних правок. Соседние сырые проектные документы не публикуются.

2.2 → КАНДИДАТ 2.3 → A/B PILOT → 2.3.1

Семь принятых
исправлений.

В раннем REPORT было восемь рекомендаций. Действующий 2.3.1 закрепил семь постпилотных исправлений ниже. Дополнительный обязательный учёт токенов в процесс не введён.

  1. Тип работы и роль EPIC-000 фиксируются до создания продуктовых документов.
  2. Режим работы наследуется всеми агентами задачи без повторного вопроса.
  3. Исходная постановка, полный список историй и критерии сохраняются без потерь и сужения.
  4. Внутренние тесты не заменяют наблюдение владельца по конечному пути.
  5. Exact candidate замораживается до Challenge и не меняется собственным отчётом.
  6. Передача работы ограничена конкретной задачей и необходимым контекстом.
  7. Подлинные доклады независимых ролей сохраняются с версией и временем проверки.