VibeusPairBench — парное A/B-сравнение промптов
XLSX-комплект для ручного AI-эксперимента: один вход, два ответа и общий критерий. 100 пар, доли успеха, разница времени и отдельный учёт неполных данных. С планом и открытыми формулами.
PairBench — оригинальный редактируемый XLSX-комплект для ручного сравнения двух AI-промптов, созданный для Vibeus с AI-помощью. Лист «Условия» фиксирует версии, полные промпты, модели и настройки, рубрику, порядок, повторы и среду. На листе «Пары» каждая строка содержит одинаковый вход, один критерий, две ручные оценки, два времени и два ответа или указателя на протоколы. Вместимость строго 100 пар.
Только полные пары входят в общий знаменатель: доли успеха A/B, разницу долей B−A, число случаев «только A», «только B» и среднюю разницу времени. Отрицательная разница времени означает, что B быстрее. При отсутствии готовых пар доли и средняя разница пусты. Пустое время отличается от нуля. Дубли ID, неполные условия, недопустимые оценки, отрицательное или нечисловое время и отсутствующие ответы исключают пару и дают предупреждение.
В ZIP — редактируемый XLSX, открытые формулы отдельным JSON, исходный генератор, русская инструкция и копируемый план эксперимента, полный MIT, SHA-256 и два настоящих изображения книги. 42 проверки расчётным движком @oai/artifact-tool и повторный импорт экспортированного XLSX. Все 6 пар примера, ответы, оценки и времена вымышленные. Реальных запусков моделей не было. Microsoft Excel, LibreOffice и Google Sheets не запускались; сначала проверьте свой редактор на копии по контрольным значениям.
Книга не вызывает модели, не оценивает ответы автоматически, не проверяет содержание протоколов и не делает выводов о статистической значимости или победителе. Это описательная сводка вашего набора; два провала тоже означают одинаковую бинарную оценку, но не равенство качества. Повторы могут быть зависимыми, а время зависит от среды. Для сравнения именно промптов держите модель и настройки одинаковыми; иначе сравниваются варианты целиком. Фильтрация не меняет итоговые счётчики. Пробел может пройти проверку непустоты — содержимое проверяйте вручную.
Нужно приложение с поддержкой XLSX, формул, таблиц и списков выбора. Макросов, внешних подключений и подписки у книги нет. Оплата внешних моделей и офисного приложения в покупку не входит. Для редактирования XLSX не нужны Node.js и генератор. Исходный генератор использует библиотеку @oai/artifact-tool среды Codex: она не включена, пересборка вне такой среды не предоставляется. Расширение за 100 строк требует изменения диапазонов формул и проверок. Нет интеграций, синхронизации, облачного хранения от автора и поддержки. MIT, неэксклюзивно, AS IS, без гарантий и обещаний обновления.
PairBench.xlsx: два рабочих листа, 100 пар, 6 вымышленных примеров
README-RU.md и EXPERIMENT-BRIEF.md: инструкция и план ручного эксперимента
formula-inventory.json и build.mjs: открытые формулы и исходный генератор
validation.json и readback.json: 42 проверки и повторный импорт XLSX
comparison.png и conditions.png: реальные изображения книги; оригинальный logo.png
Полный MIT LICENSE и SOURCE.json с SHA-256; без node_modules
1. Распакуйте ZIP, сделайте копию PairBench.xlsx.
2. Заполните жёлтые поля листа «Условия»: цель, разные версии A/B, модели/настройки, рубрику, порядок/повторы, среду и полные промпты.
3. На листе «Пары» очистите только A14:I19 с вымышленными примерами. Не удаляйте строки и формулы J:L.
4. На один и тот же вход получите два реальных ответа самостоятельно; запишите ответы/протоколы, времена >=0 и оценки по одному заранее заданному критерию.
5. Разберите предупреждения, проверьте контрольные значения в своём редакторе, сохраните книгу. Макросы не нужны.
Полная инструкция и границы в README-RU.md; копируемый план в EXPERIMENT-BRIEF.md.
XLSX-редактор с обычными формулами Excel, таблицами и списками выбора. Проверено @oai/artifact-tool; Excel/LibreOffice/Sheets не запускались. Модели вызываются и оплачиваются вами отдельно; книга не имеет API-подключений. Генератор и Node.js для использования XLSX не нужны; @oai/artifact-tool не включён.
MIT License, Copyright (c) 2026 Vibeus. Оригинальная книга, формулы, генератор, логотип, план эксперимента и инструкция созданы с AI-помощью. Все демонстрационные результаты вымышленные; реальные модели не запускались. Личное и коммерческое использование, изменение и распространение разрешены с сохранением copyright и полного MIT из ZIP. Разовый доступ к готовому комплекту, неэксклюзивно, AS IS, без поддержки и гарантий. Лицензии офисных приложений, моделей и библиотеки генератора не передаются; их оплата не входит.
