feat(tests): preflight трьох build-артефактів перед прогоном - #507
Merged
Conversation
Щоб JS-суїт давав достовірний результат, потрібні три артефакти локальної
збірки, і про це ніде не було сказано: rules-napi (release), rules-cli
(release) і wasm-плагіни разом із gitignored builtin-pins.json. Свіжий
checkout не має жодного.
Ціна вже виміряна: відсутність wasm-плагінів давала оманливе
DetectorError('немає main.mjs') — #502 переніс підказку в саме повідомлення,
але це лікування симптому. Через це я двічі помилково оголосив реальні фейли
преекзистуючими, а агент згаяв близько півтори години на пошук неіснуючого
дефекту. Відсутність rules-cli дає порожній STACK_TRACE_ERROR, що не каже
нічого взагалі.
- `globalSetup` у обох vitest-конфігах: спрацьовує один раз до старту тестів,
у тому самому процесі, що виконує `bun run test` і CI.
- Повідомляє про ВСІ відсутні одразу («відсутні N/3») з наслідком по кожному —
інакше людина проходить три ітерації по десять хвилин, що сьогодні й сталося
з агентом.
- `N_RULES_TEST_PREFLIGHT_SKIP=1` — escape-hatch для свідомо суто-JS прогону,
щоб перевірка не стала перепоною там, де вона зайва.
- Наявні per-test гейти лишаються: вони спрацьовують глибоко в суїті й по
одному, preflight — раніше й повним списком.
Перевірено дією: з прибраним builtin-pins.json прогін падає з точним
повідомленням про саме цей артефакт. Юніт-тести модуля — 10/10.
Гілка стоїть на #506 (ліміт форків) — обидві зміни правлять ті самі рядки
конфігів, тож розведення в незалежні гілки дало б конфлікт на рівному місці.
Co-Authored-By: Claude Opus 5 <noreply@anthropic.com>
This file contains hidden or bidirectional Unicode text that may be interpreted or compiled differently than what appears below. To review, open the file in an editor that reveals hidden Unicode characters.
Learn more about bidirectional Unicode characters
Sign up for free
to join this conversation on GitHub.
Already have an account?
Sign in to comment
Add this suggestion to a batch that can be applied as a single commit.This suggestion is invalid because no changes were made to the code.Suggestions cannot be applied while the pull request is closed.Suggestions cannot be applied while viewing a subset of changes.Only one suggestion per line can be applied in a batch.Add this suggestion to a batch that can be applied as a single commit.Applying suggestions on deleted lines is not supported.You must change the existing code in this line in order to create a valid suggestion.Outdated suggestions cannot be applied.This suggestion has been applied or marked resolved.Suggestions cannot be applied from pending reviews.Suggestions cannot be applied on multi-line comments.Suggestions cannot be applied while the pull request is queued to merge.Suggestion cannot be applied right now. Please check back later.
Щоб JS-суїт давав достовірний результат, потрібні три артефакти локальної збірки, і про це ніде не було сказано. Свіжий checkout не має жодного.
rules-napi(release)rules-cli(release)STACK_TRACE_ERRORbuiltin-pins.jsonDetectorError('немає main.mjs')Ціна вже виміряна на цій сесії
#502 переніс підказку про
builtin-pins.jsonу саме повідомлення помилки — але це лікування симптому. Через цю прогалину я двічі помилково оголосив реальні фейли «преекзистуючими», а агент згаяв ~1.5 години на пошук неіснуючого дефекту.Рішення
globalSetupу обох конфігах: один раз до старту тестів, у тому самому процесі, що виконуєbun run testі CI.rules-cliлише після того, як полагодив попереднє.N_RULES_TEST_PREFLIGHT_SKIP=1— escape-hatch для свідомо суто-JS прогону, щоб перевірка не стала перепоною там, де зайва.Перевірка
Зроблено особисто: з прибраним
builtin-pins.jsonпрогін падає з точним повідомленням саме про цей артефакт, а не про наслідок. Юніт-тести модуля — 10/10.🤖 Generated with Claude Code