test: add explicit regression and experiment suite runner - #212
Merged
Conversation
製品・共通契約・歴代実験を明示分類し、未知・欠落・重複を検証する。 凍結CIの全件実行は維持し、局所実行経路と再現条件を文書化する。
lipluscodex
commented
Sep 6, 2026
lipluscodex
left a comment
Member
Author
There was a problem hiding this comment.
Lin: Self-review PASS for #210.
PR上の差分は新規4ファイルのみで、凍結済みprotocol、manifest、既存テスト、fixtures、観測証拠、CI設定は変更していません。
product / shared / historicalの全81モジュールを明示分類し、normal / experiments / allを選択できます。未分類、古い登録、重複登録はfail closedで拒否され、新規検証自身も既存unittest discoverに含まれます。normalとexperimentsの積集合がshared、和集合がallであることもテストされています。
Python 3.11.15でnormal 371件が117.402秒、all 767件が304.200秒で、いずれもskip 0、failure 0です。CIとOptional MCP adapterも現在のhead aae65c302de9b542701199db4b0bcdc093b873deでSUCCESSです。
この変更はローカル選択経路の整理です。凍結manifestがCI設定をhash対象にしているため既存CIは全件実行を維持しており、CI高速化やテスト総数削減を達成したとは扱いません。normalは共有runtime変更時のallの代替ではないことも文書化されています。
This file contains hidden or bidirectional Unicode text that may be interpreted or compiled differently than what appears below. To review, open the file in an editor that reveals hidden Unicode characters.
Learn more about bidirectional Unicode characters
Sign up for free
to join this conversation on GitHub.
Already have an account?
Sign in to comment
Add this suggestion to a batch that can be applied as a single commit.This suggestion is invalid because no changes were made to the code.Suggestions cannot be applied while the pull request is closed.Suggestions cannot be applied while viewing a subset of changes.Only one suggestion per line can be applied in a batch.Add this suggestion to a batch that can be applied as a single commit.Applying suggestions on deleted lines is not supported.You must change the existing code in this line in order to create a valid suggestion.Outdated suggestions cannot be applied.This suggestion has been applied or marked resolved.Suggestions cannot be applied from pending reviews.Suggestions cannot be applied on multi-line comments.Suggestions cannot be applied while the pull request is queued to merge.Suggestion cannot be applied right now. Please check back later.
Closes #210
製品・共通契約・歴代実験を明示分類し、normal / experiments / all runner と分類漏れ検証を追加します。
凍結対象の CI は変更できないため全件実行を維持し、局所実行の整理として提供します。CI 高速化は未実施です。
検証結果と Python 3.14 の既知の再現制約は
docs/test-suites.mdに記録しています。既存 protocol、manifest、テスト、fixtures、証拠、CI の変更はありません。