eval: compare soft-start feedback on snapshot clones - #105
Merged
Conversation
Issue #104 のtransaction-consistent snapshot比較protocolをresult-freeで固定する。固定4 arm、privacy境界、exclusive writer、historical verifier、hard gate、tests、normative docsを追加し、登録development / holdout resultは生成しない。
Issue #104 のdevelopmentを凍結protocolから一度だけ実行し、不支持結果を保存する。7 hard gate中6件が通過したが、snapshot既存evidenceによりq3/s1がfresh used_2で発火し、固定policy-boundaries gateは不合格となった。停止規則に従いholdoutは開かない。
lipluscodex
commented
Aug 21, 2026
lipluscodex
left a comment
Member
Author
There was a problem hiding this comment.
親セルフレビュー: PASS
- result-free commit
d3fb823が fixture / schedule / gate / schema / manifest / writer / verifier / docs を先に固定し、登録development / holdout result不在の状態でCI greenになったことを確認しました。 - observed commit
de41ab6はdevelopment resultだけをexclusive追加し、protocol / gate / query / ratioを変更していません。holdout artifactは存在しません。 - verifierを親側でも再実行し、
development verification passed。結果はcompleted / 不支持、6/7 gate passとして再計算一致します。 - 不合格は
policy-boundariesのみです。snapshot初期evidence count1によりq3/s1がfreshused_2でquorumへ到達し、凍結したused_3期待と不一致になりました。soft-start schedule、learning latency / final quality、negative bound、control safety、mutation locality / source isolationはpassです。 - source container hashは取得前後一致、snapshot integrityとclone isolationを確認しました。public artifactにsnapshot本体、node本文、absolute private path、credential-shaped valueは検出されません。
- source database、live config、既存frozen artifactは不変です。
- このPRの正しい結論は「v1 gateのままlocal cutoverを支持しない」です。既存evidenceを持つsnapshot向けのbaseline-aware q3境界はsuccessor protocolで扱い、この失敗結果は変更しません。
git diff --check、focused 5 tests、eval smoke、full suite、GitHub CI、Optional MCP adapterはpass。残存blocking findingはありません。
次の処理: squash merge。merge後に失敗学習をDecision Structureへ反映し、fresh baseline-aware successorを別issueで固定します。
This was referenced Aug 21, 2026
This file contains hidden or bidirectional Unicode text that may be interpreted or compiled differently than what appears below. To review, open the file in an editor that reveals hidden Unicode characters.
Learn more about bidirectional Unicode characters
Sign up for free
to join this conversation on GitHub.
Already have an account?
Sign in to comment
Add this suggestion to a batch that can be applied as a single commit.This suggestion is invalid because no changes were made to the code.Suggestions cannot be applied while the pull request is closed.Suggestions cannot be applied while viewing a subset of changes.Only one suggestion per line can be applied in a batch.Add this suggestion to a batch that can be applied as a single commit.Applying suggestions on deleted lines is not supported.You must change the existing code in this line in order to create a valid suggestion.Outdated suggestions cannot be applied.This suggestion has been applied or marked resolved.Suggestions cannot be applied from pending reviews.Suggestions cannot be applied on multi-line comments.Suggestions cannot be applied while the pull request is queued to merge.Suggestion cannot be applied right now. Please check back later.
Closes #104
transaction-consistentなprivate snapshot clone上で、control、q3/s1、confirmed-only、soft-startの固定4 armをresult-free比較します。
privacy境界、exclusive writer、historical verifier、one-time developmentとconditional holdoutのhard gateを追加します。
Observed result
result-free commitとCI greenの後、developmentを一度だけ実行しました。結果は
completed / 不支持、hard gateは6/7 passです。policy-boundariesだけが不合格で、snapshot開始時のcredited edgeに既存evidence count1があったため、q3/s1はfreshused_3ではなくused_2でquorum3へ到達しました。soft-start schedule、learning latency / final quality、negative provisional bound、control safety、mutation locality、source isolationはpassしています。凍結stop ruleどおりholdoutは実行せず、protocol / gate / query / ratioを変更していません。source databaseとlive configも不変です。このv1結果はlocal cutoverを支持せず、soft-start mechanics自体の失敗とは分離して扱います。