Skip to content

eval: compare soft-start feedback on snapshot clones - #105

Merged
lipluscodex merged 2 commits into
mainfrom
issue-104-soft-start-snapshot-eval
Aug 21, 2026
Merged

eval: compare soft-start feedback on snapshot clones#105
lipluscodex merged 2 commits into
mainfrom
issue-104-soft-start-snapshot-eval

Conversation

@lipluscodex

@lipluscodex lipluscodex commented Aug 21, 2026

Copy link
Copy Markdown
Member

Closes #104

transaction-consistentなprivate snapshot clone上で、control、q3/s1、confirmed-only、soft-startの固定4 armをresult-free比較します。
privacy境界、exclusive writer、historical verifier、one-time developmentとconditional holdoutのhard gateを追加します。

Observed result

result-free commitとCI greenの後、developmentを一度だけ実行しました。結果はcompleted / 不支持、hard gateは6/7 passです。policy-boundariesだけが不合格で、snapshot開始時のcredited edgeに既存evidence count 1があったため、q3/s1はfresh used_3ではなくused_2でquorum 3へ到達しました。soft-start schedule、learning latency / final quality、negative provisional bound、control safety、mutation locality、source isolationはpassしています。

凍結stop ruleどおりholdoutは実行せず、protocol / gate / query / ratioを変更していません。source databaseとlive configも不変です。このv1結果はlocal cutoverを支持せず、soft-start mechanics自体の失敗とは分離して扱います。

Issue #104 のtransaction-consistent snapshot比較protocolをresult-freeで固定する。固定4 arm、privacy境界、exclusive writer、historical verifier、hard gate、tests、normative docsを追加し、登録development / holdout resultは生成しない。
@lipluscodex lipluscodex linked an issue Aug 21, 2026 that may be closed by this pull request
@lipluscodex lipluscodex self-assigned this Aug 21, 2026
Issue #104 のdevelopmentを凍結protocolから一度だけ実行し、不支持結果を保存する。7 hard gate中6件が通過したが、snapshot既存evidenceによりq3/s1がfresh used_2で発火し、固定policy-boundaries gateは不合格となった。停止規則に従いholdoutは開かない。

@lipluscodex lipluscodex left a comment

Copy link
Copy Markdown
Member Author

Choose a reason for hiding this comment

The reason will be displayed to describe this comment to others. Learn more.

親セルフレビュー: PASS

  • result-free commit d3fb823 が fixture / schedule / gate / schema / manifest / writer / verifier / docs を先に固定し、登録development / holdout result不在の状態でCI greenになったことを確認しました。
  • observed commit de41ab6 はdevelopment resultだけをexclusive追加し、protocol / gate / query / ratioを変更していません。holdout artifactは存在しません。
  • verifierを親側でも再実行し、development verification passed。結果はcompleted / 不支持、6/7 gate passとして再計算一致します。
  • 不合格はpolicy-boundariesのみです。snapshot初期evidence count 1によりq3/s1がfresh used_2でquorumへ到達し、凍結したused_3期待と不一致になりました。soft-start schedule、learning latency / final quality、negative bound、control safety、mutation locality / source isolationはpassです。
  • source container hashは取得前後一致、snapshot integrityとclone isolationを確認しました。public artifactにsnapshot本体、node本文、absolute private path、credential-shaped valueは検出されません。
  • source database、live config、既存frozen artifactは不変です。
  • このPRの正しい結論は「v1 gateのままlocal cutoverを支持しない」です。既存evidenceを持つsnapshot向けのbaseline-aware q3境界はsuccessor protocolで扱い、この失敗結果は変更しません。
  • git diff --check、focused 5 tests、eval smoke、full suite、GitHub CI、Optional MCP adapterはpass。残存blocking findingはありません。

次の処理: squash merge。merge後に失敗学習をDecision Structureへ反映し、fresh baseline-aware successorを別issueで固定します。

@lipluscodex
lipluscodex merged commit 63731ef into main Aug 21, 2026
2 checks passed
@lipluscodex
lipluscodex deleted the issue-104-soft-start-snapshot-eval branch August 21, 2026 01:11
Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment

Labels

None yet

Projects

None yet

Development

Successfully merging this pull request may close these issues.

eval: compare soft-start feedback on a fresh snapshot clone

1 participant