C3-DEMO-SPA-EXTERNAL-VALIDATION-P2
外部妥当性研究
SPA External Validation Phase 2
固定した表現と条件でシミュレータReplayを行い、再現性は確認できましたが、境界例不足と性能条件未達のためHOLDで閉じた研究です。
公開状態
研究記録
研究closeout / HOLD
現在の結果
SPA_UNRESOLVED / HOLD
対象: fixed-mechanism simulator Replay / H・R sets
観測したこと
- D 600 + H 300 + R 300 = 1200 Replay
- H: balanced accuracy 94.21% / FAIL recall 88.4%
- R: balanced accuracy 92.02% / FAIL recall 86.5%
- Boundary観測 H 2/200・R 3/200（各20件必要）
判断を進めるための次の根拠
観測結果の次に、何を決め・何を確かめるか
1200 Replayの再現性があってもHOLDのままなのは、次の判断に必要な条件が何か。
現在わかっていること
- D 600 + H 300 + R 300 = 1200 Replay
- H balanced accuracy 94.21% / FAIL recall 88.4%
- R balanced accuracy 92.02% / FAIL recall 86.5%
- Boundary観測はH 2/200・R 3/200で、各20件必要という事前条件に未達
まだ判断できないこと
- 固定した+0.05の追加価値基準は未達
- Boundary例が事前必要数へ達していない
- TRUE SPA、因果、実運用安全性、認証・適合性は評価していない
1
Boundary例を必要数まで観測
H・Rそれぞれで事前に必要とした20件のBoundary例を満たすまで、未観測領域を補完せず追加観測する。
2
+0.05基準を固定したまま再評価
追加価値の受入基準を変更せず、必要な観測が揃った時点で基準達否を再計算する。
3
実運用主張は別の実証へ分離
実制御の安全性や適合性を論じる場合は、シミュレータReplayとは別のruntime Evidenceを取得する。
再現性があることと、事前に定めた受入条件を満たすことは別です。HOLDをそのまま保持します。
主張上限（Claim Boundary）
ここから先は言わない
- 固定された+0.05の追加価値基準は未達
- TRUE SPA、因果、実運用安全性、認証・適合性は評価していない
証拠の扱い
このページは実証台帳から外部公開可能な要旨だけを表示しています。 非公開またはProtectedの証拠について、生ログ、ローカル環境情報、内部の実行手順は掲載していません。 研究結果は再現性が確認できても、事前の受入条件を満たしていなければPASSへ昇格しません。