Synchronize Rate は「Dali が次の展開を正しく読めていたか」を多次元の partial-credit (連続スケール) で測る。 読みやすい 1 数字の裏側を openly に公開する。
v2.0 で自分の採点を厳しくした (旧 v1 スコアは凍結 archive で公開のまま、 遡及改変はしない):
3 component の加重合成。 較正は composite 外。
| component | 重み | 内容 |
|---|---|---|
| レジーム一致 (regime) | 0.35 | 予測レジームと horizon 後の観測レジームの隣接スコア |
| 全ペア bias 加重平均 (pair_avg) | 0.53 | 各ペアの方向 + シナリオ被覆を confidence で加重平均 |
| 推奨ランキング差 (ranking) | 0.12 | 推奨ペアの directional リターンを ATR 正規化平均 |
| 較正 (calibration) | 0 (別枠) | 信頼度帯別の実勝率テーブルとして生表示 (composite に加点しない) |
A / B の 2 成分。 Driver coherence (C) は Phase 2 で Haiku 評価を追加予定。
| component | 重み | 内容 |
|---|---|---|
| A: 方向 partial credit | 0.47 | ATR 正規化マグニチュード (順行で +、逆行で −) |
| B: シナリオ被覆 | 0.53 | 最も実動きに近いシナリオで部分点 (同方向 alt 0.7 倍、 逆方向 alt はヘッジ割引 0.35 倍) |
| C: Driver coherence | — | Phase 2 (Haiku post-hoc) |
| D: 較正 | 0 (別枠) | composite に加点しない (v2.0) |
n = (順方向リターン) ÷ (horizon×ATR%)。 0/1 でなく連続値で部分点。
| ATR 正規化 n | score | 解釈 |
|---|---|---|
| n ≥ +1.0 | 1.0 | 完全に方向的中 (ATR 1 本分以上) |
| n ≥ +0.5 | 0.7 | 方向合致 |
| n ≥ +0.2 | 0.6 | 弱く合致 |
| −0.2 ≤ n < +0.2 | 0.5 | ほぼ横ばい、外れてはいない |
| −0.5 ≤ n < −0.2 | 0.3 | 弱く逆行 |
| −1.0 ≤ n < −0.5 | 0.1 | 逆行 |
| n < −1.0 | 0.0 | 完全に逆 |
brief 側は触らず、 score logic 側で horizon 期間の市場観測値から固定ルールで判定:
方向当て (LONG/SHORT) の期待値は coin-flip で 50%。 partial-credit のため 50% 中心が「無情報」 の基準。 「76%」 単独は意味を持たず、 必ず baseline 50% との差で読む。
Brier = mean((confidence − outcome)²)。 0 = 完璧な較正、 1 = 最悪。 較正スコア = 1 − Brier。 「confidence 70% と言った予測が、 実際 70% 当たっているか」 を測る。 サンプル不足 (< 10) 時は 0.5 (中立) にフォールバック。