Abstract
摘要
Zusammenfassung
This revision retains the mathematical framework of the August working paper and adds completed paired comparisons from 15 October 2026. Counterfactual regret, represented information sets, action agreement and paired utility estimates are treated as distinct quantities. Their interpretation does not rely on infrastructure scale or publication status.
本修订保留 8 月工作论文的数学框架,加入 2026 年 10 月 15 日完成的成对比较。反事实遗憾、已表示信息集、动作一致率和配对效用估计分别定义与解释,不以基础设施规模或发布状态代替实验结果。
Diese Revision bewahrt den mathematischen Rahmen des August-Arbeitspapiers und ergänzt abgeschlossene Vergleiche vom 15. Oktober 2026. Kontrafaktisches Regret, repräsentierte Informationssets, Aktionsübereinstimmung und gepaarter Nutzen sind unterschiedliche Größen. Infrastrukturumfang oder Veröffentlichungsstatus ersetzen keine Resultate.
Mathematical definitions
数学定义
Mathematische Definitionen
Notation and scope
记号与范围
Notation und Geltungsbereich
Let H be terminal histories, I an information set, a a legal action, σ a strategy profile and uᵢ(h) the terminal utility of agent i. Reach probability π^σ(h) gives the expected utility vᵢ(σ). Counterfactual action values at I weight histories by the reach of other agents and chance. The notation follows the established extensive-form literature [1]; it does not specify a private implementation.
令 H 为终止历史集合,I 为信息集,a 为合法动作,σ 为策略组合,uᵢ(h) 为智能体 i 在终止历史的效用。以到达概率 π^σ(h) 加权得到期望效用 vᵢ(σ)。I 上的反事实动作价值按其他智能体与机会事件的到达概率加权。记号沿用扩展式博弈文献 [1],不定义具体私有实现。
H bezeichnet terminale Verläufe, I ein Informationsset, a eine legale Aktion, σ ein Strategieprofil und uᵢ(h) den terminalen Nutzen von Akteur i. Die Erreichenswahrscheinlichkeit π^σ(h) bestimmt den erwarteten Nutzen vᵢ(σ). Kontrafaktische Aktionswerte gewichten mit der Erreichenswahrscheinlichkeit anderer Akteure und des Zufalls. Die Notation folgt [1], ohne eine private Implementierung festzulegen.
Cumulative counterfactual regret
累计反事实遗憾
Kumulatives kontrafaktisches Regret
Cumulative regret compares the counterfactual value of action a with the value of the strategy actually used at I over T updates. It is a learning quantity, not an observed evaluation return. Results established for two-player zero-sum games under their assumptions cannot be asserted for the six-agent experiment merely because regret notation is used.
累计遗憾比较 T 次更新中动作 a 的反事实价值与 I 上实际采用策略的价值。它是学习量,不是观测到的评估收益。两人零和条件下、依赖特定假设的理论结果,不能因为使用了遗憾记号就直接套用于本六智能体实验。
Kumulatives Regret vergleicht über T Aktualisierungen den kontrafaktischen Wert von Aktion a mit dem Wert der tatsächlich verwendeten Strategie in I. Es ist eine Lerngröße, kein beobachteter Evaluationsnutzen. Garantien für Zwei-Personen-Nullsummenspiele gelten nicht allein wegen dieser Notation für das Sechs-Akteure-Experiment.
Indexed coverage and strategic quality
索引覆盖与策略质量
Indexierte Abdeckung und strategische Qualität
A count of represented information sets measures stored coverage. It does not weight states by visitation probability and does not estimate best-response exploitability. An increase in this count therefore does not imply a decrease in exploitability. Likewise, agreement with a recorded reference is descriptive and cannot substitute for a utility comparison.
已表示信息集数量衡量存储覆盖,不按访问概率加权,也不估计最优响应意义下的可剥削度。因此,数量增加不蕴含可剥削度下降。同样,与记录参考的动作一致率属于描述性指标,不能替代效用比较。
Die Zahl repräsentierter Informationssets misst gespeicherte Abdeckung, weder besuchsgewichtete Häufigkeit noch Best-Response-Ausnutzbarkeit. Mehr Informationssets implizieren daher keine geringere Ausnutzbarkeit. Auch Referenzübereinstimmung ist deskriptiv und ersetzt keinen Nutzenvergleich.
Paired estimates and uncertainty
配对估计与不确定性
Gepaarte Schätzungen und Unsicherheit
Dᵢ is the role-balanced utility difference for scenario pair i. The mean uses n independent pairs. The reported confidence limits are taken from the completed evaluation records, not inferred from rounded means or from the number of actions. The October comparisons share scenarios; their estimates are correlated. No cross-study pooled effect is computed.
Dᵢ 是第 i 对情境经角色平衡后的效用差,均值以 n 对独立样本计算。置信限直接取自已完成评估记录,不由四舍五入均值或动作数量反推。10 月的两组比较共用情境,估计相关,不计算跨研究合并效应。
Dᵢ ist die rollenbalancierte Nutzendifferenz für Szenariopaar i. Der Mittelwert verwendet n unabhängige Paare. Konfidenzgrenzen stammen aus abgeschlossenen Bewertungsbelegen, nicht aus gerundeten Mittelwerten oder Aktionszahlen. Die Oktobervergleiche teilen Szenarien; ihre Schätzungen sind korreliert. Ein studienübergreifender Gesamteffekt wird nicht berechnet.
Revised empirical results
修订实验结果
Revidierte empirische Ergebnisse
The revised R3 policy was compared with Original and R2 in two completed evaluations. Each has 60,000 pairs and 120,000 interactions, authenticated inputs and an independent complete-record audit. Both point estimates are positive and both intervals span zero. Historical positive results from other policy lineages or completion rules are not merged into these comparisons.
修订策略 R3 分别与 Original、R2 完成比较。每组包含 60,000 对样本与 120,000 次交互,具有已认证输入及独立的完整记录核查。两组点估计为正,区间均跨零。其他策略谱系或补全规则下的历史正向结果不并入本次比较。
R3 wurde in zwei abgeschlossenen Bewertungen mit Original und R2 verglichen. Jede umfasst 60.000 Paare und 120.000 Interaktionen, authentifizierte Eingaben und eine unabhängige vollständige Datensatzprüfung. Beide Punktschätzer sind positiv, beide Intervalle enthalten null. Historische positive Befunde anderer Policy-Linien oder Vervollständigungsregeln werden nicht zusammengeführt.
Conclusion
结论
Schlussfolgerung
The current data support a completed, internally consistent comparison and quantify uncertainty. They do not establish a positive effect at the reported interval level, equivalence, convergence, cross-domain generalization or real-time deployment benefit. Further evaluation should preserve the pair as the sampling unit and distinguish exploratory comparisons from confirmatory analyses.
当前数据支持“比较已完整执行且内部一致”,并量化了不确定性;不建立所报区间水平下的正效应、等效、收敛、跨领域泛化或实时部署收益。后续评估应保持以样本对为统计单位,并区分探索性比较与验证性分析。
Die Daten belegen einen abgeschlossenen, intern konsistenten Vergleich und quantifizieren Unsicherheit. Sie belegen weder einen positiven Effekt auf dem berichteten Intervallniveau noch Äquivalenz, Konvergenz, Domänentransfer oder Echtzeitnutzen. Weitere Bewertungen sollten Paare als Stichprobeneinheit erhalten und explorative von konfirmatorischen Analysen trennen.
Completed comparisons: 15 October 2026
完整比较:2026 年 10 月 15 日
Abgeschlossene Vergleiche: 15. Oktober 2026
| Comparison比较Vergleich | Pairs样本对Paare | Δ̂ | 95% CI |
|---|---|---|---|
| E20261015-A R3 − Original | 60,000 | +5.5004 | [-1.7253, +12.7261] |
| E20261015-B R3 − R2 | 60,000 | +2.6058 | [-0.0998, +5.3115] |
Both intervals contain zero; improvement is not established. The comparisons share scenarios and are not independent replications. Intervals are pointwise, without adjustment for multiple comparisons.
两组区间均包含零,尚未建立提升结论。比较共用情境,不是独立重复实验。区间为逐比较区间,未经多重比较校正。
Beide Intervalle enthalten null; eine Verbesserung ist nicht nachgewiesen. Die Vergleiche teilen Szenarien und sind keine unabhängigen Wiederholungen. Die Intervalle sind punktweise, ohne Korrektur für Mehrfachvergleiche.
References and data
参考文献与数据
Literatur und Daten
[1] Zinkevich, M., Johanson, M., Bowling, M. & Piccione, C. (2007). Regret Minimization in Games with Incomplete Information. Advances in Neural Information Processing Systems 20.
Rhythmlag Lab. Revised paired evaluations, 15 October 2026: E20261015-A and E20261015-B. The data page records units, denominators, completion counts and result digests.
Rhythmlag Lab,2026 年 10 月 15 日修订成对评估:E20261015-A 与 E20261015-B。数据页记录单位、分母、补全计数及结果摘要校验值。
Rhythmlag Lab. Revidierte gepaarte Bewertungen vom 15. Oktober 2026: E20261015-A und E20261015-B. Die Datenseite dokumentiert Einheiten, Nenner, Vervollständigungen und Ergebnisprüfsummen.
Data and measurement definitions数据与测量定义Daten und Messdefinitionen