PC28 回测复盘
先固定方法版本、数据截止点与评价口径,再查看完整测试区间。当前页面在浏览器内检查配置并生成摘要,不连接回测计算服务,也不会把未运行的数据显示成真实结果。
已通过结构检查
配置摘要
- 方法 / 数据
- 训练窗口
- 测试窗口
- 评价 / 基准
方法规格先于结果
回测需要先说明预测对象是什么。精确和值、候选和值集合和大小单双分类不是同一个任务,不能共用一个未经解释的“命中”标签。若输出多个候选和值,集合越大,覆盖实际结果的机会通常也会变化,因此报告必须同时列出集合大小、覆盖口径与对照基准。
目标定义
明确输出是单个 0—27 和值、多个候选和值,还是带文字标签的属性分类。多任务结果应分别评价,不合并成一个模糊分数。
覆盖率与有效期
分母应使用实际完成输出且具备可核对结果的期次。数据缺失、规则无法应用或输出晚于截止点的期次单独列为未评估,不应悄悄删除。
基准选择
和值由三个 0—9 分量相加形成,不能未经推导就把 0—27 当作等概率结果。可使用训练区间的经验频率或事先冻结的简单规则作为对照,并记录其计算窗口。
结果仪表
指标区保留完整测试窗口、有效期次、未评估期次与基准对照。当前没有导入或连接任何报告,因此读数保持未计算状态。
分段表现尚未生成
完整报告应按连续时间段展示相同口径的表现,并同时保留上升、平稳与下降片段。若样本量不足以支持稳定比较,应直接标明,而不是用视觉放大短期变化。
不确定性边注
单一命中比例无法说明波动范围。具备条件时,报告可同时给出样本量、分段差异或区间估计,并说明这些数值依赖当前样本与评价定义。
审计明细表
每一行都应回答四个问题:当时能看到哪些输入、方法输出了什么、实际结果是什么、按预先定义的口径如何评价。若计划是在开奖后补录,就不能归入真实发布记录。
| 期次 / 日期 | 输入截止点 | 方法与计划版本 | 方法输出 | 实际结果 | 评价结论 | 记录类型 |
|---|---|---|---|---|---|---|
|
尚无逐期报告记录 配置摘要不会自动生成审计行。只有在具备可核对的输入快照、输出时间与实际结果后,才应填写逐期结论。 |
||||||
让下一次运行能够对上这一版
可复现记录不仅是方法名称。运行环境、数据快照、换算规则、参数文件、随机过程设置与输出报告版本都应保持关联。数据发生更正时,旧报告不应被无声覆盖;应保留原报告,并注明新数据版本对哪些期次与指标产生影响。
样本外验证
参数选择完成后再进入测试窗口。若查看测试结果后继续调整参数,该窗口已经参与方法选择,不再是纯粹的样本外验证,应另设后续窗口重新评价。
版本与更正
记录报告生成时间、数据更正日期和参数调整原因。报告版本之间应能定位差异,而不是只保留最终表现较好的版本。
历史表现的边界
回测描述的是特定数据、时间窗口、规则与评价方式下的历史表现。它可以帮助发现数据泄漏、参数不稳定和评价偏差,但不能直接证明未来结果,更不构成收益依据。
版本标签应与数据快照、方法参数及逐期审计行共同保存,便于比较更正前后的报告。