实验室让有吸引力的想法面对不方便的证据。每个实验从固定规则开始,以完整结果结束,包括失败。
FIG. 01 · 实验方案
在测试前确定想法、数据、周期、成功指标、风险上限和停止条件。
FIG. 02 · 证据
公开 Prompt、代码版本、决策、数据假设和重要修改。
FIG. 03 · 现实
计入成本、滑点、延迟、缺失数据,以及回测本身可能错误的可能性。
FIG. 04 · 结论
被否定的想法同样是有价值的证据,不因为结果不漂亮而隐藏。
只有当假设、规则、数据、成本和停止条件被提前固定后,实验才会正式发布。