开放研究版本Framework 1.0学术修订版 1.2
FRAMEWORK 1.0 / 方法论

方法论

研究主张只有经过明确、版本化、可复现的协议,才能进入正式研究记录。

中文翻译版 · 英文为权威版本下载英文权威版 PDF
01

最低实证工作流

  1. 01

    登记研究问题

    明确主张、目标总体、系统边界、尺度、时间窗口、主要结果,以及哪些证据会反对该主张。

  2. 02

    梳理既有文献

    提出原创构念前,识别已建立结论、竞争理论、未解决缺口和领域基线。

  3. 03

    操作化构念

    用普通语言定义构念,并说明指标、排除项、单位、转换、测量误差和预期偏差。

  4. 04

    明确执行降维

    把多层本体转化为最小可识别状态向量,同时保留重要的网络、分配和权力不平等信息。

  5. 05

    冻结数据计划

    结果分析前登记来源、溯源、纳入规则、缺失处理、协调方法、许可、隐私控制和数据截止日期。

  6. 06

    规定测量模型

    声明构念属于反映式、形成式、网络式、潜变量或复合指标,并检验信度、效度和不变性。

  7. 07

    规定竞争模型

    把核心乘法关系与加法、潜变量、领域模型、因果模型和正则化机器学习模型比较。

  8. 08

    估计与校准

    分离训练、校准、验证和前瞻评估;报告先验、参数、不确定性、收敛性和诊断。

  9. 09

    无泄漏历史回测

    采用历史截止日期、预注册事件与预测窗口、冻结数据版本、朴素基线、误报、漏报和提前量评估。

  10. 10

    压力测试结论

    改变代理变量、边界、权重、ε、连接函数、滞后、缺失规则、降维选择和影响性案例。

  11. 11

    独立重复验证

    在合法范围内发布数据、代码、环境、决策日志和持久版本;升级主张前邀请独立团队。

  12. 12

    报告使用限制

    公布负面结果、群体误差、伦理约束、双重用途风险、拒绝输出条件、模型漂移以及修订或撤回条件。

02

证据成熟度门槛

01

G0 · 拟议

问题、范围、责任归属和证伪条件已公开。

02

G1 · 已操作化

构念字典、测量模型和试点数据已经形成。

03

G2 · 内部检验

代码、诊断、不确定性和负面结果已被记录。

04

G3 · 外部重复

独立团队重复或挑战该结果。

05

G4 · 前瞻验证

在未见未来数据上证明表现。

06

G5 · 实践合格

实际使用中的收益、伤害、权利、漂移和治理得到评估。