airmosaic-ai

公共评估与均值基线

English 中文

训练均值基线是各数值回归候选共用的评估参照,不作为独立研究模型族。它对每个留出样本预测训练集目标均值,不能用验证集或测试集目标估计该均值。

既有 R/Python 行为

两条路径保持原选型规则:验证误差最优时,基线也可能被选中。公共对照不限于随机森林,候选标识、参数键及选型计算保持不变。

配置、运行和检查

使用任一已实现模型示例,即可同时得到基线与候选评分。先准备 R 环境或 Python 任务与环境,再遵循计划审核。

保留一个可选的仅基线 Python 工程检查,归公共评估示例:任务、runner 参数。它不是主要模型选择入口。

python -m runtime.cli run-tool ml_python_regression_workflow --params-file config/examples/run-tool/ml-evaluation-python-baseline.json --dry-run
python -m runtime.cli run-tool ml_python_regression_workflow --params-file config/examples/run-tool/ml-evaluation-python-baseline.json --timeout 180

先检查 can_execute 和 blockers,再核对实际进程及产物状态。通过 artifacts.json 定位候选、按样本键保存的预测和指标,在相同保留样本上独立重算指标并检查模型重载。预览不训练或读取数据行。新结果仍遵循所选 runner 的既有范围。科学比较依据见评估方法,不直接沿用工程示例参数。