小模型合成时序数据训练增益受限讨论

2026年10月15日，Reddit MachineLearning社区出现关于小时间序列预测器使用合成数据训练的讨论。报道指出，在固定架构与短预算条件下，为小型Transformer预测器添加额外堆叠通道仅带来约0.2%的误差降低，远未达到预期的1%目标。该增益受起始检查点影响且无法迁移至不同模型，参考生成器在长周期上的优势随评估集滚动而减弱。作者询问在有限数据杠杆下，除现有方法外还有哪些能突破当前性能瓶颈的数据侧变更策略。

AI 根据报道生成 · 52 分钟前更新

还没有足够的连续观测数据，暂不绘制趋势。