宽客小学的课程效果不可复现且日期范围矛盾
如下图所示,为 “宽客小学”的课程内容。
https://bigquant.com/tutorial/
{w:50}{w:100}
https://bigquant.com/wiki/doc/shuju-OiRLVCmIYx
{w:80}{w:100}
我发现两个疑惑:
日期对不上
训练集日期范围 2013-01 ~ 2016-12
测试集日期范围 2017-01 ~ 2018-12
回测集日期范围 2015-01 ~ 2016-12 <== 跟测试集日期没有交集,咋取的?
{w:60}{w:100}
训练结果对不上
首先在训练阶段的 feature_importance 就跟教程里面的截图不同,差距还挺大的
{w:70%}{w:100}
{w:80}{w:100}
最终的回测结果也是惨不忍睹,明显低于基线
辛苦工程师帮忙看看原因吧,我的 Notebook如下。
另外,是否能提供个官方版的教程Notebook, 同时提供自动diff工具;方便用户遇到问题时,排查复现故障的原因
https://bigquant.com/experimentshare/bbc1e0d3fd6c4efaa77436fa003e1209