ここまでの機械学習まとめ

ここに来てModel BuilderのバージョンアップやML.NETのベータリリース等で微妙に変化があり、ちょっとメモしてみます。

新馬戦用のここまでのAutoMLでの最適RMSEは0.8740でした。これを検証すると

単勝:的中[13.33%] 回収[133.33%] 複勝:的中[33.33%] 回収[88.44%]
枠連:的中[8.89%] 回収[348.44%] 馬連:的中[6.67%] 回収[390.00%]
ワイド:的中[11.11%] 回収[140.22%] 馬単:的中[4.44%] 回収[711.11%]
三連複:的中[2.22%] 回収[78.00%] 三連単:的中[0.00%] 回収[0.00%]
予想[45] 的中[15] (33.33%) 購入[¥31,500] 払戻[¥85,030 (269.94%)]

ML.NET 4.0.0のプレビューでは最適RMSEは1.6655でした。これを検証すると

単勝:的中[13.33%] 回収[68.00%] 複勝:的中[26.67%] 回収[53.11%]
枠連:的中[2.22%] 回収[48.00%] 馬連:的中[2.22%] 回収[47.11%]
ワイド:的中[2.22%] 回収[15.11%] 馬単:的中[2.22%] 回収[59.11%]
三連複:的中[0.00%] 回収[0.00%] 三連単:的中[0.00%] 回収[0.00%]
予想[45] 的中[12] (26.67%) 購入[¥31,500] 払戻[¥13,070 (41.49%)]

Model Builderの最適RMSEは1.6552で、これを検証すると

単勝:的中[6.67%] 回収[20.00%] 複勝:的中[24.44%] 回収[63.56%]
枠連:的中[8.89%] 回収[83.33%] 馬連:的中[2.22%] 回収[15.78%]
ワイド:的中[8.89%] 回収[128.44%] 馬単:的中[2.22%] 回収[40.44%]
三連複:的中[4.44%] 回収[315.33%] 三連単:的中[0.00%] 回収[0.00%]
予想[45] 的中[14] (31.11%) 購入[¥31,500] 払戻[¥30,010 (95.27%)]

通常用のここまでのAutoMLでの最適RMSEは0.7947とかあるんですが、モデルファイルが265MBと大きいもので今回のプレビューでもエラーになって使えません。次点で0.8188があり、こちらは126MBなので検証出来ました。

単勝:的中[20.51%] 回収[73.52%] 複勝:的中[46.03%] 回収[79.26%]
枠連:的中[9.36%] 回収[54.33%] 馬連:的中[6.35%] 回収[47.57%]
ワイド:的中[15.26%] 回収[70.29%] 馬単:的中[3.54%] 回収[52.28%]
三連複:的中[3.79%] 回収[44.69%] 三連単:的中[1.10%] 回収[36.01%]
予想[819] 的中[388] (47.37%) 購入[¥566,200] 払戻[¥371,200 (65.56%)]

ML.NET 4.0.0のプレビューでは最適RMSEは1.5209でした。これ検証すると

単勝:的中[24.66%] 回収[86.86%] 複勝:的中[52.26%] 回収[81.56%]
枠連:的中[14.84%] 回収[91.35%] 馬連:的中[10.74%] 回収[93.50%]
ワイド:的中[22.59%] 回収[83.47%] 馬単:的中[6.35%] 回収[109.76%]
三連複:的中[5.13%] 回収[132.81%] 三連単:的中[1.34%] 回収[216.37%]
予想[819] 的中[444] (54.21%) 購入[¥566,200] 払戻[¥727,080 (128.41%)]

Model Builderの最適RMSEは1.4085で、検証すると

単勝:的中[26.01%] 回収[89.71%] 複勝:的中[55.19%] 回収[84.22%]
枠連:的中[16.31%] 回収[97.70%] 馬連:的中[12.09%] 回収[98.88%]
ワイド:的中[23.44%] 回収[78.27%] 馬単:的中[7.33%] 回収[129.47%]
三連複:的中[5.25%] 回収[60.49%] 三連単:的中[1.71%] 回収[142.34%]
予想[819] 的中[469] (57.26%) 購入[¥566,200] 払戻[¥632,770 (111.76%)]

これみると、Model Builder頑張ってる感じがするけど、新馬戦のみまだ学習が足りてないのかな?通常用は確か８時間学習させてますので、新馬戦もちょっと長めの学習させてみますかね😉