24時間学習は無駄?

 24時間学習が無事(?)に終わりました。

|--------------------------------------------------------------------|
|                          Experiment Results                        |
|--------------------------------------------------------------------|
|                               Summary                              |
|--------------------------------------------------------------------|
|ML Task: regression                                                 |
|Dataset: E:\My Project\MBShinba\ShinbaTime.csv                      |
|Label : Souha                                                       |
|Total experiment time : 86401.0000 Secs                             |
|Total number of models explored: 42536                              |
|--------------------------------------------------------------------|
|                        Top 5 models explored                       |
|--------------------------------------------------------------------|
|      Trainer                             RMSE       Duration       |
|--------------------------------------------------------------------|
|798   FastTreeRegression                  1.9994     11.5630        |
|921   FastTreeRegression                  1.9994     11.7550        |
|778   FastTreeRegression                  1.9995     11.5890        |
|901   FastTreeRegression                  1.9995     10.7760        |
|801   FastTreeRegression                  1.9996     11.6240        |
|--------------------------------------------------------------------|

|--------------------------------------------------------------------|
|                          Experiment Results                        |
|--------------------------------------------------------------------|
|                               Summary                              |
|--------------------------------------------------------------------|
|ML Task: regression                                                 |
|Dataset: E:\My Project\MBSouha\SouhaTime.csv                        |
|Label : Souha                                                       |
|Total experiment time : 86400.0000 Secs                             |
|Total number of models explored: 3010                               |
|--------------------------------------------------------------------|
|                        Top 5 models explored                       |
|--------------------------------------------------------------------|
|      Trainer                             RMSE       Duration       |
|--------------------------------------------------------------------|
|2832  FastTreeTweedieRegression           1.4475     124.7470       |
|2797  FastTreeTweedieRegression           1.4476     123.4930       |
|2803  FastTreeTweedieRegression           1.4477     164.3130       |
|2800  FastTreeTweedieRegression           1.4484     180.3360       |
|2833  FastTreeTweedieRegression           1.4484     136.4710       |
|--------------------------------------------------------------------|

何故無駄って思うかというと、まあ、通常用はそれでもちょっとだけですが最後まで頑張ってますが、実は昨晩時点で最適なRMSEが1.45辺りでした。まあ、本当にちょっとだけ改善してますが、新馬戦用に至っては確か開始1時間以内で最適になって以後41,000トライアルは結局成果が出てません。

ただ、実は本当に気になっているLightGBM。Pythonのflamlではかなりの確率でLightGBMだったりしたので、ってかまあ、実はAutoMLでもなんですが、現在のModel Builderは間違いなくLightGBMに問題があると思います。一度もログに姿が無いのはありえないかと。で、先日も書きましたが、LightGBMだけではエラーになるって。"オブジェクト参照がぉ部ジェクトインスタンス設定されていません"って勝手に理解してるだけですが、自動機械学習の候補ってかアルゴリズムとしてLightGBMが割り当てられてない。なので、単独ではエラーになるけど、他のアルゴリズムを1つでも入れれば学習が成立するのでLightGBM無しで動く。まあ、実際には開発者ではないので分かりませんが、先日英語サイトで質問したけど完全にスルーされてます😖 まあ、いうなれば、Microsoftが先日閉鎖したやつの英語版的なものだとは思います。Microsof Learnとかと並んであるQ&Aの所にしたんですが、Visual Studioにはそもそも「問題を報告」ってあるんですよね。随分前に使った事があり、これってまあ流石に開発部門に飛ぶんですよ。これ、日本語でも大丈夫かは試した事がないですが、こちらに今回のLightGBMの件も投げました。再現性もあるのできっりと対処してくれる事を期待はするけど何時になるかはねぇ。