Transformerは構造が複雑。
Transformerは構造が複雑。
木ベースの方が有効性高いって話もあるな。うーん。
野村の研究所だけどこれもわかりやすい。
ぐぬぬ
学習用データ作ろうとしてるが意外とムズいなこれ
ちょっとアウトプットをカスタマイズしようとするとデフォルトのツールでうまくいかない。
うーむ、また前のようにデータ量多すぎてオーバーフローするな。今度は100GBのメモリ買いたい。
KAGGLEの上位入賞のデザインを元に作ってるけどそもそも効率のいいもんが公開されてるのかという疑問は払拭できない。
LIGHT GBMにデータ食わせるのは行列じゃなくてベクターになる。行列をベクターに変換すると結構扱いにくいデータ数になる。そうするとタイムラインを削るか特徴量を削るかどっちかになるのよな。
うーん、特徴量削ってまともに分析できるんだろうか。良く分からん。。特徴量削るのも若干面倒なのよな…とりあえずいらなそうなの削ってみるか。
なんかCPUでも動くって言う話だけど、普通にうごかんな。メモリ使用はある程度抑えるのはできたけど、計算量はやっぱ要求される。
よし、データ整形終わり、さあどれぐらいのマシンスペックが必要になるか?!
ある程度データを削ればいけないことはないなメモリ使用も10G以内に収まった。
でもやっぱり学習がひたすら遅く数時間かかる。やはりgpu使わないと厳しい。
どんな発言にも反論するai.
お?何か結構CPUでいけそうだなこれは。
結局最適パラメーター値設定を調べるくらいならRLでくんだ方が楽なのかな。
どれもいや過ぎる..
仮想環境作るのが良いかもしれないがGPU必要になってくること考えると結局筐体か
1.x 系に落とす(例: numpy < 2.0)のが現時点では safest という現実的な対策。