ハイパーパラメータのチューニング手法

ハイパーパラメータのチューニング手法

1.グリッド・サーチ

ハイパーパラメータのすべての組み合わせを試行し

もっとも効率の良いものを選ぶ

2.ランダムサーチ

ハイパーパラメータの組み合わせを

ランダムに試行する

3.焼きなまし

最初は、様々なパターンを広くためし、

絞り込んて行く

4.ベイズ最適

回帰モデルを利用

5.遺伝的アルゴリズム