スコアがなかなか下がらない about dbgphmm

[ryought]

• 探索結果をpythonでパースする
• 訪れていない組み合わせは？

「どのbasisを追加するか」は今は一様だけど、重さをつけられるのかもしれない

[ryought]

検証用に必要な情報

・基底に対するベクトル(線形代数でいうところの係数ベクトル)同士の距離(ハミング距離か、普通にeuclidノルム)
・基底の平均のスコア上昇度

温度別にpickするアイデアメモ
・温度の高いk-merに傾斜をつけてpick
・適当にcycleを取ってくる

[ryought]

なぜダメかを可視化する
・遠いところを彷徨っている(横軸スコア/縦軸正解との距離みたいなグラフを書く？)
・正解とどのぐらいの距離のところをうろついているか(PCAで2次元上にプロットする)
・パラメーター空間全体のうちどのくらいを探索しているか？
・サイクルとスコア上昇度の分布(scatter)
・各サイクルの選択率
・pythonでパースする

そのままの方法でやる
・温度を色々ためす
・イテレーションを時間かける

[ryought]

• temp
• projected
• basis
  • 選択率

[ryought]

スコアが増えていく方向が多いのは自然？各基底がスコアが増える方向に進むのか？(多い方が+の向きになるから+の方が多いのは当然?)
ランダムウォークをシードを変えて何度かやって、サイズの遷移をみる

[ryought]

勾配法、貪欲法的な方法を入れても面白いのかもしれない
(一番スコアをよくする基底を追加する)