Bigdata HW7

遺伝子データから人種を類推する、という問題。

本来どういう方法でやることを想定しているのかよくわからないけど、 まあ、答えが合えばいいだろう、ということで、 手持ちのニューラルネットのコードでやってみた。

ところがこれが全然収束しない。何かコードがまちがってるのかと 色々見て見たが、特におかしくない。 ふと気がついて学習速度を調整するパラメータの値を二桁ほど下げたら ちゃんと動いた。。。 特徴ベクトルのサイズが１００倍ぐらいになっていたせいなのか？ このへんを手で設定しなければならないのが困ったもんだよなあ。。

しかし、スピードをまったく考慮していないコードであるとはいえ 特徴ベクトルが20万次元にもなるとこんなに遅いのか、という感じ。

BigData HW6 bayesian net

締め切りをだいぶ過ぎたけどなんとか。。 結局sqliteでやったけど、もっといい方法はないのか。 SQLじゃない実装ってどうなってるんだろう。うーん。。 どう考えてもSQLでの実装はかなり無駄があるんだがなあ。。