昔、授業でQ学習を習ったの思い出したのでQ学習使って迷路学習させるスクリプトをrubyで書いたgithub.com Q学習とは Q学習は機械学習手法の方策オフ型TD学習の一つである。概念自体は古くから存在するが、Q学習（Q-learning）という名前で今日の手法がまとめ…

研究で必要になったから調べてみた観測したデータから最小二乗法などでモデルを推定する際に、観測したデータに外れ値が混じっていた場合、推定したモデルは外れ値に引っ張られてしまいます。そこで、RANSACアルゴリズムを利用することで、外れ値を無視した…

github.com 思いつきでc++でイベント駆動っぽいTCPのクラス書いてみた これでTCPのサーバーとクライアント両方ともイベント駆動っぽくかける試しにエコーサーバサーバ #include <iostream> #include "TCPEventServer.h" int main(void) { eventTCP server(5432); serve</iostream>…

rubyの勉強のためにオセロのコンソールアプリ作った最近、C/C++しか書いてなかったから良い息抜きになったできれば、webアプリまで発展させてオンライン対戦的なのも実装してみたい その前に、ひどい実装になってしまったので時間あるときに直そう github.com

学校のネットワークに繋いだら学校のプロキシに、家に戻ったらプロキシの自動検出に手動で切り替えてたのだけれども、 面倒くさかったから勉強も兼ねてクロム拡張を作った。マニュフェストファイルはこんな感じ { "manifest_version": 2, "name": "Proxy Cha…

TCPやUDPなどのネットワークプログラムを書いてると、受信したバイト列の任意の位置から32ビットを読み込んでint型として扱いたくなる時がある。例えば、受信したバイト列に整数「123」が含まれているとする。整数「123」はバイト列に直すと00 00 00 7bとな…