taiyoh's memorandum

@ttaiyoh が、技術ネタで気づいたことを書き溜めておきます。

cgoでのバイト列の受け渡し・受け取りについて

　（今年、まだ更新するネタがあったぞ）
　先週末くらいからGoをちょっと触り始めました。まだ始めて通算３日目くらいなんですが、なぜか色々すっ飛ばしてcgoなんてやっております。。。どうぞお手柔らかにお願いします。
　諸事情あって、Goで定義したバイト列をC側で操作して、その結果をGoで受け取ってほにゃららする、って操作がしたくて調べてみました。低レイヤーなライブラリーをいくつか読んでみて、こんな検証コードを作成しました。

　これ、完全に黒魔術や。。。目的のデータのポインタを型に依存しない形で取り出してそのポインタの指すデータをreflect.SliceHeaderでキャストして任意の型で操作できるようにして*1、その構造体のDataのポインタを改めて型に依存しない形で取り出してCにおけるunsignded char *でキャストしてC側の関数に放り込む、ってことらしいですが、自分でも何言ってるかわからない＞＜いや、落ち着いて考えれば「あー」程度には思うのですが、深い理解にはなってないですね。。。
　もともとはあるUSBデバイスのデバイスドライバ＋アプリ的なものを作りたくて、当初はnode.jsで目的のことをやろうとしたんですが、結局深いところでの操作はC++が書けないと難しい感じだったんですね。なので、直接C/C++を触る気力のない、というか、デバドラ部分以外はなるべくLL的なものを使いたいゆるふわな僕は、Goを選択した次第であります。Goは、程よく堅くて程よくシンプルに書けるのがいいですね。勿論適材適所だとは思っていますが。

*1:元ページに"Package reflect implements run-time reflection, allowing a program to manipulate objects with arbitrary types."って書いてあるので、よっぽど誤訳してなければ大体そんな感じのはず。。。 http://golang.org/pkg/reflect/

IFTTTのiOS版での位置チャンネルを使って、家のリモコンを操作する

　（なんか、半年ぶりにここに書くけど今年最後のエントリな気がする）
　承前→lirc_webを使ってどこからでも赤外線リモコンの操作ができるようにする - taiyoh's memorandum
　表題以上のことはなにも無いんですが、やってみましたよ、ということで。
　f:id:sun-basix:20131216005909p:plain
　今IFTTTの僕のアカウントで登録しているレシピです。位置情報にバッチリうちの座標が入ってるので公開できないですが。
　そもそもなんですが、本来IFTTTって予め決められたところとしか連携できない、という制約があって、野良サーバにリクエストを送るとかは出来ないので非常に難しいのですが、一つ抜け道があります。IFTTTはwordpressサービスとの連携も行っているのですが、そのwordpressサービスは自分のドメインを登録することができます。つまり、そこの認証さえ通れば、IFTTTから指定したサーバにリクエストを飛ばせるようになるということです。
　→ captn3m0/ifttt-webhook · GitHub
　この方がその辺の処理をまとめていて、xmlrpcのリクエストを変換して所定の場所に送るということをやっています。readmeにも「とりあえずここ使ってみて」というドメインが紹介されているので、お試しでやってみるのはありかも。というか、僕は今はそこ経由でやってます。でも、怪しいことこの上ないのは承知でやってるので、どっかのタイミングで自分とこのドメインを登録するか、そもそもこの連携をやめるかは考えております。。。
　そして何よりつらいのは、家の周囲そこそこの距離で検知されて動作してしまうので、そもそもホントに電気が消えたり灯いたりしてるのか、確認がとりづらいんですよね。いや、サーバのログとかは見てるんですが、最後の最後のリモコンの操作が正常に動作したかどうかを確認するのはなかなか難儀なもんでして。。。

アメッシュの画像を解析して、家に雨雲が近づいたら通知するツールを作った

　まあ、タイトルの通りなんですが。
　アメッシュの監視ってだけなら他に作ってる人がいるっぽいのですが、僕がやったのは、エリアごとに緊急度を付けて、家に雨雲が近づけば近づくほど緊急度が上がってるというのが分かるようになってます。

　これって要は、目標のポイントを中心とした円を何枚か用意しておき、それらの画像を１枚ずつ突き合わせてアメッシュの降水の様子を示した画像を論理積（AND）で重ねた時、ピクセルが残るかどうかによって、画像に応じた緊急度を判別させよう、ってことですね。そして気づいたら、imagemagickを使う場所が全部system関数を叩くようになってて、とても泣きそうです。でも、plenv等でPerlMagick入れるのめんどいし、他の処理をシェルスクリプトで書くのも自信ないんだもん。。。
　今になって色々考えてみたらすごい富豪的な探索方法なので、他の人も使えるようなサービスとしての設計にはなってないので、もっとローコストに実現できる方法を考えなきゃですね。多分なにかあるはず。

Data::ChangeFinderとData::AnomalyDetectなんてもんをこしらえてみた

　→ taiyoh/p5-Data-ChangeFinder · GitHub
　→ taiyoh/p5-Data-AnomalyDetect · GitHub
　fluent-plugin-anomalydetectの動作がかっこよかったので、もうちょっとfluentに頼らずにカジュアルに使えないかな、と思ったのが発端です。
　変化点検出のアルゴリズムはいくつかある、というところまではググって分かってきたのですが、じゃあそれらをPerlで１から実装できるのか、というとそこまでの力はないので、謹んでfluent-plugin-anomalydetectに入っていたFluent::ChangeFinderの実装をごっそりPerlに移植させていただきました。内部が理解できてないのに移植できるのかよ、ってのは全くその通りなのですが、とりあえずリファレンスになるruby側の実装を、同梱されてたテストデータのcsvを使って単体で実行してみて、その結果データと移植したPerl側の実行結果を照合させて、誤差が0.1%もなければ（内部でrand使ってるので、確実に同一の値にはなることはない）、ほぼ期待の動作になっているのではないか、という論拠のもとに移植しております。
　検出部分のモジュールができれば、あとはそれのインターフェイスになるものがあれば使いやすくなると思ったので、Data::AnomalyDetectというものも作りました。これは、Fluent::AnomalyDetectOutputのコア部分の実装を移植させてもらっております。これで初期化時のパラメータ指定はfluentのプラグインとほぼ同じになります。

　↑動作サンプル
　あとお節介なこともしてて、AE::timerを使って定期的に検知処理を実行させるData::AnomalyDetect::Watchというのと、tcpで値を受け取ってスコアを返すという部分に特化させたData::AnomalyDetect::Recieveというのも同梱しました。ただ、特にRecieveの方はかなり原始的な作りだと思ってるので、本格的にやるにはもっと色々考慮しなくちゃいけないと思います。
　目下の課題は、ドキュメントを書かないといけないのと、outlier_bufferのデータを永続的に保持する（もしくは初期化時にロードさせる）仕組みが必要だな、というところです。

earthquake.gemの表示を少しだけ変更する

　最近、PC環境でのtwitterクライアントにearthquake.gemを使っています。twitter上を検索するとか、特定のアカウントのツイートだけ見るとか、今までは全部マウスでポチポチしてたのですが、earthquakeだと一つのプロンプトに集約できるのでいいですね。どうしようもない点といえば、ターミナルで動くので（アイコン含め）画像が見れないとか、そんなくらいか。
　で、本題。
　earthquakeの表示は、１ツイート１行というのがデフォルトの設定で、個人的にはちょっと見にくいなー、と悶々としていました。そんな時、「tmux+earthquake.gemな話 | himajinworks::blog」というエントリを読んで、そうだ、こうやって変えればええんや！とやっと気づいた次第です。で、表示系のプラグインを探し始めたのですが、自分の検索能力が低いせいもあって、なかなか出てこないので、もうこうなったらプラグイン書いて解決しよう、と決意。人が書いてるプラグインチラ見してなんとなく要領がつかめたので、こんな感じで作ってみました。
　→ myoutput.rb
　:plugin installすればいけるのかな。僕は~/.earthquake/plugin/以下に置いて検証しながらだったので、その辺ちょっと分からないですが。表示はこんな感じになります。
f:id:sun-basix:20130630120106p:plain
　元々のlib/earthquake/output.rbのoutput :tweetのブロックを丸コピさせてもらって最後のstatus変数の作り方だけ変えたので、複数行ツイート等の表示は以前と変わらないです（少なくとも今のバージョンであれば）。

nginxで同じパスでPCとSPのページ出し分け（簡易版）

　今更ながら、nginxにmapという機能があることを知った。
　→ HttpMapModule
　ということで、以下のことを試してみた。serverブロックの外側に以下のような記述を追加してみる（中に書くと怒られる）。

map $http_user_agent $myindex {
    default           /index.html;
    ~(iPhone|Android) /index_sp.html;
}

　んで、serverブロックの中のlocationの指定で

location / {
    root /path/to/document/root;
    index $myindex;
}

　って感じでindexの値をmapで指定した値に変えておくと、UserAgentに「iPhone」とか「Android」って入ってればindex_sp.htmlをインデックスファイルに、そうでなければindex.htmlをインデックスファイルにしてくれる。ifでずらずら書いてくやり方よりちょっと見やすくなるので良い感じかも。また、正規表現部分をもっと充実させれば、精度は上がっていくはず。