fluent-plugin-mecab

誰が何のために使うのかよくわからないけど,新しいfluentd plugin書きました. fluntdに流れてくる日本語のデータをmecabに食わせて形態素解析結果をもう一度fluentdに流すプラグインです. install Gemfileに以下を書いて,bundle installすればいいです g…

miktter advent calendar 2013 12日目

コンソールでmikutter みなさんご存知のmikutterdを使ってmikutterからついーとします.以前作ったmikutter-rpcを利用すればすぐにできます. pluginディレクトリにmikutter-rpcを導入し,mikutterを起動したあと 以下のスクリプトを実行するとついーとでき…

mikutter advent calendar 2013 9日目

rakeでgem依存関係解決☆(ゝω・)v はいhttp://dev.mikutter.hachune.net/issues/628 ruby mikutter.rb --confroot=/path/to/conf/pathで起動できるのにpluginのgemfileを読み込む設定を手動で書き換える必要があります. めんどくさいのでrakeでインストー…

mikutter advent calendar 2013 1日目

mikutterでビッグデータ処理 はいネタです. とりあえずmikutterにmessagepack-rpcを導入します. 以下のプラグインを.mikutter/plugin/に導入します. require 'msgpack/rpc' Plugin.create(:rpc) do UserConfig[:tw_port] ||= 5000 class Remote def tweet…

homebrewにtd-agentがやってきた

今日,mac向けにtd-agentのhomebrew用のformulaが公開されたのでインストールしたお話を. Install とりあえずインストール方法*1ですが, $ brew install "http://toolbelt.treasure-data.com/brew/td-agent.rb" でインストールでできますインストール終わ…

Jubatusハンズオンにいってきた

Jubatusハンズオンにいってきました.Jubatusの簡単な使い方をハンズオン形式 ですすめていってました.で,そこでいま作って動かしてるmikutter-jubatusについてLTしてきました.という感じになってます.発表時は設定について説明してなかったので 設定に…

Fluentd Casual Talks#2と第4回カーネル/VM勉強会@関西でLTしてきた

Fluentd Casual Talks#2と第4回カーネル/VM勉強会@関西でLTしてきました. ネタとしてはBeagleBoardでtd-agent(fluentd)の性能評価,ビルドねたです. 2つとも同じネタで話してますが,Fluentd Casual Talksで話してないところ があります.最後にtd-agent-a…

カーネル/VMアドベントカレンダー2012の14日目

カーネル/VMアドベントカレンダー2012の14日目のために書かれた記事です. td-agent for BeagleBoard-xM みんな大好きARMワンボードPCのBeagleBoardにtd-agentを移植してみました. まずは,BeagleBoardのOSですが,Ubuntu Linux 12.04.1 LTSを利用してい ま…

mikutterアドベントカレンダー1日目

今年はmikutterアドベントカレンダーを主催してます. 今日のネタはfav.rbの解説をしようかと思います. fav.rbとは? mikutter作者のtoshi_aさんをふぁぼって励ますために書かれた mikutter pluginです.仕組みは簡単です. ユーザタイムラインに流れてきた…

カーネル/VM探検隊@つくばにいってきた

土曜日に筑波大学でカーネル/VM探検隊@つくばがあったのでいってきました!! 飛び込みセッションでmikutterについて発表しました!! mikutter入門 from Katsuyoshi Matsumoto

BHyVeHackathonに参加してきた

2012年7月28日,29日にBHyVe Hackathonというやつがあったので 参加してみました.と言っても大したことできないのでとりあえず,bhyve上のゲスト のベンチマークとってみました.ゲストとホストのdmesgをここにでベンチマーク結果です. ベンチマークとして…

fluent-plugin-growthforecastをネストしたデータに対応してみた

fluentdからgrowthforecastに投げるとき以下のようなデータがきた場合 2012-07-16 13:50:27 +0000 dstat.all: {"hostname":"localhost","dstat":{"total-cpu-usage":{"usr":"5","sys":"2","idl":"93","wai":"0","hiq":"0","siq":null},"memory-usage":{"used…

Arm(BeagleBoard)向けのtd-agent作ってみたよー

これの続きです.ARM32bitにはjemallocは対応してないようなのでとりあえず今回は見送り.で,jemallocを排除したものは一応コンパイルは通りました. ですが,今度はrubyの方に問題が… 一応,コンパイルが出来てtd-agent-1.1.5-1.debはできたんです. しか…

Fluentd v.11への要望

新しいfluentdへの要望を募ってるらしいですので, 要望をとりあえず書いてみます. SSLなどのセキュア通信のサポート RPC ドキュメント 一つめのセキュア通信は,今やってること(HEMS)の性質上 プライバシーの観点からサポートされてるとうれしいなぁと 必…

Fluentd Casual TalksでLTしてきた

Fluentd Casual Talksに行って,LTしてきました!!! スライドです!!! fluentd View more presentations from Katsuyoshi Matsumoto ちょっと他の方々の発表とちがったものとなったなぁと… fluent-plugin-serialportについて センサーデータ集める用に以…

Asakusa.rbいってきた

asakusa.rbにいってきた.初めてのasakusa.rbだったのではじめは,mikutter-fluendでmongodbにためた ついーと集をrailsで表示するプログラムを書いていた.mongodbに入ってるデータそのまま使うにはどうしたらいいのかなぁと思って たら,松田さんが来たの…

第二回mikutterユーザ会@関東をやったった

だいぶたったけど,[twitter:@toshi_a]さんが関東に来るらしかったので 第二回mikutterユーザ会@関東をやった.今回は,[twitter:@toshi_a]さんが来るということで[twitter:@tsutsuii]さんからの 差し入れとしてmikutterマグカップ一式が送られてきました.…

第七回Kernel/VM探検隊でLTしてきた

カーネル/VM探検隊でLTしてきました. 以下にスライドです. Listen grep View more presentations from Katsuyoshi Matsumoto ファイルをたくさん聞けなかったのでgrepできませんでした ヽ('ω')ノ三ヽ('ω')ノもうしわけねぇもうしわけねぇ

ARM(BeagleBoard)向けTD-agent.debが欲しい

ということで作ってみた. window.twttr = (function(d, s, id) { var js, fjs = d.getElementsByTagName(s)[0], t = window.twttr || {}; if (d.getElementById(id)) return t; js = d.createElement(s); js.id = id; js.src = "https://platform.twitter.c…

fluentdでmikutterのTLを保存しよう

mikutterのTLをFluentd使ってloggingするプラグイン作ってみました. 使い方は簡単で以下のコマンドでfluentdとfluent-loggerをインストール gem install fluentd gem install fluent-logger インストールしたら,mikutter-fluentd.rbをプラグインディレクト…

カーネル/VM勉強会@関西

カーネル/VM勉強会@関西いってきました. 主催者の理不尽なありがたいお誘いによりLTしてきました. スライドは以下のやつです. おれよりすごいておくれにあいにきた View more presentations from Katsuyoshi Matsumoto 公開されててるので誰かDisk周りに…

fluent-plugin-serialport

Fluentdのプラグインを書いてみました. SerialPortrからながれてくるデータをそのままfluentdにinputする pluginです. in_serialport.rb id:tagomoris さんの記事を参考に作成しました. http://github.com/katsyoshi/fluent-plugin-serialportに公開して…

耳grepをArduinoで

バイナリアンじゃない僕がArduinoをつかって耳grepみたいなのを作ってみた簡単な話として,ファイルを1バイトづつArduinoに送って,Arduinoはそれを 受け取って音を鳴らす.ということです. Arduino側 ここでは,Arduino側のプログラムについて書いてます*1…

mikutterをついーとさーばに

mikutterとMessagePack::RPCを利用して,りもーとからツイートする方法について 書いてみたいと思う. Server まず,gem install msgpack-rpcとしてMessagePack::RPCをインストールします. インストールしたら,以下の簡単なPluginをつくります. require '…

mikutterの薄い本

mikutterの薄い本の一部書きました.内容は,OSごとのインストール方法について 書いてあります.抜けてるところも多いと思うので分からないところがあったら, @katsyoshiにメンション投げてください.投げなくても#mikutterでつぶやいてく れるとなんか反…

ぷおりんマジ天使Advent Calendar

この記事はぷおりんマジ天使AdventCalendar5日目のために書かれました. ぷおりんさん ぷおりんさんとは,twitterで見かけたのが始めてです. 大阪Gentoo大のnaotaさん以外にGentooの人がいると聞いて,知りました. TeXユーザの集い 2011でnaotaさんと話す…

桜花あどべんとかれんだぁ 10日目

この記事は桜花あどべんとかれんだぁ 10日目ために書かれました. @rofi shimapaaaan!! 桜花ちゃんといえばしまぱん.しまぱんといえば桜花ちゃん. ということでbunnerコマンドつかって桜花ちゃんを書いてみました. ######### ############### ######## ##…

Gentoo Install Battle at 神保町

神保町のとあるISPな会社のPCを利用してGentoo Install Battleをすることらしい ので神保町に行って来ました.ここでは,詰まったところについて書きます. memo ConsoleはttyS0じゃない!!useallyて書いてあるけどttyS0で接続できない 場合は,ほかのttyS#を…

カーネル/VM Advent Calendar 4日目

この記事はカーネル/VM Advent Calendar2011のために書かれたものです. 今回の記事はZFSなNASについて書いてあります. ZFSを復旧!! ZFS Root*1なマシンが此処にありますが,1台ディスクが壊れています. このマシンの構成は,hdd 1TB * 6,ZFS v.15, raidz…

mikutterユーザ会@関東

mikutterユーザ会@関東に行って来ました. 行ってきたと言うより主催者ですが.今回は,僕@katsyoshi,@tomy_kairaさん,@osa_kさん,@d_akiさんの4人 で行いました.でやったことは基本的にmikutterをより良くするために Gemfile書いたり,Test書いたりして…