この一年のブログエントリまとめ - 2012年編

この一年のブログエントリまとめ - 2012年編

この一年まとめも3回目になった。去年は[ここ](https://blog.nomadscafe.jp/2011/12/---2011.html)\n\n今年は1/1の会社統合によって所属がNHN Japanに変わってオフィスが新宿=>大崎=>渋谷と流浪しましたが、仕事は変わらずやってます。その成果の一つがこれ\n\n[1年でPVが2倍に伸びました。ライブドアブログの主なニュースまとめ2012年版](http://blog.livedoor.jp/staff/archives/51792430.html)\n\nもちろん良いブログ、良い記事に恵まれ、ソーシャル系サービスの波にうまく乗ったがことが大きな要因だとは思いますが、サーバ側でも逐次アプリケーションやSQLの改善をしたり、インフラの増強等をしてこれたのも良かったのではないかと自負しています。\n\n## GrowthForecast\n\nGrowthForecastを公開したのは去年の年末でした。弊社でも様々な指標のグラフ化に利用していますし、他社でも多くの方が使って頂いているようです。\n\n[GrowthForecastというグラフ表示ツールで捗る話](https://blog.nomadscafe.jp/2011/12/growthforecast.html)\n\nGrowthForecast を初めて紹介したのは上の去年の記事でした。その後、機能追加などをしつつ、ドキュメントもまとめました\n\n[GrowthForecastに1分更新グラフ作成とサマリーなどのJSONフォーマットでの出力機能追加](https://blog.nomadscafe.jp/2012/02/growthforecast1json.html)\n\n[GrowthForecast のデータストアに MySQL が使えるようになりました](https://blog.nomadscafe.jp/2012/06/growthforecast-mysql.html)\n\n[oranie](http://tagomoris.hatenablog.com/entry/2012/10/24/120159)さんがsqliteのパフォーマンス問題をいろいろ踏み抜いてくれたので、SQLiteの設定を見直しつつ、MySQLにも対応しました。\n\n[やったー GrowthForecast のページできたよー＼(^o^)／](https://blog.nomadscafe.jp/2012/06/-growthforecast-o.html)\n\nそして出来たのがこのドキュメントページです\n\n[GrowthForecast - Lightning fast Graphing / Visualization ](http://kazeburo.github.com/GrowthForecast/)\n\nぜひ参考にしてくださいませ。\n\n最近モリスさんによって追加されたJSON-APIについてはmikedaさんが素敵な記事をアップしてくれました。きっとモリスさんもなんか書いてくれるはず！\n\n[GrowthForecastでAPI使って複合グラフ作ったり、グラフの色を変えたりしてみた](http://d.hatena.ne.jp/mikeda/20121230/1356835780)\n\n## CPANモジュール\n\nブログに書いてないモジュールもあったりするけど、いくつか作った。\n\n[Twiggy::Prefork をリリースしました](https://blog.nomadscafe.jp/2012/05/twiggyprefork.html)\n\n某RSS集約サービスの裏側で動いていたりする。半年以上動作しているがとくに問題は起きていない\n\n[Plack::Middleware::ServerStatus::Lite にアクセス数表示機能をつけました](https://blog.nomadscafe.jp/2012/06/plackmiddlewareserverstatuslite.html)\n\n[Proclet という supervisor モジュール書いてリリースした](https://blog.nomadscafe.jp/2012/06/proclet-supervisor.html)\n\n今年のイチオシモジュール。機能追加もしつつ、GrowthForecastやこのあと作った様々なツールでProcletを使っている。Web+Workerな管理ツールを作る時のマストアイテムになりました。\n\n[ProcletでSTDOUT/STDERRにサービス名を追加して表示できるようになったよー](https://blog.nomadscafe.jp/2012/08/procletstdoutstderr.html)\n\n[Proclet::Declare リリースしました Re: Proclet::Declare について考えた](https://blog.nomadscafe.jp/2012/09/procletdeclare-re-procletdeclare.html)\n\n[やったー PerlでProcfileベースのプロセス管理ツール foreman の互換コマンド \"proclet\" できたよ](https://blog.nomadscafe.jp/2012/09/-perlforemanprocleto.html)\n\nforeman互換のコマンドを作った事で複数のプロセスを使う開発も捗るようになった\n\n[SQLite のパフォーマンスチューニング、または DBIx::Sunny 0.16 の話](https://blog.nomadscafe.jp/2012/06/sqlite-dbixsunny-016.html)\n\nGrowthforecastでSQLiteのパフォーマンス問題に当たったので、その調査。DBD::SQLiteのデフォルトが変わって行く[話](http://d.hatena.ne.jp/charsbar/20120925/1348513000)もあるので要チェック\n\n[ロードアベレージを監視して任意のコマンドを実行するコマンド](https://blog.nomadscafe.jp/2012/07/post-14.html)\n\nそういえば使ってない\n\n[File::RotateLogs っていうログをファイルに記録していくモジュールを書いた](https://blog.nomadscafe.jp/2012/08/filerotatelogs.html)\n\n社内の新サービスではAxsLog+File::RotateLogsという組み合わせが使われる事が増えてきた。\n\n[DBIx::DSN::Resolver ってのを書いた](https://blog.nomadscafe.jp/2012/09/dbixdsnresolver.html)\n\n[DBIx::DSN::Resolver::Cached をリリースしました](https://blog.nomadscafe.jp/2012/10/dbixdsnresolvercached.html)\n\nこの二つのモジュールは、今社内で導入を進めているMHA for MySQLを使う際に、DNSへの負荷を減らすために使っている。ちなみにDNSにはMySQLをバックエンドにしたPowerDNSを用いている\n\n[Perl Advent Calendar Japan 2012 Hacker Track に Plack::Middleware::AxsLog の記事を書いたよ](https://blog.nomadscafe.jp/2012/12/perl-advent-calendar-japan-2012-hacker-track-plackmiddlewareaxslog.html)\n\nYet AnotherなAccessLogモジュール。advent calendarで紹介しました。奥様は20周年の某二人組のコンサートに行ってました。\n\n[Plack上でPHP(php-cgi)を動かす](https://blog.nomadscafe.jp/2012/12/plackphpphp-cgi.html)\n\nやったー、ApacheナシでNagiosうごいたよー！。今はPHPが必要だと言う理由だけで古いバージョンのNagiosを使っているので年明けにこれを使ってアップデートするつもり。\n\n## Apacheモヒモヒ\n\n素のApacheを使うのは小学生まで\n\n[Apache 2.2.15から入った mod_reqtimeout を Reverse Proxyで使う場合の注意点](https://blog.nomadscafe.jp/2012/02/apache-2215-mod-reqtimeout-reverse-proxy.html)\n\n[最新のログファイルにリンクが作れるようになった Apache 2.4.1 の rotatelogs を試す](https://blog.nomadscafe.jp/2012/03/-apache-241-rotatelogs.html)\n\n2.4系のサービス投入はまだ。大きなサービスでサーバ側でSSLを使うような話があればその前に検討したいと考えてる\n\n[Apache httpd.conf の Allow from .. にコメントを書いてしまうとDNSの逆引きが行われてレスポンスが悪化するので注意の件 + コメントが書けるようになるパッチ](https://blog.nomadscafe.jp/2012/04/apache-httpdconf-allow-from-dns.html)\n\n設定を書く時にはパッチした方が便利だとは思う\n\n[mod_copy_header ってのを書いた話 Re: Apache上のPerl FastCGIはCustomLogにデータを書くことができるか？](https://blog.nomadscafe.jp/2012/08/mod-copy-header-re-apacheperl-fastcgicustomlog.html)\n\n前職時代に作ったモジュールを思い出しながら復元。nginxだともっと簡単にできるようですね\n\n[Apacheのログで取得できる%{FooBar}nの値をCGIで得るには](https://blog.nomadscafe.jp/2012/12/howto-get-apache-notes-in-cgi.html)\n\nmod\\_copy\\_headerの逆のことをやろうとした場合。使う場所があればmod\\_copy\\_headerに機能追加してもいいかな\n\n[Apache HTTP ServerをRFC6585の\"429 Too Many Requests\"に(とりあえず)対応させるパッチ](https://blog.nomadscafe.jp/2012/12/apache-http-serverrfc6585429-too-many-requests.html)\n\n\n## 試してみた\n\n[nginx-1.1.x で httpなupstreamにもkeepaliveができるようになったので検証してみた](https://blog.nomadscafe.jp/2012/02/nginx-11x-httpupstreamkeepalive.html)\n\nこの機能は1.2系に追加されましたが、記事で紹介しているHTTP/1.0への対応はされてない。負荷が大きめの某所でHTTP/1.0に対応させるパッチを1.2系に適用して使っている\n\n[Replication Booster for MySQL を試す](https://blog.nomadscafe.jp/2012/03/replication-booster-for-mysql.html)\n\n実際に常に動かしています。たまにCPU 100%で張り付いていることがあるので監視して再起動とかしてたり。\n\n[Intel SSD 910 800GB のベンチマーク](https://blog.nomadscafe.jp/2012/07/intel-ssd-910-800gb.html)\n\n\n[CentOS 6.2 で RPS/RFS を使ってネットワークの割り込み処理を複数コアに分散してみた](https://blog.nomadscafe.jp/2012/08/centos-62-rpsrfs.html)\n\n## 姑系記事\n\nアプリケーションのソースや設定をみて思った事などつらつらと\n\n[Plack::Middleware::ReverseProxy でリモートホストを確認する理由](https://blog.nomadscafe.jp/2012/01/plackmiddlewarereverseproxy.html)\n\n[Plack::Middleware::ReverseProxy はIPアドレスを利用する他のミドルウェアより先に指定しましょう！](https://blog.nomadscafe.jp/2012/12/plackmiddlewarereverseproxy-ip.html)\n\n[Plack::Middleware::AccessLog でありがちな罠](https://blog.nomadscafe.jp/2012/01/plackmiddlewareaccesslog.html)\n\n[cron等をつかって外部のAPIに問い合わせる場合は、毎時0分を避けるのが大人のマナー](https://blog.nomadscafe.jp/2012/08/cronapi0.html)\n\n[僕らがmemcachedのキャッシュキーにsha1やmd5のhash値を使うを避ける理由](https://blog.nomadscafe.jp/2012/11/memcachedsha1md5hash.html)\n\n[ウェブオペレーションエンジニアはリリース前のソースコードのココを見ているッ！](https://blog.nomadscafe.jp/2012/12/post-15.html)\n\n## 話してきた話／イベント\n\n[hb qp bp study 新年LT&ビアバッシュ2012に参加してビール飲んでピザ食べてきた](https://blog.nomadscafe.jp/2012/01/hb-qp-bp-study-lt2012.html)\n\n[MySQL Beginners Talk で LT してきました](https://blog.nomadscafe.jp/2012/05/mysql-beginners-talk-lt.html)\n\n[Monitoring Casual Talk #1 に参加してきた! #monitoringcasual](https://blog.nomadscafe.jp/2012/06/monitoring-casual-talk-1-monitoringcasual.html)\n\n[YAPC::Asia 2012 で発表してきました！日本よ、これが #yapcasia だッ！！](https://blog.nomadscafe.jp/2012/10/yapcasia-2012-yapcasia.html)\n\nこの発表の紹介したmy.cnfの公開がこちら\n\n[MySQLの設定ファイル my.cnf をgithubにて公開しました & チューニングポイントの紹介](https://blog.nomadscafe.jp/2012/10/mysql-mycnf-github.html)\n\n[isucon2 を開催しました。あるいは、優勝組の5倍のスコアを出す方法](https://blog.nomadscafe.jp/2012/11/isucon2-5.html)\n\nまさか2回目があるとは思ってなかったisucon。吐いて寝てたアレは後日急性胃腸炎だと診断されました\n\n## 2013年は\n\n2012年はオペレーション・エンジニアという言葉がだいぶ認知されたように思えます。[おぺかじ](http://atnd.org/event/operationcasual)もその一つでしょうか。\n\nただ残念に思っているのが、DevOps界隈などでオペレーションの自動化やそのツール・派手な可視化サービスが中心に紹介されて、サービスの可用性や性能、スケーラビリティを高めるソフトウェアの工夫にはなかなか目が向かないことです。大規模ならやっていて当然なんて言ってしまう人も現れる始末です。\n\nなので、来年はオペレーション・エンジニアの業務の目的として「Site Reliability」という言葉を使って行きたいと思っている次第でございます。\n\nなお、4月末には二人目の子供が生まれる予定でございます。お兄ちゃんとなる長男と生まれてくる子供の成長を今から楽しみにしています\n\n