アンケートご協力のお願いgihyo.jpでは,2010年度に向けて豪華プレゼントが当たる読者属性アンケートを実施しております。ご協力ください。

gihyo.jp » DEVELOPER STAGE » 特集 » 分散Key/Valueストア,Kaiを使ってみよう! » 第5回 gooホームにおけるKaiの運用例 ─監視や統計情報の活用

分散Key/Valueストア,Kaiを使ってみよう!

第5回 gooホームにおけるKaiの運用例 ─監視や統計情報の活用

いよいよ今回が最終回です。これまではKaiの動作原理やインストールの説明でしたが,今回は実際の運用に役立つポイントなどを説明します。

Kaiの利用事例紹介

まずは,実際にKaiを利用しているサービスをご紹介したいと思います。その後で,運用に当たってのノウハウをご紹介していきます。

筆者が所属しているgooではgooホームというSNSサービスを提供しています。OpenSocialにいち早く対応するなど,積極的に新しい技術を取り入れています。プロフィールやソーシャルグラフなどの主要なデータはMySQLで管理していますが,アクティビティと呼んでいるユーザの更新情報をKaiに格納しています。

Kaiの構成は至ってシンプルで,CentOS 5.1で動作するノードが3台あるクラスタです。このクラスターに約150万件のデータと約3Gバイトのデータを格納しています。ストレージにはdetsを使用しています。ロードバランサーと組み合わせて,アプリケーションからは単一のノードにしか見えないようになっています。バランシングは単純なラウンドロビンで十分です。

MySQLなどのRDBにmemcachedを組み合わせて,SQLの発行回数を劇的に抑える手法はかなり普及したと思いますが,Kaiも同様にmemcachedと組み合わせて利用しています。detsを利用していますのでこのようになっていますが,etsを利用した場合はmemcachedは不要かもしれません。もちろん事前に十分なサイジングが必要です。

動作状況をレポートするstatsコマンド

それでは運用に用いるKaiの機能をみていきましょう。memcachedではstatsコマンドを送るとオブジェクトの数などが取得できましたが,Kaiでも同様にstatsコマンドが使えます。statsコマンドで得られる情報は以下の通りです。

uptimekaiが起動してからの通算秒
time現在のUNIXタイム
versionKaiのバージョン番号
bytesノードが格納しているデータのサイズ。単位はbyte
curr_itemsノードが格納しているデータの個数
curr_connectionsノードに接続中のクライアントの数
cmd_getノードがgetコマンドを実行し,成功した回数
cmd_setノードがsetコマンドを実行し,成功した回数
bytes_readノードがクライアントにデータを送信したバイト数
bytes_writeノードがクライアントからデータを受信したバイト数
kai_nodeノードを識別するためのソケットアドレス
kai_quorum複製数と読み書き数(N,R,Wのこと)
kai_number_of_bucketsconsistent hashing のバケット数
kai_number_of_virtual_nodesノードにおけるconsistent hashingの仮想ノード数
kai_storeローカルストレージの種類。etsまたはdetsになる
kai_curr_nodesノードが認識しているクラスターのノードリスト
kai_unreconciled_get値が重複してしまったデータの数
erlang_procsErlang プロセス数
erlang_versionErlang バージョン

Kaiにtelnetで接続してstatsコマンドを送っても値を確認できますが,ここではPHPのmemcached実装を使ってみましょう。リスト1のような簡単なPHPスクリプトを実行すると以下のような結果が得られます。

リスト1 kai_stats.php

<?php

$host = "localhost";
$port = 14013;

$memcache = new Memcache;
$memcache->connect($host, $port) or die ("Could not connect");
$status = $memcache->getStats();
print_r($status);

?>

リスト1の実行結果

$ php kai_stats.php
Array
(
    [uptime] => 1077608
    [time] => 1246117054
    [version] => 0.3.0
    [bytes] => 2116619959
    [curr_items] => 1039170
    [cmd_get] => 1977438
    [cmd_set] => 100357
    [bytes_read] => 3350521698
    [bytes_write] => 257731220
    [kai_node] => 172.20.200.40:14012
    [kai_quorum] => 3,2,2
    [kai_number_of_buckets] => 1024
    [kai_number_of_virtual_nodes] => 128
    [kai_store] => dets
    [kai_curr_nodes] => 172.20.200.40:14012 172.20.200.41:14012 172.20.200.42:14012
    [erlang_procs] => 2699
    [erlang_version] => 5.6.5
)

このように,memcachedと全く同様にKaiのstatsを取得することができます。これにより多くのプログラミング言語のmemcached実装を用いてKaiのstatsの値が取得できると思います。正しい現状把握が安定運用の第一歩ですのでこれらの情報を活用してチューニングや設備増強の判断などに役立ててみてください。

statsをグラフにする

statsについてみてきましたが,この情報を便利かつ簡単に把握できるようにしなければシステム運用とは言えません。多くの現場ではMRTGやrrdtoolを使ってグラフにすることが行われていると思います。この分野で著名なオープンソースのソフトウェアにcactiがあります。Kaiのversion 0.4.0からcactiのプラグインが同梱されています。格納場所はcontrib/cactiです。具体的なインストール方法はプラグイン本体にドキュメントがありますのでそちらを参考にしてください。

このプラグインが描画の対象としている項目はbytes,curr_items,cmd_get,cmd_set,bytes_read,bytes_writeになります。実際にこのプラグインを使って作成したグラフを紹介します。

図1 コマンド実行数のグラフ

図1 コマンド実行数のグラフ

著者プロフィール

橋本智哉(はしもとともや)

NTTレゾナント株式会社所属。金融系システム構築に参画ののち,gooの担当に。2005年ごろgooブログのシステム構築・運用を通じてmemcachedを導入しKey/Valueの世界に触れる。現在はSNSであるgooホームの担当。

コメント

コメントの記入

パスサポ

多数の情報処理技術者試験対策書籍の発行実績を誇る技術評論社がお届けする,資格試験合格サイト「めざせ! 情報処理試験 パスサポ」が開設されました。

ピックアップ

サクセスストーリーに続く,快適サーバー運用管理のヒント!

データの増大,煩雑な管理,システムダウン,セキュリティなど,迫りくる課題からシステム管理者の負担を軽くするポイントを解説します。

gihyo.jp インフラエンジニア情報局

ネットワークやITにかかわるあらゆる業種で必要とされるインフラエンジニアに向けた技術情報や心構え,その魅力について多角的に紹介。

テストエンジニア ステーション

いま,ITに関わるあらゆる開発業務で注目されつつあるテスト系エンジニアをターゲットにしたコンテンツサイトを展開します。

一行クイックアンケート

gihyo.jpで取り上げてほしいネタは?

※検索はページ右上の検索ボックスをご利用ください。

その他の連載

読むウェブ ~本とインタラクション

ディスプレイで読む活字とそのインタラクション(interaction:相互作用)について,最新Webを紹介しながら読み解いていく。

いま,見ておきたいウェブサイト

この連載では,国内外の最新のウェブサイトを隔週更新で取り上げ,これら最新サイトの特徴や素晴らしい部分を,さまざまな角度から解説していきます。

Windows phoneアプリケーション開発入門

Windows Marcketplace for Mobileがサービス開始され,作成したアプリケーションを個人でも世界をターゲットに公開できる環境が整ってきました。これを機にWindows phoneアプリケーションの開発をしてみませんか?

ここは知っておくべき!Windows Server 2008技術TIPS

5年ぶりのサーバOSとなったWindows Server 2008が出荷されて早2年。2009年にはR2が出荷され,再び注目を集めています。発売前から実施したトレーニングによって感じた,インフラエンジニアの方々に知っておいていただきたい機能を中心にご紹介します。

キーパーソンが見るWeb業界

本連載はWeb Site Expert/gihyo.jpとの連動企画です。阿部淳也, 長谷川敦士, 森田雄のお三方による,Web業界をテーマにした座談会です。

きたみりゅうじの聞かせて珍プレー

ソフトウェア開発の現場で体験したトホホな失敗,思わずうなる珍プレーをきたみりゅうじ氏が四コママンガで紹介。みなさんからの投稿もお待ちしてます!

ActionScript 3.0で始めるオブジェクト指向スクリプティング

野中文雄氏が,簡単なスクリプトは書いたことがあるという初級者を対象に,ActionScript 3.0の基本からクラス定義までを解説します。

まだ間に合う「ITパスポート」受験対策 原山先生の短期合格塾

この連載では,4月18日のITパスポート試験の受験に向けて,短い期間で効率良く受験対策を行う方法や,確実に得点するための裏ワザなどを伝授していきます。

連載一覧

gihyo.jp

  • DEVELOPER STAGE
  • ADMINISTRATOR STAGE
  • WEB+DESIGN STAGE
  • LIFESTYLE STAGE
  • SCIENCE STAGE
  • NEWS & REPORT

書籍案内

  • 新刊書籍
  • 書籍ジャンル一覧
  • 書籍シリーズ一覧
  • 新刊ピックアップ
  • ロングセラー
  • 電脳会議

定期刊行物一覧

  • Software Design
  • WEB+DB PRESS
  • Web Site Expert
  • 組込みプレス