文献

J-GLOBAL ID：201202251508816375   整理番号：12A0767697

MapReduce処理系SSSに向けたKVSの改良

KVS improvement for MapReduce System SSS

著者 (3件)： 中田秀基 (産業技術総合研) ,  小川宏高 (産業技術総合研) ,  工藤知宏 (産業技術総合研)
資料名： 電子情報通信学会技術研究報告  (IEICE Technical Report (Institute of Electronics, Information and Communication Engineers))
巻： 112  号： 3(DC2012 1-8)  ページ： 19-24  発行年： 2012年04月03日 
JST資料番号： S0532B  ISSN： 0913-5685  資料種別： 会議録 (C)
記事区分： 原著論文  発行国： 日本 (JPN)  言語： 日本語 (JA)

抄録/ポイント： 広く用いられているHadoopと比較して,より広い範囲に適用可能なMapReduce処理系SSSを開発している。SSSはオープンソースのキーバリューストア(KVS)であるTokyo CabinetとそのネットワークインターフェイスであるTokyo Tyrantをストレージとして用いる。しかし,SSSのアクセスパターンはバルクでの読み出し,書き込み,削除が主で,Tokyo Tyrantが本来想定している細粒度のアクセスとはかけ離れており,Tokyo Tyrantが用意するAPIを利用するだけでは,Tokyo Cabinet/Tokyo Tyrant本来の性能を引き出すことが出来なかった。本稿ではわれわれが行った,Tokyo Cabinetに対する改変について報告する。SSSが行う範囲指定処理をTokyo CabinetおよびTokyo Tyrantに追加し,さらに内部でのロックを最適化した。その結果,Tokyo Cabinetを直接用いるマイクロベンチマークで,読み込み時5倍書き込み時2倍の速度向上を確認した。また,SSS全体としてのマクロベンチマークでも読み込み時3倍,書き込み時で1.3倍の速度向上を確認した。(著者抄録)

シソーラス用語： *MAP【プロトコル】 ,  応用プログラム ,  *ソフトウェア ,  システムインタフェイス ,  粒度 ,  ベンチマーク
準シソーラス用語： *REDUCE ,  *オープンソース ,  ネットワークインタフェイス ,  細粒度

分類 (1件)： 応用プログラミング言語  (JD03052Y)

タイトルに関連する用語 (2件)： MapReduce ,  SSS