文献

J-GLOBAL ID：201902249972102719   整理番号：19A0897786

時間軸検索に最適化したスケールアウト可能な高速ログ検索エンジンの実現と評価

Design and Evaluation of Scalable Syslog Search Engine Optimized for Time Dimensional Search Operation

著者 (12件)： 阿部博 (レピダム) ,  阿部博 (ココン) ,  阿部博 (北陸先端科学技術大学院大) ,  阿部博 (情報通信研究機構) ,  島慶一 (IIJイノベーションインスティテュート) ,  宮本大輔 (奈良先端科学技術大学院大) ,  関谷勇司 (東大) ,  石原知洋 (東大) ,  岡田和也 (東大) ,  中村遼 (東大) ,  松浦知史 (東京工大) ,  篠田陽一 (北陸先端科学技術大学院大)
資料名： 情報処理学会論文誌ジャーナル(Web)
巻： 60  号： 3  ページ： 728-737 (WEB ONLY)  発行年： 2019年03月15日 
JST資料番号： U0452A  ISSN： 1882-7764  資料種別： 逐次刊行物 (A)
記事区分： 原著論文  発行国： 日本 (JPN)  言語： 日本語 (JA)

抄録/ポイント： ネットワークのトラブルシューティングやセキュリティインシデントに対応するため,ネットワーク管理者はサーバやネットワーク,セキュリティ機器から出力されるログを蓄積しておき,トラブルの原因を特定するためにその内容を調査することがある.大規模なネットワークでは,出力されるログの量も多く蓄積・検索システムの規模も巨大化する.著者らは,大量に出力される機器のログを後のトラブル解決などで重要となる時間軸を考慮した手法で蓄積し,高速に検索する先行技術としてHayabusaを実装した.本研究では,Hayabusaの検索性能をスケールアウトさせるためのシンプルな分散システムを提案し,その性能を評価した.評価の結果,提案手法は10台かつ複数Workerでの分散環境にスケールアウトした状態でスタンドアロン環境でのHayabusaより約36倍高速に動作した.これは144億レコードのsyslogメッセージを約6秒で全文検索可能な速度に相当し,実用上十分な速度といえる.(著者抄録)

シソーラス用語： *検索エンジン ,  情報検索システム ,  *宇宙探査機 ,  *科学衛星 ,  *計算機システム ,  *フルテキストサーチ ,  *分散処理 ,  *計算機アーキテクチャ ,  データ ,  *飛翔体
準シソーラス用語： *高速ログ検索エンジン ,  *はやぶさ【科学衛星】 ,  *分散システム ,  *全文検索 ,  大規模データ

分類 (3件)： 検索技術  (AC06020S) ,  宇宙飛行体  (QK08000Y) ,  ディジタル計算機方式一般  (JC02010O)

引用文献 (22件)：

• Amazon Web Service, available from https://aws.amazon.com/.
• Apache Hadoop, available from http://hadoop.apache.org/.
• Elasticsearch, available from https://www.elastic.co/ products/elasticsearch.
• Splunk, available from https://www.splunk.com/.
• SQLite, available from https://www.sqlite.org/.

タイトルに関連する用語 (7件)： 時間軸 ,  検索 ,  最適化 ,  スケールアウト ,  ログ ,  検索エンジン ,  評価