文献

J-GLOBAL ID：201102294958665451   整理番号：11A0759933

MPIを用いた分散処理型データ収集システムの開発および性能評価

著者 (3件)： 村田和英 (茨城工高専) ,  高橋舟平 ,  安西則晃
資料名： 茨城工業高等専門学校研究い報  (Research Reports of Ibaraki Technical College)
号： 46  ページ： 63-66  発行年： 2011年03月 
JST資料番号： G0059B  ISSN： 0286-3391  資料種別： 逐次刊行物 (A)
記事区分： 原著論文  発行国： 日本 (JPN)  言語： 日本語 (JA)

抄録/ポイント： 本論文では,個人や企業における小規模ないし中規模の検索システムへの需要の高まりを受け,パーソナルコンピュータ(PC)を計算媒体として並列分散処理によってWWWから多くの情報を高速に収集するシステムを検討した。本システムはHTTP(Hypertext Transfer Protocol)サーバとDatabaseサーバを同マシンで稼働させ,クライアントからの要求をMPI(Message Passing Interface)ホストマシンに送り,WWWから必要なデータを取得するとDatabaseサーバにデータをアップロードする。データベースへのアクセス競合を避けるために集中制御を採用してホストとノードを区別し,計算資源を有効活用するために動的負荷分散を採用した。実際にQUICKのウェブサーバ上にある株式に関するデータから検索ワード100件にヒットした分のデータを取得し,データベースを構築する実験を行ってPCを1~10台,1台あたりのプロセス数1~5とした場合の処理時間を計測した。その結果,総プロセス数50のときに約8.5倍の処理時間となり,最高で9.5倍の台数効果が得られたがプロセス数15以上ではほとんど差がなく,アイドル時間は5秒前後で比較的安定していた。

シソーラス用語： *データ収集 ,  性能評価 ,  システムインタフェイス ,  *並列処理 ,  分散処理 ,  *Web【情報システム】 ,  クライアントサーバシステム ,  データベース ,  集中制御 ,  計算機システム開発
準シソーラス用語： MPI ,  並列分散処理

分類 (2件)： その他の情報処理  (JE15050M) ,  ディジタル計算機方式一般  (JC02010O)

タイトルに関連する用語 (5件)： MPI ,  分散処理 ,  データ収集システム ,  開発 ,  性能評価