文献
J-GLOBAL ID:201702265294447617   整理番号:17A1257963

大規模データ解析におけるプログラム組織化のための自律資源管理【Powered by NICT】

Autonomic Resource Management for Program Orchestration in Large-Scale Data Analysis
著者 (3件):
資料名:
巻: 2017  号: IPDPS  ページ: 1088-1097  発行年: 2017年 
JST資料番号: W2441A  資料種別: 会議録 (C)
記事区分: 原著論文  発行国: アメリカ合衆国 (USA)  言語: 英語 (EN)
抄録/ポイント:
抄録/ポイント
文献の概要を数百字程度の日本語でまとめたものです。
部分表示の続きは、JDreamⅢ(有料)でご覧頂けます。
J-GLOBALでは書誌(タイトル、著者名等)登載から半年以上経過後に表示されますが、医療系文献の場合はMyJ-GLOBALでのログインが必要です。
多種多様な分野でますます一般的になってきている大規模データ解析への応用。これらの応用は,分析成分と呼ばれる多くの現在利用可能なプログラムから構成されている。分析成分プロセスの千は多くの計算ノードに組織化される。本論文では,大規模データ解析におけるアプリケーションのスループットを最適化するための新しい自己調整フレームワークを提案した。1つの課題は,分析成分の多様性と計算ノードの性能を考慮に入れた効率的な組織化を開発している。著者らの以前の研究では,著者ら自身のミドルウェア,remote procedure call(RPC)サービスとして各分析成分を包むを導入することにより,ある程度までこのような組織化を達成した。ミドルウェアも起動オーバヘッド,高スループットを達成するための重大な障害を減少するためにプロセスプール化する。アプリケーションのスループットを最大化するために分析成分のプロセスプールの大きさを調整する残りの課題に取り組んでいる。分析成分はターンアラウンド時間とメモリフットプリントの劇的に異なるので,この挑戦的である。各タイプ分析成分のプロセスプールの大きさは,これらの特性を考慮しただけでなく,記憶容量とプロセッサコア数の両方に制約を与えて設定すべきである。本研究では,線形計画法問題としてこの課題を定式化し,それを解くことにより最適プールサイズを得た。著者らの以前の研究と比較して,百の異種のノードで動作するように性能モデルを再定式化により提案フレームワークのスケーラビリティを著しく改善した。も各計算ノード上の計算負荷を管理し,通信オーバヘッドを削減するサービス割当メカニズムを拡張した。実験結果は筆者らのアプローチが千三クラスタの200計算ノード上で実行される分析成分プロセスにスケーラブルであることを示した。さらに,提案アプローチでは,記憶容量を有意に減少させた。Copyright 2017 The Institute of Electrical and Electronics Engineers, Inc. All Rights reserved. Translated from English into Japanese by JST【Powered by NICT】
シソーラス用語:
シソーラス用語/準シソーラス用語
文献のテーマを表すキーワードです。
部分表示の続きはJDreamⅢ(有料)でご覧いただけます。
J-GLOBALでは書誌(タイトル、著者名等)登載から半年以上経過後に表示されますが、医療系文献の場合はMyJ-GLOBALでのログインが必要です。

準シソーラス用語:
シソーラス用語/準シソーラス用語
文献のテーマを表すキーワードです。
部分表示の続きはJDreamⅢ(有料)でご覧いただけます。
J-GLOBALでは書誌(タイトル、著者名等)登載から半年以上経過後に表示されますが、医療系文献の場合はMyJ-GLOBALでのログインが必要です。
, 【Automatic Indexing@JST】
分類 (2件):
分類
JSTが定めた文献の分類名称とコードです
計算機システム開発  ,  計算機網 
タイトルに関連する用語 (5件):
タイトルに関連する用語
J-GLOBALで独自に切り出した文献タイトルの用語をもとにしたキーワードです

前のページに戻る