文献

J-GLOBAL ID：201702277790380059   整理番号：17A1269883

Stark:動的データセット収集のための最適化インメモリ計算【Powered by NICT】

Stark: Optimizing In-Memory Computing for Dynamic Dataset Collections

著者 (7件)： Li Shen ,  Amin Md Tanvir ,  Ganti Raghu ,  Srivatsa Mudhakar ,  Hu Shanhao ,  Zhao Yiran ,  Abdelzaher Tarek
資料名： IEEE Conference Proceedings  (IEEE Conference Proceedings)
巻： 2017  号： ICDCS  ページ： 103-114  発行年： 2017年 
JST資料番号： W2441A  資料種別： 会議録 (C)
記事区分： 原著論文  発行国： アメリカ合衆国 (USA)  言語： 英語 (EN)

抄録/ポイント： 新たな分散インメモリ計算フレームワーク,Apache火花のような膨大なキャッシュデータを処理し,数秒以内にできる。著しく高い効率がシステムは,タスクのデータのバランスをとり,データの局所性を確実にするために必要である。しかし,動的荷重を受けるとevictedデータセットの収集を操作する応用のためのこれらの要求を満足させるために挑戦的である。動力学は時変データ量と分布はしばしば高価なデータ再配分と移動操作を,高いオーバヘッドと大きな遅延をもたらすにつながる可能性がある。この問題に取り組むために,筆者らは,Stark,動的データセット収集に利用できるメモリ計算を最適化するために特別に設計されたシステムを提案した。Starkが複数のデータセット(例えば,結合及び共役群)変換のためのデータ局所性を強制する不要なデータ複製とシャッフルを回避する。,変動データ量とskeweddata分布に対応するために,Starkは弾性を供給バランス課題実行時間andreduceジョブメイクスパンに分割した。最後に,Stark有界故障回復遅延データチェックポインティング戦略byoptimizingを達成した。50サーバクラスタの評価はStark4xによるジョブメイクスパンを低減し,火花と比較して6Xによるシステムスループットを改善することを示した。Copyright 2017 The Institute of Electrical and Electronics Engineers, Inc. All Rights reserved. Translated from English into Japanese by JST【Powered by NICT】

シソーラス用語： *記憶装置 ,  動荷重 ,  共役 ,  *最適化 ,  故障 ,  再分布 ,  弾性 ,  局所性
準シソーラス用語： 有界 ,  実行時間 ,  データ複製 ,  データ量 ,  Apacheモジュール , 【Automatic Indexing@JST】

分類 (3件)： 数値計算  (JE02000J) ,  図形・画像処理一般  (JE04010I) ,  ディジタル計算機方式一般  (JC02010O)

タイトルに関連する用語 (4件)： データセット ,  収集 ,  最適化 ,  計算