文献

J-GLOBAL ID：202002292281412795   整理番号：20A1798021

Hadoopにおける小ファイルの性能を改善するサイズ問題【JST・京大機械翻訳】

Size Matters Improving the Performance of Small Files in Hadoop

著者 (4件)： Niazi Salman (KTH - Royal Institute of Technology and Logical Clocks AB) ,  Ronstrom Mikael (Oracle AB) ,  Haridi Seif (KTH - Royal Institute of Technology and Logical Clocks AB) ,  Dowling Jim (KTH - Royal Institute of Technology and Logical Clocks AB)
資料名： ACM Proceedings  (ACM Proceedings)
号： Middleware ’18  ページ： 26-39  発行年： 2018年 
JST資料番号： D0698C  資料種別： 会議録 (C)
記事区分： 原著論文  発行国： アメリカ合衆国 (USA)  言語： 英語 (EN)

抄録/ポイント： Hadoop分散ファイルシステム(HDFS)は大量のデータを処理するために設計され,非常に大きなファイルに優先的に保存される。小さなファイルの管理におけるHDFSの貧弱な性能は,長い間Hadoopコミュニティのベーンであった。HDFSの多くの生産展開において,ファイルの約25%はサイズにおいて16KB未満であり,すべてのファイルシステム操作の42%は,これらの小さなファイルに関して実行した。HDFSにおける小ファイルの性能を効率的に保存し,改善するために,高性能分散データベースに保存されたメモリ内およびオンディスクテーブルを用いた適応タイレッドストレージを設計した。この解は完全に透明であり,HDFSクライアントまたはHadoopプラットフォームを用いたアプリケーションのいかなる変化も必要としない。実験では,書き込みファイルにおいて最大61倍のスループットを観測し,また,この解から実世界の作業負荷は,それぞれ3.15と7.39の因子で,読書と小ファイルの書き込みの待ち時間を縮小する。Please refer to this article’s citation page on the publisher website for specific rights information. Translated from English into Japanese by JST.【JST・京大機械翻訳】

シソーラス用語： 記憶装置 ,  コミュニティ ,  応用プログラム ,  スループット ,  待ち時間 ,  *ファイルシステム ,  分散データベース
準シソーラス用語： *Hadoop ,  Hadoop分散ファイルシステム , 【Automatic Indexing@JST】

分類 (2件)： オペレーティングシステム  (JD03020J) ,  計算機システム開発  (JD02010R)

タイトルに関連する用語 (3件)： Hadoop ,  ファイル ,  サイズ