文献

J-GLOBAL ID：201702250767270007   整理番号：17A0239017

スパークストリーミングのためのFPGAを用いた低遅延ネットワーク処理【Powered by NICT】

An FPGA-based low-latency network processing for spark streaming

著者 (3件)： Nakamura Kohei (Dept. of ICS, Keio University, 3-14-1 Hiyoshi, Kohoku, Yokohama, Japan 223-8522) ,  Hayashi Ami (Dept. of ICS, Keio University, 3-14-1 Hiyoshi, Kohoku, Yokohama, Japan 223-8522) ,  Matsutani Hiroki (Dept. of ICS, Keio University, 3-14-1 Hiyoshi, Kohoku, Yokohama, Japan 223-8522)
資料名： IEEE Conference Proceedings  (IEEE Conference Proceedings)
巻： 2016  号： Big Data  ページ： 2410-2415  発行年： 2016年 
JST資料番号： W2441A  資料種別： 会議録 (C)
記事区分： 原著論文  発行国： アメリカ合衆国 (USA)  言語： 英語 (EN)

抄録/ポイント： 低遅延ストリームデータ処理はオンラインデータ解析への応用のための重要なイネイブラーである,センサとネットワークサービスから発生した連続ストリームデータからの異常条件と変化点を検出する。既存ストリーム処理フレームワークは微小バッチとone-at-a-time処理法に分類される。Apache火花ストリーミングは微小バッチ方法論,データ解析は短時間の間に到着した一連のデータのための繰り返し実施した,マイクロバッチを採用している。,機械学習とグラフ処理など,火花によって提供されたデータ解析ライブラリの豊富な集合をマイクロバッチに適用することができる。しかし,微小バッチ処理法の欠点は,異常条件と変化点を検出するための高い遅延がある。は,データがマイクロバッチ(例えば,1秒の長さ)に蓄積し,データ解析はマイクロバッチに対して実行されるためである。本論文では,スパークストリーミング枠組みとの連携におけるFPGAベース10GビットEthernetネットワークインタフェースカード(FPGA NIC)上の1-at-a-time法解析機能をオフロードすることを提案し,有意に処理潜時を減少させ,処理スループットを向上させるためである。FPGA NICを持つ単語数と変化点検出応用火花ストリーミングを実装し,一時に一つ方法論解析論理が実施されている。実験の結果,単語数スループットは22xによって改善され,変化点検出潜時は元の火花ストリーミングと比較して94.12%減少したことを示した。我々のアプローチは,超低遅延one-at-a-time法論理を用いた既存の微小バッチ法データ解析フレームワークを補完することができる。Copyright 2017 The Institute of Electrical and Electronics Engineers, Inc. All Rights reserved. Translated from English into Japanese by JST【Powered by NICT】

シソーラス用語： データ解析 ,  スループット ,  *ネットワーク ,  機械学習 ,  単語 ,  ロット ,  バッチ処理 ,  *ストリーミング ,  Ethernet ,  *FPGA
準シソーラス用語： 変化点検出 ,  ストリーム処理 ,  ネットワークサービス ,  オンライン ,  *低遅延 , 【Automatic Indexing@JST】

分類 (1件)： 人工知能  (JE08000Z)

タイトルに関連する用語 (2件)： FPGA ,  低遅延