文献

J-GLOBAL ID：201702226185783805   整理番号：17A1752607

分散ストリームデータのロードとクエリ技術の最適化【JST・京大機械翻訳】

Optimization on Distributed Stream Data Loading and Querying

著者 (3件)： Yi Jia (中国科学院信息工程研究所 北京100093) ,  Xue Chen (国家計算机网絡与信息安全管理中心 北京100029) ,  Wang Shupeng (中国科学院信息工程研究所 北京100093)
資料名： Jisuanji Kexue  (Jisuanji Kexue)
巻： 44  号： 5  ページ： 172-177  発行年： 2017年 
JST資料番号： C2530A  ISSN： 1002-137X  資料種別： 逐次刊行物 (A)
記事区分： 原著論文  発行国： 中国 (CHN)  言語： 中国語 (ZH)

抄録/ポイント： 分散ストリーム検索は,データストリームに基づく実時間質問計算法であり,近年,広く注目され,急速に開発されている。本論文は,分散型フロー処理フレームワークのリアルタイム関係クエリに関する研究成果をまとめた。分散型データ負荷,分散型フロー計算フレームワーク,分散型フロー質問に関する製品を分析し,比較した。Spark StreamingとApache Kafkaに基づいて構築された分散型ストリーム検索モデルを提案し、複数のファイルソースを合併する形式で、ファイルシステムを設計し、データの高速ロードを実現した。Apache Flumeに基づく負荷技術と比較して1倍以上のスピードアップが得られた。SparkStreamingに基づいて,Spark SQLに基づく分散型ストリーム検索インタフェイスを実現し,SQLコードを解析する方法を提案し,分散質問を実現した。試験結果は,質問文が複雑な場合に,自己符号化解析SQLの質問効率が明らかな優位性を持つことを示した。Data from Wanfang. Translated by JST【JST・京大機械翻訳】

シソーラス用語： ファイルシステム ,  符号化 ,  計算 ,  インタフェイス ,  *最適化 ,  高速度
準シソーラス用語： Apacheモジュール ,  実時間 ,  データストリーム ,  *クエリー , 【Automatic Indexing@JST】

著者キーワード (5件)： Big data ,  Stream processing system ,  Distributed stream query ,  Query optimization ,  Kafka fast loading

分類 (2件)： データベースシステム  (JD03030U) ,  オペレーティングシステム  (JD03020J)

タイトルに関連する用語 (4件)： ストリームデータ ,  ロード ,  クエリ ,  最適化