文献

J-GLOBAL ID：201702262703003359   整理番号：17A0133084

Spark MLlibの利用を可能にするSpark SQLの拡張

A Spark SQL Extension to utilize MLlib from SQL

著者 (2件)： 中田秀基 (産業技術総合研) ,  小川宏高 (産業技術総合研)
資料名： 電子情報通信学会技術研究報告  (IEICE Technical Report (Institute of Electronics, Information and Communication Engineers))
巻： 116  号： 340(DE2016 21-31)  ページ： 51-56  発行年： 2016年11月24日 
JST資料番号： S0532B  ISSN： 0913-5685  資料種別： 会議録 (C)
記事区分： 原著論文  発行国： 日本 (JPN)  言語： 日本語 (JA)

抄録/ポイント： 大規模データ処理のデファクトスタンダードであるApache Sparkには,機械学習ライブラリMLlibとSQLインターフェイスが用意されている。しかし,これらを組み合わせて利用する方法は限定的である。われわれは,Spark SQLを拡張してOPERATIONAL JOINと呼ぶ操作を導入し,MLlibによる学習結果をテーブルから参照できるようにすることで,Spark SQLからSpark MLlibを呼び出すことを可能にした。提案手法を既存の方法と比較した結果,速度向上を確認することができた。(著者抄録)

シソーラス用語： *プログラムパッケージ ,  *機械学習 ,  *SQL【ソフトウェア】 ,  性能評価 ,  *データ処理 ,  ライブラリ【計算機】 ,  インタフェイス ,  データ検索 ,  ルックアップテーブル ,  データベース ,  スケーラビリティ【計算機】 ,  テーブルルックアップ
準シソーラス用語： Apache ,  Spark ,  テーブル参照

分類 (1件)： データベースシステム  (JD03030U)

タイトルに関連する用語 (2件)： SQL ,  拡張