フィックスターズとノーチラス・テクノロジーズ、新しい並列分散フレームワークのOSS 「Asakusa on M3BP」を共同開発　 ― Asakusa Framework(TM)の適用範囲を拡張し、さらなる高速化とTCO削減を実現 ―

2016.04.12 11:00

この企業へ連絡する

　株式会社フィックスターズ(本社：東京都品川区、代表取締役社長：三木聡)と株式会社ノーチラス・テクノロジーズ(本社：東京都品川区、代表取締役社長：神林飛志、以下ノーチラス)は、基幹バッチ処理の運用・開発を並列分散処理基盤で実施するためのフレームワーク「Asakusa on M3BP(※)」と、その実行基盤「M3 for Batch Processing (エムキューブド(R) フォー・バッチ・プロセッシング、以下 M3 for BP ※)」を開発し、オープンソースソフトウェアとして公開しました。Asakusa on M3BPは、スケールアップ型ソリューションだけでなく、並列分散処理によるスケールアウト型ソリューションと比較しても、処理の高速化とTCO削減により数十倍の費用対効果を実現します。

※「Asakusa on M3BP」「M3 for Batch Processing」の「3」は正式には上付き文字です。

　基幹バッチ処理の中には、ホストやメインフレーム、データベースで数時間から数十時間をかけて行われるものがあります。ノーチラスでは、Asakusa Framework(TM)(*1)と分散処理基盤であるHadoop(R)(*2)のMapReduceやSpark(TM)を組み合わせて、このような時間のかかる基幹バッチ処理を数十分レベルにまで短縮することを実現してきました。しかし、MapReduceはTB～PB、Sparkは数百GB～TBの大規模データを対象としており、小規模データ(数GB～数十GB)はその対象となっていません。そのため、この小規模データを伴う基幹バッチ処理にAsakusa Frameworkを適用しても、分散処理に伴うオーバーヘッドが相対的に大きくなってしまい、高速化に限界がありました。

　Asakusa on M3BPは、この数GB～数十GBのデータを取り扱う一般的な基幹バッチ処理の高速化を実現します。実際の業務データを用いてバッチ処理時間を比較したところ、リレーショナルデータベースでは数時間かかっていたものが、Asakusa Frameworkでは、MapReduceとの組み合わせの場合で40分弱、Sparkの場合で4分弱、そしてM3 for BPの場合では2分弱にまで短縮されました。また、M3 for BPは、単一ノード上のマルチコア／マルチプロセッサを利用して並列処理を行うため、MapReduceやSparkのように複数のサーバを必要とせず、環境の構築と運用におけるコストをさらに下げることができます。
　※性能結果の比較については、別紙ホワイトペーパー内性能評価の項をご参照ください。

　Asakusa Frameworkでは、プログラムの可搬性を実現しており、Asakusa Frameworkを利用して開発されたアプリケーションは、MapReduce、Spark、M3 for BPの各処理基盤上で同じプログラムが実行できます。まず導入コストが低く費用対効果の高いAsakusa on M3BPからスタートし、より大規模な処理が必要になるに従って実行基盤をSparkやMapReduceへと移行させるような場合でも、アプリケーションの変更をする必要はありません。

【参照情報】
Asakusa on M3BPはOSSとして公開されています。より詳細な情報は、以下をご参照ください。

Asakusa Framework(TM)サイト： http://www.asakusafw.com/
Asakusa on M3BP： http://www.nautilus-technologies.com/service/asakusa_on_m3bp.html
Asakusa on M3BP テクニカルドキュメント： http://www.asakusafw.com/wp/wp-content/uploads/2016/04/M3forBP_WP_JA_2016Apr12.pdf

(*1)Asakusa Framework(TM)は並列分散処理基盤上で大規模な基幹バッチ処理を行うためのフレームワークです。オープンソースソフトウェアとして公開しています。Asakusa Framework(TM)は、MapReduceやSparkの並列分散処理エンジンに対応しており、今回、M3 for BPが新たに処理エンジンとして加わりました。

(*2)Hadoopは、Apache Software Foundationが開発・公開している、大規模データを効率的に分散処理・管理するためのソフトウェア基盤です。オープンソースソフトウェアとして公開されており、誰でも自由に入手・利用することができます。

※Asakusa Framework(TM)は、株式会社ノーチラス・テクノロジーズの登録商標です。
※Hadoop(R)、Spark(TM)は、Apache Software Foundationの登録商標または商標です。
※エムキューブド(R)は、株式会社フィックスターズの登録商標です。

■株式会社フィックスターズについて
会社名：株式会社フィックスターズ
　　　　 Fixstars Corporation
所在地：東京都品川区大崎1-11-1 ゲートシティ大崎ウエストタワー18階
代表者：代表取締役社長　三木聡
設立　： 2002年8月8日
URL　： http://www.fixstars.com/

■株式会社ノーチラス・テクノロジーズについて
会社名：株式会社ノーチラス・テクノロジーズ
　　　　 Nautilus Technologies, Inc.
所在地：東京都品川区北品川1-19-5 コーストライン品川ビル
代表者：代表取締役社長　神林飛志
設立　： 2011年10月3日
URL　： http://www.nautilus-technologies.com/