センサなどからのストリーミングビッグデータをリアルタイムで処理するRapidMinerのStreamsサービス

RapidMinerが今日(米国時間12/17)発表したStreamsサービスは、データのストリームをリアルタイムで捕捉して処理する。RapidMinerのMichele Chambersの説明によると、このサービスがとくに便利なのは物のインターネット(Internet of Things, IoT)の分野におけるデータの捕捉と処理や、工業分野におけるセンサデータの取得とそれに対する瞬時の対応だ。

Streamsサービスはユーザのソースからデータを取り込み、それをもとにデータのブレンディングや、ストリーミングデータの分析、データからのモデル作成、などの処理をすべて、Apache Stormのクラスタで行う。ユーザがコードを書く必要はない。ユーザはRapidMinerが開発したバックエンドに対する指示をGUIのフロントエンドから行うだけである。データの処理は、最大遅延5秒という準リアルタイムで行われる。

このプロダクトは、これまでの1年間未発表のまま温めてきたが、その理由の一部は、Apache Stormが商用製品に使えるほどの安定に達していなかったからだ。そのテスト期間にRapidMinerは、某メディア企業のセットトップボックスから得られる視聴者のビヘイビアデータの取得と分析を行った。その結果に基づいて同社は、個々の視聴者に適切なリコメンデーションを送り、また広告ネットワークに対してはターゲティング広告のための情報を提供した。

同じくこのベータ時期に、コンクリート企業がその生コン製造機械やコンクリート打ち込み機械などからのセンサデータを捕捉して分析した。そういうコンクリート関連の機械装置は酷使によってすぐに壊れるので、最大能力の75%ぐらいでしか稼働できなかった。しかしStreamsのリアルタイムデータ分析により、機械の損傷に導く二大要素が振動と湿気であることが分かった。この二つの要素を適切にコントロールすることにより、安定稼働率が95%に上がった。

RapidMinerがStreamsでねらっているのは、こういうタイプのユーザニーズだ。Chambersによると、Storm以外のもうひとつのオープンソースソフトウェアの成熟を待って、来年の第一四半期にはStreamsのアップデートを行う。

さらにChambersによると、このプロダクトは同社のこれまでの製品系列との相性も良く、顧客に提供するビッグデータ処理オプションがまた一つ増えた、という形になっている。

また、同社は近く、データ視覚化のQlikや検索のApache Solr、WebスクレイピングのMozendaなど用のコネクタもリリースする。

[原文へ]
(翻訳:iwatani(a.k.a. hiwa))