摘要 |
連続イベント処理とマップリデュース・アルゴリズミックツールとの組合せを使用して、大量のデータを比較的迅速に処理し、および/またはクエリすることができる。連続イベントプロセッサは、(a)現在実行中のマップリデュース・ジョブが開始されてから受信されたイベントからのCQLクエリ結果を、(b)最も最近完了したマップリデュース・ジョブによって生成された最も最近のクエリ結果とマージすることにより、リアルタイムの結果を連続的に生成できる。現在実行中のマップリデュース・ジョブが完了すると、そのクエリ結果は格納されて連続イベントプロセッサにアクセス可能となってもよく、最後のマップリデュース・ジョブの実行以降にサイズが大きくなったイベントデータに関して、新規のマップリデュース・ジョブが開始されてもよい。マップリデュース・アルゴリズミックツールは、大量のデータを分析して処理するための便利な機構を提供する。 |