データ管理システム及び方法

摘要

例示的なデータ管理システム及び方法が記述される。一実装においては、方法は、受信されたクエリに基づいて、処理すべき複数のファイルを同定し、複数のファイルの処理に利用可能な複数の実行ノードを同定する。方法は、最初に、複数のファイルの一部をそれぞれ含む複数のスキャンセットを生成し、ファイル割り当てモデルに基づいて、実行ノードのうちの一つを各スキャンセットに割り当てる。複数のスキャンセットは、複数の実行ノードによって処理される。特定の実行ノードが、その割り当てられたスキャンセット内のすべてのファイルを処理し終わっていることを、方法が判定する場合、処理されていないファイルは、他の実行ノードから特定の実行ノードへ再割り当てされる。【選択図】図８