ビッグ・データの限界は遠くないらしい

米国の IT 関連専門リサーチ会社、ルーフ&ラーパ社の調査によると、デジタル・データを安心して保存できる期間は、わずか 5年でしかないのだそうだ。それ以上の時間が経過するとデータの保存状態にかかわらず、劣化して失われる部分が多くなりがちだというのである。

データを失わないようにするには、時々新しいメディアでバックアップを取り直すことが必要なのだそうだ。例えば、ハードディスクに保存したデータは 5年経つと壊れやすくなるから、5年以内に別の新しいハードディスクにコピーしなければ、いつ壊れてしまうかしれない。

個人で使っている PC などは、大体 5年も経てば新しい PC に買い換えて、データも新しいハードディスクに置き換わるから、あまり大きな問題は起きていないが、これから大変なのは、クラウドである。

クラウドを運営する会社は、大きなデータ・センターに企業や個人からアップロードされたデータをを保存する。なにしろ 「お預かりしているデータ」 なのだから、壊すわけにいかない。何重にもバックアップを取っておくことが求められる。

普段のバックアップは、時々差分を取っていればいいだろうが、それでも長い年月の間には劣化する。だから劣化する前に丸ごとのコピーをどこかに取っておかなければならない。それを 5年ごとにやっていると、そのうちデータ量が加速度的に増えてしまったら、年がら年中データのコピーをしていなければならなくなる。

ルーフ&ラーパ社の試算によると、今の形のシステムが継続すると仮定すると、年がら年中データ・バックアップに追われて、新たなデータの蓄積が間に合わなくなるクルーシャル・ポイント （決定的瞬間） が訪れるのは、それほど遠い未来ではなく、早ければ 5年後、遅くても 10年後なんだそうだ。そうなると、大規模サーバは機能しなくなる。

今でこそ「最も注目されるシステムはクラウド」なんて脚光を浴びているが、遅くとも 10年も経てばシステムがバックアップばっかりし始めて、アップロードも参照もやたらと手間がかかるようになる。下手すると、「バックアップ作業中につき、少々お待ちください」という表示が、一日中出っぱなしになる。

それでは困るからと、バックアップをテキトーにさぼっていると、5年経ったらデータがいつ壊れてもおかしくない状態になる。サクサク動くことを重視するか、信頼性を重視するかで、クラウドなどの大規模サーバの動き方は大きく変わってくる。いずれにしても、近いうちに使いづらいものになるのは確実だ。

これを防ぐには、データを大きなものにせず、細切れにして自宅やオフィスの小さなサーバに保存することが最も効率的なのだそうだ。大規模データ・センターとかクラウドなんていうのものの将来は、語られるほど明るいものではない。今から小規模サーバで自衛しておくに越したことはないようだ。

いずれにしても、データは大きなものにせず、細切れにしておくことが重要ポイントだ。「スケール・メリット」なんてものが語られる時代は、もう終わりかけているのである。最近は「ビッグ・データ」なんてものがもてはやされているが、これは一時の徒花だ。

ビッグ・データは単体のツールでは扱いきれず、それだからこそ、クラウドの集積など、超並列的システムとそれを制御するプログラムが必要だが、その中の一つが「バックアップ作業中につき、少々お待ちください」になってしまうと、全体が動かなくなってしまうおそれがある。

大企業にとっては冬の時代がもうすぐ来る。中小企業、零細企業、個人事業主、万歳である。中央集権が効率悪くなるのは、何も行政の世界だけではないようで、デジタル・データの世界でも地方分権にする方がいいのだ。詳しくは、ルーフ＆ラーパ社のサイトに飛ぶと、一瞬にしてわかる。英語標記だが、信じられないほど楽に読める。