重複排除（デデュプリケーション、デデュープ）

重複排除とは、バックアップの際に対象データを解析し、重複データを自動的に検出して排除する技術です。英語ではDe-duplicationと表記され、「デデュプリケーション」「デデュープ」などと表現されることもあります。
大容量のデータをいかにして保管しておくか。これは多くの企業が抱える課題です。データの重複をなくすことで、バックアップする際のデータ転送量や格納容量を大幅に削減できます。

必要となった背景

昨今の加速的なビジネスデータの増大により、ストレージにかかるコストも増加してきています。このコスト増加を抑える手段である技術開発が必要とされたのです。
業務のシステム化や内部統制により、幅広いビジネスデータがデジタル化され、ストレージに保存されるようになってきました。さらに、大容量の静止画や動画もデジタル化・保存が増大を促しています。これらデータの増加に併せて、ストレージを買い足していっては、IT投資予算を圧迫してしまいます。また、蓄積されるデータに重複が多いのも事実です。ドキュメントを世代管理している場合、ほとんどが重複データとなります。例えば、社内メールでドキュメント・ファイルを添付して複数の宛先に送信した場合、宛先の数だけ重複したデータが生成されることになります。グループ内で同じドキュメントを、それぞれに保存している場合も少なくありません。
このように、重複データを排除し、ストレージのデータ容量を削減、コスト増加を抑えることができる技術が、重複排除なのです。

重複排除の仕組み

重複排除の3つの方式

展望

重複排除はまだ導入期の技術です。しかし、その機能はバックアップやディザスタリカバリー、アーカイブなど用途を拡げています。どこで機能を適用するのが適切か、導入する前に検討する必要がありますが、今後、ストレージを買い足すことなく、効率的にバックアップする技術として、利用企業が確実に増加していくと予想されます。

富士通は重複排除に対応した製品、オールフラッシュストレージ「ETERNUS AX series」「ETERNUS AF series」「ETERNUS NR1000A series」、 ハイブリッドストレージ「ETERNUS HX series」「ETERNUS DX series」「ETERNUS NR1000F series」、そして重複排除技術搭載ストレージの「ETERNUS CS800 デデュープアプライアンス」を提供しています。

更新日：2021年7月6日
掲載日：2012年4月24日