Az adatduplikáció-eltávolítás egy népszerű és közkedvelt tárolási technológia, amely optimalizálja a tárolási kapacitást. A duplikált adatok eltávolításával kiküszöböli a redundáns adatokat az adatkészletből, így csak egyetlen másolat marad. Amint az az alábbi ábrán is látható. Ez a technológia jelentősen csökkentheti a fizikai tárhely iránti igényt, hogy kielégítse az adattárolás iránti növekvő igényt. A duplikáció-eltávolítási technológia számos gyakorlati előnnyel járhat, főként a következő szempontokkal:
| (1) | Megfeleljen a befektetés megtérülésének (ROI)/teljes tulajdonlási költségének (TCO) követelményeinek; |
| (2) | Az adatmennyiség gyors növekedése hatékonyan kontrollálható; |
| (3) | Növelje a hatékony tárhelyet és javítsa a tárolási hatékonyságot; |
| (4) | Spórolja meg a teljes tárolási és kezelési költséget; |
| (5) | Spórolja az adatátvitel hálózati sávszélességét; |
| (6) | Spóroljon az üzemeltetési és karbantartási költségeken, például a helyigénye, az áramellátás és a hűtés költségein. |
A Dedupe technológiát széles körben használják adatmentési és archiválási rendszerekben, mivel a többszöri adatmentés után is sok ismétlődő adat marad, ami nagyon alkalmas erre a technológiára. Valójában a deduplikált technológia számos helyzetben használható, beleértve az online adatokat, a near-line adatokat és az offline adattároló rendszereket. Megvalósítható fájlrendszerekben, kötetkezelőkben, NAS-okban és sans-okban. A Dedupe adatkatasztrófa utáni helyreállításhoz, adatátvitelhez és szinkronizáláshoz is használható, mivel adattömörítési technológiaként használható az adatok csomagolására. A Dedupe technológia számos alkalmazás számára segíthet az adattárolás csökkentésében, a hálózati sávszélesség megtakarításában, a tárolási hatékonyság javításában, a biztonsági mentési ablak csökkentésében és a költségek megtakarításában.
A deduplikációnak két fő dimenziója van: a deduplikációs arányok és a teljesítmény. A deduplikáció teljesítménye az adott megvalósítási technológiától függ, míg a deduplikáció mértékét maguknak az adatoknak a jellemzői és az alkalmazásminták határozzák meg, amint az az alábbi táblázatban látható. A tárolószolgáltatók jelenleg 20:1 és 500:1 közötti deduplikációs arányokat jelentenek.
| Magas deduplikációs arány | Alacsony deduplikációs arány |
| A felhasználó által létrehozott adatok | Adatok a természeti világból |
| Alacsony adatváltozási ráta | Magas adatváltozási ráta |
| Referenciaadatok, inaktív adatok | Aktív adatok |
| Alacsony adatváltozási arányú alkalmazás | Nagy adatváltozási sebességű alkalmazás |
| Teljes adatmentés | Inkrementális adatmentés |
| Adatok hosszú távú tárolása | Adatok rövid távú tárolása |
| Széleskörű adatalkalmazások | Kis mennyiségű adatalkalmazás |
| Folyamatos adatfeldolgozás | Általános üzleti adatfeldolgozás |
| Kis adatszegmentálás | Big data szegmentálás |
| Elongated adatszegmentáció | Fix hosszúságú adatszegmentálás |
| Érzékelt adattartalom | Adattartalom ismeretlen |
| Időadatok deduplikációja | Térbeli adatok deduplikációja |
Dedupe implementációs pontok
A Dedupe technológia fejlesztésekor vagy alkalmazásakor számos tényezőt figyelembe kell venni, mivel ezek a tényezők közvetlenül befolyásolják annak teljesítményét és hatékonyságát.
| (1) | Mi | Milyen adatokat súlyoznak ki? |
| (2) | Amikor | Mikor fog megszűnni a súlyfelesleg? |
| (3) | Ahol | Hol van itt a súlycsökkentés? |
| (4) | Hogyan | Hogyan lehet csökkenteni a súlyt? |
Dedupe Key technológia
A tárolórendszerek deduplikációs folyamata általánosságban a következő: először az adatfájlt adathalmazokra osztják, minden adatblokkhoz kiszámítják az ujjlenyomatot, majd az ujjlenyomat-hash keresési kulcsszavak alapján az egyezés jelzi, hogy a duplikált adatblokkok adatai csak az adatblokk indexszámát tárolják, egyébként pedig azt, hogy az adatblokk az új adatblokk egyetlen darabja, és releváns metainformációkat hoznak létre. Így a tárolórendszerben lévő fizikai fájl egy FP metaadatkészlet logikai reprezentációjának felel meg. A fájl olvasásakor először beolvassák a logikai fájlt, majd az FP-sorozat szerint kiveszik a megfelelő adatblokkot a tárolórendszerből, és visszaállítják a fizikai fájl másolatát. A fenti folyamatból látható, hogy a Dedupe fő technológiái közé tartozik a fájladatblokk szegmentálása, az adatblokk ujjlenyomatának kiszámítása és az adatblokk visszakeresése.
(1) Fájl adatblokk szegmentálása
(2) Adatblokk ujjlenyomat-számítás
(3) Adatblokk-lekérés
A hálózati csomagdeduplikáció megkezdéséhez ajánlott modellek megkereséséhez:
Mylinking™ hálózati csomagközvetítő (NPB) ML-NPB-640048*10GE SFP+ plusz 4*40GE/100GE QSFP28, Max. 880Gbps
Mylinking™ hálózati csomagközvetítő (NPB) ML-NPB-56606*40GE/100GE QSFP28 plusz 48*10GE/25GE SFP28, Max. 1.8Tbps
Mylinking™ hálózati csomagközvetítő (NPB) ML-NPB-506048*10GE SFP+ plusz 2*40GE QSFP, Max. 560Gbps
Mylinking™ hálózati csomagközvetítő (NPB) ML-NPB-486048*10GE SFP+, Max. 480 Gbps, Funkció Plusz
Mylinking™ hálózati csomagközvetítő (NPB) ML-NPB-481048*10GE SFP+, Max. 480Gbps
Mylinking™ hálózati csomagközvetítő (NPB) ML-NPB-2410P24*10GE SFP+, Max. 240 Gbps, DPI funkció
Mylinking™ hálózati csomagközvetítő (NPB) ML-NPB-6400
48*10GE SFP+ plusz 4*40GE/100GE QSFP28, Max. 880Gbps
Közzététel ideje: 2022. október 18.
