Deduplikácia údajov je populárna a populárna technológia úložiska, ktorá optimalizuje kapacitu úložiska. Eliminuje nadbytočné údaje odstránením duplicitných údajov zo súboru údajov, pričom zostane iba jedna kópia. Ako je znázornené na obrázku nižšie. Táto technológia môže výrazne znížiť potrebu fyzického úložiska priestor na uspokojenie rastúceho dopytu po ukladaní dát. Technológia Dedupe môže priniesť mnoho praktických výhod, najmä vrátane nasledujúcich aspektov:
| (1) | Spĺňajte požiadavky ROI (návratnosť investícií)/TCO (celkové náklady na vlastníctvo); |
| (2) | Rýchly rast údajov možno efektívne kontrolovať; |
| (3) | Zvýšte efektívny úložný priestor a zlepšite efektívnosť skladovania; |
| (4) | Ušetrite celkové náklady na skladovanie a náklady na správu; |
| (5) | Uložte šírku pásma prenosu dát; |
| (6) | Ušetrite náklady na prevádzku a údržbu, ako je priestor, napájanie a chladenie. |
Technológia dedupe je široko používaná v systémoch zálohovania a archivácie údajov, pretože po viacnásobnom zálohovaní údajov existuje veľa duplicitných údajov, čo je pre túto technológiu veľmi vhodné. V skutočnosti možno technológiu dedupe použiť v mnohých situáciách, vrátane online údajov, blízke dáta a offline systémy na ukladanie dát.Dá sa implementovať do súborových systémov, správcov zväzkov, NAS a sans.Dedupe možno použiť aj na obnovu po havárii dát, prenos dát a synchronizáciu, pretože technológiu kompresie dát možno použiť na balenie dát. Technológia Dedupe môže pomôcť mnohým aplikáciám znížiť ukladanie dát, šetrenie šírky pásma siete, zlepšenie efektivity ukladania, skrátenie doby zálohovania a úspora nákladov.
Dedupe má dve hlavné dimenzie: pomery deduplikácie a výkon. Výkon deduplikácie závisí od konkrétnej implementačnej technológie, zatiaľ čo rýchlosť deduplikácie je určená charakteristikami samotných údajov a vzormi aplikácií, ako je uvedené v tabuľke nižšie. Dodávatelia úložiska v súčasnosti uvádzajú rôzne miery deduplikácie od 20:1 do 500:1.
| Vysoká miera deduplikácie | Nízka miera deduplikácie |
| Údaje vytvorené používateľom | Údaje z prírodného sveta |
| Nízka miera zmeny údajov | Vysoká miera zmeny údajov |
| Referenčné údaje, neaktívne údaje | Aktívne údaje |
| Aplikácia s nízkou rýchlosťou zmeny dát | Aplikácia s vysokou rýchlosťou zmeny dát |
| Úplné zálohovanie dát | Prírastkové zálohovanie dát |
| Dlhodobé uchovávanie údajov | Krátkodobé ukladanie dát |
| Široká škála dátových aplikácií | Malý rozsah dátových aplikácií |
| Priebežné obchodné spracovanie údajov | Všeobecné obchodné spracovanie údajov |
| Malá segmentácia údajov | Segmentácia veľkých dát |
| Predĺžte segmentáciu údajov | Segmentácia údajov s pevnou dĺžkou |
| Vnímaný obsah údajov | Obsah údajov neznámy |
| Deduplikácia časových údajov | Deduplikácia priestorových údajov |
Dedupe Implementation Points
Pri vývoji alebo aplikácii technológie Dedupe by sa mali zvážiť rôzne faktory, pretože tieto faktory priamo ovplyvňujú jej výkon a účinnosť.
| (1) | Čo | Aké údaje sú odvážené? |
| (2) | Kedy | Kedy sa hmotnosť odstráni? |
| (3) | Kde | Kde je eliminácia hmotnosti? |
| (4) | Ako | Ako znížiť hmotnosť? |
Technológia dedupe Key
Proces deduplikácie úložného systému je vo všeobecnosti takýto: v prvom rade sa dátový súbor rozdelí na množinu dát, pre každý blok dát sa vypočíta odtlačok prsta a potom na základe kľúčových slov vyhľadávania hash odtlačkov prstov, zhoda označuje dáta pre duplikát. dátové bloky, ukladá len číslo indexu dátového bloku, inak to znamená, že dátový blok je jediným novým, ukladacím blokom dát a vytváraním relevantných meta informácií. Fyzický súbor v úložnom systéme teda zodpovedá logickej reprezentácii súbor metadát FP. Pri čítaní súboru najskôr prečítajte logický súbor, potom podľa postupnosti FP vyberte príslušný dátový blok z úložného systému, obnovte kópiu fyzického súboru. Z vyššie uvedeného procesu je možné vidieť že medzi kľúčové technológie Dedupe patrí najmä segmentácia dátových blokov súborov, výpočet odtlačkov dátových blokov a načítanie dátových blokov.
(1) Segmentácia bloku údajov súboru
(2) Výpočet odtlačkov prstov bloku údajov
(3) Načítanie bloku údajov
Ak chcete nájsť tieto odporúčané modely na spustenie deduplikácie sieťových paketov:
Sprostredkovateľ sieťových paketov Mylinking™ (NPB) ML-NPB-640048*10GE SFP+ plus 4*40GE/100GE QSFP28, Max 880Gbps
Sprostredkovateľ sieťových paketov Mylinking™ (NPB) ML-NPB-56606*40GE/100GE QSFP28 plus 48*10GE/25GE SFP28, max 1,8 Tbps
Sprostredkovateľ sieťových paketov Mylinking™ (NPB) ML-NPB-506048*10GE SFP+ plus 2*40GE QSFP, max 560Gbps
Sprostredkovateľ sieťových paketov Mylinking™ (NPB) ML-NPB-486048*10GE SFP+, Max 480Gbps, Function Plus
Sprostredkovateľ sieťových paketov Mylinking™ (NPB) ML-NPB-481048*10GE SFP+, max 480Gbps
Sprostredkovateľ sieťových paketov Mylinking™ (NPB) ML-NPB-2410P24*10GE SFP+, Max 240Gbps, Funkcia DPI
Sprostredkovateľ sieťových paketov Mylinking™ (NPB) ML-NPB-6400
48*10GE SFP+ plus 4*40GE/100GE QSFP28, Max 880Gbps
Čas odoslania: 18. októbra 2022
