Andmete dubleerimise eemaldamine on populaarne ja populaarne salvestustehnoloogia, mis optimeerib salvestusmahtu. See kõrvaldab üleliigsed andmed, eemaldades andmestikust duplikaatandmed, jättes alles vaid ühe koopia. Nagu alloleval joonisel näidatud. See tehnoloogia aitab oluliselt vähendada füüsilise salvestusruumi vajadust, et rahuldada kasvavat andmesalvestusvajadust. Dubleerimise eemaldamise tehnoloogia võib tuua palju praktilisi eeliseid, sealhulgas peamiselt järgmisi aspekte:
| (1) | Vastake investeeringutasuvuse (ROI) / omamise kogukulu (TCO) nõuetele; |
| (2) | Andmete kiiret kasvu saab tõhusalt kontrollida; |
| (3) | Suurendage efektiivset salvestusruumi ja parandage ladustamise efektiivsust; |
| (4) | Säästke kokku salvestus- ja halduskulud; |
| (5) | Säästke andmeedastuse võrgu ribalaiust; |
| (6) | Säästke tegevus- ja hoolduskulusid, näiteks ruumi, toiteallika ja jahutuse kulusid. |
Dedupe-tehnoloogiat kasutatakse laialdaselt andmete varundamise ja arhiveerimise süsteemides, kuna pärast mitmekordset andmete varundamist jääb palju duplikaate, mis on selle tehnoloogia jaoks väga sobiv. Tegelikult saab dedupe-tehnoloogiat kasutada paljudes olukordades, sealhulgas võrguandmete, lähivõrgu andmete ja võrguühenduseta andmesalvestussüsteemide puhul. Seda saab rakendada failisüsteemides, köitehaldurites, NAS-ides ja san-ides. Dedupe-tehnoloogiat saab kasutada ka andmete katastroofide taastamiseks, andmete edastamiseks ja sünkroonimiseks, kuna andmete tihendamise tehnoloogiat saab kasutada andmete pakkimiseks. Dedupe-tehnoloogia aitab paljudel rakendustel vähendada andmete salvestamist, säästa võrgu ribalaiust, parandada salvestustõhusust, lühendada varundamise akent ja säästa kulusid.
Deduplikatsioonil on kaks peamist mõõdet: deduplikatsiooni suhtarvud ja jõudlus. Deduplikatsiooni jõudlus sõltub konkreetsest rakendustehnoloogiast, samas kui deduplikatsiooni määra määravad andmete endi omadused ja rakendusmustrid, nagu on näidatud allolevas tabelis. Salvestusteenuste pakkujad teatavad praegu deduplikatsiooni määradeks vahemikus 20:1 kuni 500:1.
| Kõrge deduplikatsioonimäär | Madal deduplikatsioonimäär |
| Kasutaja loodud andmed | Loodusmaailma andmed |
| Andmete madal muutumismäär | Andmete kiire muutumiskiirus |
| Viiteandmed, mitteaktiivsed andmed | Aktiivsed andmed |
| Madala andmevahetuskiirusega rakendus | Suure andmevahetuskiirusega rakendus |
| Täielik andmete varundamine | Järkjärguline andmete varundamine |
| Andmete pikaajaline säilitamine | Andmete lühiajaline salvestamine |
| Lai valik andmerakendusi | Väike valik andmerakendusi |
| Pidev andmeäri töötlemine | Üldine andmeäri töötlemine |
| Väikeste andmete segmenteerimine | Suurandmete segmenteerimine |
| Piklik andmete segmenteerimine | Fikseeritud pikkusega andmete segmenteerimine |
| Tajutav andmesisu | Andmete sisu on teadmata |
| Ajaandmete deduplikatsioon | Ruumiandmete deduplikatsioon |
Deduple'i rakenduspunktid
Dedupe tehnoloogia arendamisel või rakendamisel tuleks arvestada mitmete teguritega, kuna need tegurid mõjutavad otseselt selle toimivust ja tõhusust.
| (1) | Mis | Milliseid andmeid kaalust eemaldatakse? |
| (2) | Millal | Millal kaalust lahti saab? |
| (3) | Kus | Kus on kaalulangus? |
| (4) | Kuidas | Kuidas kaalu vähendada? |
Dedupe võtmetehnoloogia
Salvestussüsteemi deduplikatsiooniprotsess on üldiselt järgmine: esmalt jagatakse andmefail andmekogumiteks, iga andmeploki jaoks arvutatakse sõrmejälg ja seejärel tehakse sõrmejälje räsiotsingu märksõnade põhjal vaste, mis näitab, et duplikaatide andmeplokkide puhul salvestatakse ainult andmeploki indeksinumber, vastasel juhul tähendab see, et andmeplokk on uue andmeploki ainus osa, mis loob asjakohase metateabe. Seega vastab füüsiline fail salvestussüsteemis FP metaandmete komplekti loogilisele esitusele. Faili lugemisel loetakse kõigepealt loogiline fail ja seejärel võetakse FP järjestuse kohaselt salvestussüsteemist vastav andmeplokk ning taastatakse füüsilise faili koopia. Ülaltoodud protsessist on näha, et Dedupe'i põhitehnoloogiad hõlmavad peamiselt failiandmete plokkide segmenteerimist, andmeplokkide sõrmejälgede arvutamist ja andmeplokkide otsimist.
(1) Faili andmeplokkide segmenteerimine
(2) Andmeploki sõrmejälje arvutamine
(3) Andmeplokkide hankimine
Nende soovituslike mudelite leidmiseks võrgupakettide deduplikatsiooni alustamiseks toimige järgmiselt.
Mylinking™ võrgupaketi vahendaja (NPB) ML-NPB-640048*10GE SFP+ pluss 4*40GE/100GE QSFP28, max 880Gbps
Mylinking™ võrgupaketi vahendaja (NPB) ML-NPB-56606*40GE/100GE QSFP28 pluss 48*10GE/25GE SFP28, max 1.8Tbps
Mylinking™ võrgupaketi vahendaja (NPB) ML-NPB-506048*10GE SFP+ pluss 2*40GE QSFP, max 560Gbps
Mylinking™ võrgupaketi vahendaja (NPB) ML-NPB-486048*10GE SFP+, max 480Gbps, funktsioon Plus
Mylinking™ võrgupaketi vahendaja (NPB) ML-NPB-481048*10GE SFP+, max 480Gbps
Mylinking™ võrgupaketi vahendaja (NPB) ML-NPB-2410P24*10GE SFP+, max 240Gbps, DPI funktsioon
Mylinking™ võrgupaketi vahendaja (NPB) ML-NPB-6400
48*10GE SFP+ pluss 4*40GE/100GE QSFP28, max 880Gbps
Postituse aeg: 18. okt 2022
