Ma'lumotlarni takrorlash - bu saqlash sig'imini optimallashtiradigan mashhur va ommabop saqlash texnologiyasi. U ma'lumotlar to'plamidan takroriy ma'lumotlarni olib tashlash orqali ortiqcha ma'lumotlarni yo'q qiladi va faqat bitta nusxani qoldiradi. Quyidagi rasmda ko'rsatilgandek. Bu texnologiya ma'lumotlarni saqlashga bo'lgan o'sib borayotgan talabni qondirish uchun jismoniy xotira maydoniga bo'lgan ehtiyojni sezilarli darajada kamaytirishi mumkin. Dedupe texnologiyasi ko'plab amaliy foyda keltirishi mumkin, xususan, quyidagi jihatlar:
(1) | ROI (Investitsiya daromadi)/TCO (Mulkning umumiy qiymati) talablariga javob berish; |
(2) | Ma'lumotlarning tez o'sishini samarali nazorat qilish mumkin; |
(3) | Samarali saqlash joyini ko'paytirish va saqlash samaradorligini oshirish; |
(4) | Umumiy saqlash narxini va boshqaruv xarajatlarini tejash; |
(5) | Ma'lumot uzatishning tarmoq o'tkazish qobiliyatini saqlang; |
(6) | Joy, quvvat manbai va sovutish kabi foydalanish va texnik xizmat ko'rsatish xarajatlarini tejang. |
Dedupe texnologiyasi ma'lumotlarni zaxiralash va arxivlash tizimlarida keng qo'llaniladi, chunki ma'lumotlarning bir nechta zahira nusxasidan keyin juda ko'p takroriy ma'lumotlar mavjud bo'lib, bu texnologiya uchun juda mos keladi.Aslida, dedupe texnologiyasi ko'plab holatlarda, jumladan, onlayn ma'lumotlar, yaqin-liniya ma'lumotlari va oflayn ma'lumotlarni saqlash tizimlarida qo'llanilishi mumkin. U fayl tizimlarida, ovoz balandligi boshqaruvchilarida, NASda va sans.Dedupe-dan ma'lumotlar falokatini tiklash, ma'lumotlarni uzatish va sinxronlashtirish uchun ham qo'llanilishi mumkin, chunki ma'lumotlarni siqish texnologiyasi ma'lumotlarni qadoqlash uchun ishlatilishi mumkin. Dedupe texnologiyasi ko'plab ilovalarga ma'lumotlarni saqlashni kamaytirishga, tarmoq o'tkazish qobiliyatini tejashga, saqlash samaradorligini oshirishga, zaxira oynasini kamaytirishga va xarajatlarni tejashga yordam beradi.
Dedupe ikkita asosiy o'lchovga ega: deduplocation nisbati va unumdorligi. Dedupe ishlashi aniq amalga oshirish texnologiyasiga bog'liq bo'lsa, Dedupe tezligi quyidagi jadvalda ko'rsatilganidek, ma'lumotlarning o'zi va dastur naqshlari bilan belgilanadi. Hozirda saqlash sotuvchilari 20:1 dan 500:1 gacha bo'lgan deduplikatsiya stavkalari haqida xabar berishadi.
Deuplikatsiyaning yuqori darajasi | Deuplikatsiyaning past darajasi |
Foydalanuvchi tomonidan yaratilgan ma'lumotlar | Tabiiy dunyodan olingan ma'lumotlar |
Ma'lumotlarning past o'zgarish tezligi | Ma'lumotlarning yuqori o'zgarish tezligi |
Malumot ma'lumotlari, faol bo'lmagan ma'lumotlar | Faol ma'lumotlar |
Ma'lumotlarni o'zgartirish tezligi past bo'lgan ilova | Yuqori ma'lumotlarni o'zgartirish tezligi ilovasi |
Ma'lumotlarning to'liq zaxira nusxasi | Qo'shimcha ma'lumotlarni zaxiralash |
Ma'lumotlarni uzoq muddatli saqlash | Ma'lumotlarni qisqa muddatli saqlash |
Ma'lumotlar ilovalarining keng doirasi | Axborot ilovalarining kichik diapazoni |
Doimiy biznes ma'lumotlarini qayta ishlash | Umumiy ma'lumotlarni biznesni qayta ishlash |
Kichik ma'lumotlarni segmentatsiyasi | Katta ma'lumotlarni segmentatsiyasi |
Ma'lumotlar segmentatsiyasini uzaytirish | Ruxsat etilgan uzunlikdagi ma'lumotlarni segmentatsiyasi |
Qabul qilingan ma'lumotlar tarkibi | Maʼlumotlar tarkibi nomaʼlum |
Vaqt ma'lumotlarini deuplikatsiya qilish | Fazoviy ma'lumotlarning dublikatsiyasi |
Dedupe amalga oshirish nuqtalari
Dedupe texnologiyasini ishlab chiqish yoki qo'llashda turli omillarni hisobga olish kerak, chunki bu omillar uning ishlashi va samaradorligiga bevosita ta'sir qiladi.
(1) | Nima | Qanday ma'lumotlarning vazni o'chiriladi? |
(2) | Qachon | Og'irlik qachon yo'q qilinadi? |
(3) | Qayerda | Og'irlikni yo'qotish qayerda? |
(4) | Qanaqasiga | Og'irlikni qanday kamaytirish mumkin? |
Dedupe kalit texnologiyasi
Umuman olganda, saqlash tizimini deduplikatsiya qilish jarayoni quyidagicha: birinchi navbatda ma'lumotlar fayli ma'lumotlar to'plamiga bo'linadi, barmoq izini hisoblash uchun har bir ma'lumot bloki uchun, so'ngra barmoq izini qidirish kalit so'zlariga asoslanib, moslashish ikki nusxadagi ma'lumotlar bloklari uchun ma'lumotlarni ko'rsatadi, faqat ma'lumotlar blokining indeks raqamini saqlaydi, aks holda bu ma'lumotlar bloki yagona bo'lak ekanligini anglatadi. FP metama'lumotlar to'plamining mantiqiy tasviriga mos keladi.Faylni o'qiyotganda avval mantiqiy faylni o'qing, so'ngra FP ketma-ketligiga ko'ra, saqlash tizimidan mos keladigan ma'lumotlar blokini chiqarib oling, jismoniy faylning nusxasini tiklang.Yuqoridagi jarayondan ko'rinib turibdiki, Dedupe ning asosiy texnologiyalari asosan fayl ma'lumotlar blokini segmentatsiyalash, ma'lumotlar blokini barmoq izini hisoblash va ma'lumotlar blokini qayta tekshirishni o'z ichiga oladi.
(1) Fayl ma'lumotlar blokining segmentatsiyasi
(2) Ma'lumotlar bloki barmoq izini hisoblash
(3) Ma'lumotlar blokini olish
Tarmoq paketlarini takrorlashni boshlash uchun ushbu tavsiya etilgan modellarni topish uchun:
Mylinking™ Network Packet Broker(NPB) ML-NPB-640048*10GE SFP+ plus 4*40GE/100GE QSFP28, Maks 880Gbps
Mylinking™ Network Packet Broker(NPB) ML-NPB-56606*40GE/100GE QSFP28 plus 48*10GE/25GE SFP28, Maks. 1,8 TB/s
Mylinking™ Network Packet Broker(NPB) ML-NPB-506048*10GE SFP+ plus 2*40GE QSFP, Maks 560Gbps
Mylinking™ Network Packet Broker(NPB) ML-NPB-486048*10GE SFP+, Maks 480Gbps, Function Plus
Mylinking™ Network Packet Broker(NPB) ML-NPB-481048*10GE SFP+, maksimal 480Gbps
Mylinking™ Network Packet Broker(NPB) ML-NPB-2410P24*10GE SFP+, Maks 240Gbps, DPI funktsiyasi
Mylinking™ Network Packet Broker(NPB) ML-NPB-6400
48*10GE SFP+ plus 4*40GE/100GE QSFP28, Maks 880Gbps
Xabar vaqti: 2022-yil 18-oktabr