Data De-duplication เป็นเทคโนโลยีการจัดเก็บข้อมูลยอดนิยมและได้รับความนิยมซึ่งปรับความจุให้เหมาะสม โดยกำจัดข้อมูลที่ซ้ำซ้อนด้วยการลบข้อมูลที่ซ้ำกันออกจากชุดข้อมูลให้เหลือเพียงสำเนาเดียว ดังแสดงในรูปด้านล่าง เทคโนโลยีนี้สามารถลดความจำเป็นในการจัดเก็บข้อมูลทางกายภาพได้อย่างมาก พื้นที่เพื่อตอบสนองความต้องการการจัดเก็บข้อมูลที่เพิ่มขึ้น เทคโนโลยี Dedupe สามารถนำมาซึ่งประโยชน์เชิงปฏิบัติมากมาย โดยส่วนใหญ่รวมถึงประเด็นต่อไปนี้:
| (1) | ตรงตามข้อกำหนด ROI (ผลตอบแทนจากการลงทุน) / TCO (ต้นทุนรวมในการเป็นเจ้าของ) |
| (2) | การเติบโตอย่างรวดเร็วของข้อมูลสามารถควบคุมได้อย่างมีประสิทธิภาพ |
| (3) | เพิ่มพื้นที่จัดเก็บข้อมูลที่มีประสิทธิภาพและปรับปรุงประสิทธิภาพการจัดเก็บ |
| (4) | ประหยัดต้นทุนการจัดเก็บทั้งหมดและต้นทุนการจัดการ |
| (5) | บันทึกแบนด์วิธเครือข่ายของการส่งข้อมูล |
| (6) | ประหยัดค่าใช้จ่ายในการดำเนินการและบำรุงรักษา เช่น พื้นที่ การจ่ายไฟ และการทำความเย็น |
เทคโนโลยี Dedupe ถูกนำมาใช้กันอย่างแพร่หลายในระบบสำรองข้อมูลและจัดเก็บข้อมูลเนื่องจากมีข้อมูลที่ซ้ำกันจำนวนมากหลังจากการสำรองข้อมูลหลายครั้งซึ่งเหมาะสมมากสำหรับเทคโนโลยีนี้ ความจริงแล้วเทคโนโลยี Dedupe สามารถใช้ได้ในหลายสถานการณ์รวมถึงข้อมูลออนไลน์ ข้อมูลใกล้สาย และระบบจัดเก็บข้อมูลออฟไลน์สามารถนำไปใช้ในระบบไฟล์, ตัวจัดการโวลุ่ม, NAS และ Sans นอกจากนี้ Dedupe ยังใช้สำหรับการกู้คืนความเสียหายของข้อมูล การส่งข้อมูล และการซิงโครไนซ์ เนื่องจากเทคโนโลยีการบีบอัดข้อมูลสามารถใช้สำหรับการบรรจุข้อมูลได้ เทคโนโลยี Dedupe สามารถช่วยลดแอปพลิเคชันจำนวนมากได้ การจัดเก็บข้อมูล ประหยัดแบนด์วิธเครือข่าย ปรับปรุงประสิทธิภาพการจัดเก็บข้อมูล ลดหน้าต่างการสำรองข้อมูล และประหยัดค่าใช้จ่าย
Dedupe มีสองมิติหลัก: อัตราส่วนการขจัดข้อมูลซ้ำซ้อนและประสิทธิภาพ ประสิทธิภาพการทำงานของ Dedupe ขึ้นอยู่กับเทคโนโลยีการใช้งานเฉพาะ ในขณะที่อัตรา Dedupe จะถูกกำหนดโดยลักษณะของข้อมูลและรูปแบบแอปพลิเคชัน ดังที่แสดงในตารางด้านล่าง ผู้จำหน่ายอุปกรณ์จัดเก็บข้อมูลในปัจจุบันรายงานอัตราการขจัดข้อมูลซ้ำซ้อนตั้งแต่ ตั้งแต่ 20:1 ถึง 500:1
| อัตราการขจัดข้อมูลซ้ำซ้อนสูง | อัตราการขจัดข้อมูลซ้ำซ้อนต่ำ |
| ข้อมูลที่สร้างโดยผู้ใช้ | ข้อมูลจากโลกแห่งธรรมชาติ |
| อัตราการเปลี่ยนแปลงข้อมูลต่ำ | อัตราการเปลี่ยนแปลงข้อมูลสูง |
| ข้อมูลอ้างอิง ข้อมูลที่ไม่ได้ใช้งาน | ข้อมูลที่ใช้งานอยู่ |
| แอปพลิเคชันอัตราการเปลี่ยนแปลงข้อมูลต่ำ | การประยุกต์ใช้อัตราการเปลี่ยนแปลงข้อมูลสูง |
| การสำรองข้อมูลเต็มรูปแบบ | การสำรองข้อมูลส่วนเพิ่ม |
| การจัดเก็บข้อมูลระยะยาว | การจัดเก็บข้อมูลระยะสั้น |
| การประยุกต์ใช้ข้อมูลที่หลากหลาย | แอปพลิเคชันข้อมูลขนาดเล็ก |
| การประมวลผลข้อมูลทางธุรกิจอย่างต่อเนื่อง | การประมวลผลข้อมูลธุรกิจทั่วไป |
| การแบ่งส่วนข้อมูลขนาดเล็ก | การแบ่งส่วนข้อมูลขนาดใหญ่ |
| ขยายการแบ่งส่วนข้อมูล | การแบ่งส่วนข้อมูลความยาวคงที่ |
| เนื้อหาข้อมูลที่รับรู้ | ไม่ทราบเนื้อหาข้อมูล |
| การขจัดข้อมูลซ้ำซ้อนของเวลา | การขจัดข้อมูลซ้ำซ้อนเชิงพื้นที่ |
ลดจุดการใช้งานที่ซ้ำซ้อน
ควรพิจารณาปัจจัยต่างๆ ในการพัฒนาหรือประยุกต์ใช้เทคโนโลยี Dedupe เนื่องจากปัจจัยเหล่านี้ส่งผลโดยตรงต่อประสิทธิภาพและประสิทธิผล
| (1) | อะไร | ข้อมูลใดบ้างที่มีการถ่วงน้ำหนัก |
| (2) | เมื่อไร | เมื่อไหร่น้ำหนักจะหมด? |
| (3) | ที่ไหน | การกำจัดน้ำหนักอยู่ที่ไหน? |
| (4) | ยังไง | จะลดน้ำหนักได้อย่างไร? |
ขจัดข้อมูลซ้ำซ้อนของเทคโนโลยีคีย์
กระบวนการขจัดความซ้ำซ้อนของระบบจัดเก็บข้อมูลโดยทั่วไปมีดังนี้: ประการแรกไฟล์ข้อมูลจะถูกแบ่งออกเป็นชุดข้อมูล สำหรับแต่ละบล็อกข้อมูลเพื่อคำนวณลายนิ้วมือ จากนั้นขึ้นอยู่กับคำค้นหาลายนิ้วมือแฮช การจับคู่จะระบุข้อมูลสำหรับการทำซ้ำ บล็อกข้อมูลจะเก็บเฉพาะหมายเลขดัชนีบล็อกข้อมูลเท่านั้น มิฉะนั้นหมายความว่าบล็อกข้อมูลเป็นเพียงส่วนเดียวของบล็อกข้อมูลใหม่ และสร้างข้อมูลเมตาที่เกี่ยวข้อง ดังนั้นไฟล์ฟิสิคัลในระบบจัดเก็บข้อมูลจึงสอดคล้องกับการแสดงตรรกะของ ชุดของข้อมูลเมตา FP เมื่ออ่านไฟล์ ให้อ่านไฟล์ลอจิคัลก่อน จากนั้นตามลำดับ FP ให้นำบล็อกข้อมูลที่เกี่ยวข้องออกจากระบบจัดเก็บข้อมูล เรียกคืนสำเนาของไฟล์ฟิสิคัล สามารถดูได้จากกระบวนการข้างต้น เทคโนโลยีหลักของ Dedupe ประกอบด้วยการแบ่งส่วนบล็อกข้อมูลไฟล์ การคำนวณลายนิ้วมือของบล็อกข้อมูล และการดึงบล็อกข้อมูลเป็นหลัก
(1) การแบ่งส่วนของบล็อกข้อมูลไฟล์
(2) การคำนวณลายนิ้วมือบล็อกข้อมูล
(3) การดึงบล็อคข้อมูล
หากต้องการค้นหาโมเดลที่แนะนำเหล่านี้เพื่อเริ่ม Network Packet Deduplication:
Mylinking™ Network Packet Broker (NPB) ML-NPB-640048*10GE SFP+ บวก 4*40GE/100GE QSFP28, สูงสุด 880Gbps
Mylinking™ Network Packet Broker (NPB) ML-NPB-56606*40GE/100GE QSFP28 บวก 48*10GE/25GE SFP28, สูงสุด 1.8Tbps
Mylinking™ Network Packet Broker (NPB) ML-NPB-506048*10GE SFP+ บวก 2*40GE QSFP, สูงสุด 560Gbps
Mylinking™ Network Packet Broker (NPB) ML-NPB-486048*10GE SFP+, สูงสุด 480Gbps, ฟังก์ชันพลัส
Mylinking™ Network Packet Broker (NPB) ML-NPB-481048*10GE SFP+, สูงสุด 480Gbps
Mylinking™ Network Packet Broker (NPB) ML-NPB-2410P24*10GE SFP+, สูงสุด 240Gbps, ฟังก์ชัน DPI
Mylinking™ Network Packet Broker (NPB) ML-NPB-6400
48*10GE SFP+ บวก 4*40GE/100GE QSFP28, สูงสุด 880Gbps
เวลาโพสต์: 18 ต.ค.-2022
