ביטול כפילות נתונים היא טכנולוגיית אחסון פופולרית ופופולרית המייעלת את קיבולת האחסון. היא מבטלת נתונים מיותרים על ידי הסרת נתונים כפולים ממערך הנתונים, תוך השארת עותק אחד בלבד. כפי שמוצג באיור למטה. טכנולוגיה זו יכולה להפחית במידה ניכרת את הצורך באחסון פיזי שטח כדי לענות על הדרישה ההולכת וגוברת לאחסון נתונים. טכנולוגיית Dedupe יכולה להביא יתרונות מעשיים רבים, בעיקר כולל ההיבטים הבאים:
| (1) | עמוד בדרישות ROI(Return On Investment)/TCO(Total Cost of Ownership); |
| (2) | ניתן לשלוט ביעילות על הצמיחה המהירה של הנתונים; |
| (3) | הגדל את שטח האחסון האפקטיבי ושפר את יעילות האחסון; |
| (4) | חסוך את עלות האחסון הכוללת ועלות הניהול; |
| (5) | שמור את רוחב הפס ברשת של העברת נתונים; |
| (6) | חסוך בעלויות תפעול ותחזוקה כגון מקום, אספקת חשמל וקירור. |
טכנולוגיית Dedupe נמצאת בשימוש נרחב במערכות גיבוי וארכיון נתונים, מכיוון שיש הרבה נתונים כפולים לאחר גיבויים מרובים של נתונים, מה שמתאים מאוד לטכנולוגיה זו. למעשה, טכנולוגיית Dedupe יכולה לשמש במצבים רבים, כולל נתונים מקוונים, נתונים קרובים לקו, ומערכות אחסון נתונים לא מקוונות.זה יכול להיות מיושם במערכות קבצים, מנהלי נפח, NAS ו-sans. Dedupe יכול לשמש גם לשחזור נתונים מאסון, העברת נתונים וסנכרון, שכן ניתן להשתמש בטכנולוגיית דחיסת נתונים לאריזת נתונים. טכנולוגיית Dedupe יכולה לעזור ליישומים רבים להפחית אחסון נתונים, חסכון ברוחב הפס של הרשת, שפר את יעילות האחסון, צמצם את חלון הגיבוי וחסוך בעלויות.
ל-Dedupe שני מימדים עיקריים: יחסי ביטול מיקום וביצועים. ביצועי מניעת כפילויות תלויים בטכנולוגיית ההטמעה הספציפית, בעוד שקצב ה-Dedupe נקבע על פי המאפיינים של הנתונים עצמם ודפוסי היישום, כפי שמוצג בטבלה למטה.ספקי אחסון מדווחים כעת על שיעורי מניעת כפילויות מ-20:1 עד 500:1.
| שיעור מניעת כפילות גבוה | שיעור מניעת כפילות נמוך |
| נתונים שנוצרו על ידי המשתמש | נתונים מעולם הטבע |
| נתונים קצב שינוי נמוך | נתונים קצב שינוי גבוה |
| נתוני התייחסות, נתונים לא פעילים | נתונים פעילים |
| יישום קצב שינוי נתונים נמוך | יישום קצב שינוי נתונים גבוה |
| גיבוי מלא של נתונים | גיבוי נתונים מצטבר |
| אחסון נתונים לטווח ארוך | אחסון נתונים לטווח קצר |
| מגוון רחב של יישומי נתונים | מגוון קטן של יישומי נתונים |
| עיבוד נתונים עסקי מתמשך | עיבוד מידע עסקי כללי |
| פילוח נתונים קטן | פילוח ביג דאטה |
| פילוח נתונים מוארך | פילוח נתונים באורך קבוע |
| תוכן נתונים נתפס | תוכן הנתונים לא ידוע |
| מניעת כפילויות של נתוני זמן | מניעת כפילויות של נתונים מרחביים |
Dedupe נקודות יישום
יש לקחת בחשבון גורמים שונים בעת פיתוח או יישום טכנולוגיית Dedupe, שכן גורמים אלו משפיעים ישירות על הביצועים והיעילות שלה.
| (1) | מה | אילו נתונים נמחקים? |
| (2) | מתי | מתי יתבטל המשקל? |
| (3) | איפה | איפה ביטול המשקל? |
| (4) | אֵיך | איך להפחית את המשקל? |
טכנולוגיית Dedupe Key
תהליך ביטול הכפילות של מערכת האחסון באופן כללי הוא זה: קודם כל קובץ הנתונים מחולק לקבוצת נתונים, עבור כל גוש נתונים כדי לחשב את טביעת האצבע, ולאחר מכן בהתבסס על מילות מפתח חיפוש Hash של טביעת אצבע, התאמה מציינת את הנתונים עבור הכפילות בלוקים נתונים, מאחסן רק מספר אינדקס של בלוק נתונים, אחרת זה אומר שבלוק הנתונים הוא החלק היחיד של בלוק חדש, אחסון של בלוק נתונים ויצירת מטא מידע רלוונטי. לפיכך, קובץ פיזי במערכת האחסון מתאים לייצוג לוגי של סט של מטא נתונים של FP. בעת קריאת הקובץ, קרא תחילה את הקובץ הלוגי, ולאחר מכן על פי רצף ה-FP, הוצא את בלוק הנתונים המתאים ממערכת האחסון, שחזר את העותק של הקובץ הפיזי. ניתן לראות זאת מהתהליך לעיל שטכנולוגיות המפתח של Dedupe כוללות בעיקר פילוח של בלוק נתוני קבצים, חישוב טביעת אצבע של בלוק נתונים ואחזור בלוק נתונים.
(1) פילוח בלוק נתוני קבצים
(2) חישוב טביעת אצבע של חסימת נתונים
(3) אחזור בלוק נתונים
כדי למצוא את הדגמים המומלצים האלה כדי להתחיל את ביטול כפילות מנות הרשת שלך:
Mylinking™ Network Packet Broker(NPB) ML-NPB-640048*10GE SFP+ בתוספת 4*40GE/100GE QSFP28, מקסימום 880Gbps
Mylinking™ Network Packet Broker(NPB) ML-NPB-56606*40GE/100GE QSFP28 בתוספת 48*10GE/25GE SFP28, מקסימום 1.8Tbps
Mylinking™ Network Packet Broker(NPB) ML-NPB-506048*10GE SFP+ בתוספת 2*40GE QSFP, מקסימום 560Gbps
Mylinking™ Network Packet Broker(NPB) ML-NPB-486048*10GE SFP+, מקסימום 480Gbps, Function Plus
Mylinking™ Network Packet Broker(NPB) ML-NPB-481048*10GE SFP+, מקסימום 480Gbps
Mylinking™ Network Packet Broker(NPB) ML-NPB-2410P24*10GE SFP+, מקסימום 240Gbps, פונקציית DPI
Mylinking™ Network Packet Broker(NPB) ML-NPB-6400
48*10GE SFP+ בתוספת 4*40GE/100GE QSFP28, מקסימום 880Gbps
זמן פרסום: 18 באוקטובר 2022
