StorWIS לאחסון נתוני מחקר

דרישות מנימליות לעמדות לקוח (Clients) עבור התחברות ל-CIFS/SMB

עמדות הלקוח שעומדות בדרישות המפורטות  בטבלה שלהלן מאושרות לשימוש ב-StorWIS.

הוראות שימוש

כדי לגשת לתיקיית StorWIS של מעבדה, עליכם להירשם תחילה בשירותים פנימיים לשירות StorWIS - Big Data Storage, ולמפות לאחר מכן את StorWIS לכונן הרשת, בהתאם לפלטפורמה הספציפית בה הנכם משתמשים (מק, חלונות ולינוקס), כמפורט בהמשך.

חלונות

במחשבי חלונות, יש ליצור ולמפות את כונן הרשת באופן ידני. על מנת לעשות זאת:

1. פתחו את המחשב שלי (My Computer, או Computer, בתלוי בגרסת חלונות שבשימוש).
2. לחצו על מיפוי כונן רשת (Map Network Drive).
3. בתיבה שתיפתח, הזינו את מסלול התיקייה המלא (כגון isi.storwis.weizmann.ac.il\labs\lab_na\\) בשדה התקייה (Folder), וסמנו את אופציית ההתחברות מחדש בעת כניסה למערכת (Reconnect at sign-in), כמו גם את אופציית התחברות באמצעות פרטי התחברות אחרים (Connect using different credentials), ולחצו על סיום (Finish).
   
4. בעת מיפוי הכונן, הזינו את שם המשתמש והסיסמה שלכם כשהנכם מתבקשים לעשות זאת (הקפידו להזין את הקידומת \wismain לפני שם המשתמש כפי שמוצג להלן), וסמנו את אופציית שמירת פרטי ההתחברות שלכם (Remember my credentials).
   

לשחזור קבצים מגיבויי מערכת (System Snapshots):

1. לחצו עם הכפתור הימני בעכבר על התיקייה הרצויה, לחצו על מאפיינים (Properties) בתפריט שנפתח, ולאחר מכן לחצו על לשונית הגרסאות הקודמות (Previous Versions) בתיבה שנפתחת.
   
2. אתרו את ההקובץ או התיקייה שברצונכם לשחזר ולחצו על העתקה (...Copy, וזאת בכדי למנוע דריסת קבצים קיימים) או על שחזור (...Restore, עם דריסה פוטנציאלית של קבצים קיימים).

באפשרותכם לשחזר לחלופין קבצים מתמונות גיבוי (Snapshots) בכך שתנווטו אל תיקיית snapshot. החבויה שממוקמת בתוך כל תיקייה, ותעתיקו כל קובץ שברצונכם לשחזר מתיקייה זו אל יעד רצוי כלשהו.

מק

על מנת להתחבר אל השירות ממחשבי מק:

1. בחרו בפקודת התחברות לשרת (Connect to Server) בתפריט התפוח או לחצו על שילוב המקשים Cmd + K בתוכנת Finder של macOS. החלון הבא יופיע:
   
2. בעת התחברות באמצעות SMB, הזינו את המסלול המתאים, החל ב-//:smb בשדה כתובת השרת (Server Address), כמו בדוגמה שלהלן:
   smb://isi.storwis.weizmann.ac.il/labs/shalomlab.
   
   אם הנכם מתחברים באמצעות CIFS, הזינו את המסלול המתאים, החל ב-//:cifs בשדה כתובת השרת (Server Address), כפי שמוצג בדוגמה הבאה:
   cifs://isi.storwis.weizmann.ac.il/labs/shalomlab.
3. בעת מיפוי הכונן, תידרשו לשם משתמש וסיסמה. הזינו את שם המשתמש המשויך לחשבונכם עם הקידומת \wismain ואת הסיסמה שלכם, וסמנו את אופציית שמירת הסיסמה (Remember this password in my keychain).
   

לינוקס

להתחברות לשירות StorWIS ממחשב מבוסס לינוקס:

1. הריצו את הפקודה הבאה:
   smbclient \\\\isi.storwis.weizmann.ac.il\\labs -U wismain/user_id (שם המשתמש, ה-User ID בדוגמה שלהלן הינו aaext4).
   
2. נווטו אל תיקיית המעבדה שלכם באמצעות הפקודה:
   smb: \>cd lab_name
3. הציגו את תוכן התיקייה באמצעות הפקודה:
   smb: \lab_name\> ls
   
   רשימה דומה לזו שלהלן תוצג בפניכם (שם המעבדה בדוגמה זו הינו testlab).
   
4. לטעינת כונן ה-cifs הלוגי (Volume) של StorWIS ב-etc/fstab/, הריצו את הפקודה הבאה:
   //isi.storwis.weizmann.ac.il/labs/STORWIS cifs username=wismain\user_ID,password=password,defaults 0 0
5. לרשותכם הפקודות המוצגות בטבלה הבאה.
   
6. הפעילו את פקודת help על מנת להציג רשימה של כל פקודות smbclient (ראו להלן).
   
7. לקבלת סיוע עבור פקודות שונות, הקלידו סימן שאלה (?) ולאחריו את שם הפקודה (ראו דוגמאות להלן).
   
8. על מנת ללכוד את הפלט של פקודות מקומיות, הקדימו את שם הפקודות בסימן קריאה (!, כפי שמוצג בדוגמאות להלן).
   
9. להורדת כל הקבצים שתואמים צירוף סינון (Mask) רצוי, הזינו את הפקודה הבאה:
   mget [mask] (צירוף הסינון הרצוי בדוגמה שלהלן הינו dir1).
   
10. לביטול הודעות אישור (Confirmation Prompts), הקדימו את פקודת mget בפקודה prompt (ראו דוגמה להלן).
    

דרישות מנימליות לעמדות לקוח (Clients) עבור התחברות ל-CIFS/SMB

עמדות הלקוח שעומדות בדרישות המפורטות  בטבלה שלהלן מאושרות לשימוש ב-StorWIS.

הוראות שימוש

כדי לגשת לתיקיית StorWIS של משתמש פרטי, עליכם להירשם תחילה בשירותים פנימיים לשירות StorWIS - Big Data Storage, ולמפות לאחר מכן את StorWIS לכונן הרשת, בהתאם לפלטפורמה הספציפית בה הנכם משתמשים (מק, חלונות ולינוקס), כמפורט בהמשך.

חלונות

במחשבי חלונות, יש ליצור ולמפות את כונן הרשת באופן ידני. על מנת לעשות זאת:

1. פתחו את המחשב שלי (My Computer, או Computer, בתלוי בגרסת חלונות שבשימוש).
2. לחצו על מיפוי כונן רשת (Map Network Drive).
3. בתיבה שתיפתח, הזינו את מסלול התיקייה המלא (כגון isi.storwis.weizmann.ac.il\users\user_ID\\) בשדה התקייה (Folder), וסמנו את אופציית ההתחברות מחדש בעת כניסה למערכת (Reconnect at sign-in), כמו גם את אופציית התחברות באמצעות פרטי התחברות אחרים (Connect using different credentials), ולחצו על סיום (Finish).
   
4. בעת מיפוי הכונן, תתבקשו להזין את שם המשתמש והסיסמה שלכם. עשו זאת (הקפידו להזין את הקידומת \wismain לפני שם המשתמש שלכם, כפי שמוצג להלן), וסמנו את אופציית שמירת פרטי ההתחברות שלכם (Remember my credentials).
   

לשחזור קבצים מגיבויי מערכת (System Snapshots):

1. לחצו עם הכפתור הימני בעכבר על התיקייה הרצויה, לחצו על מאפיינים (Properties) בתפריט שנפתח, ולאחר מכן לחצו על לשונית הגרסאות הקודמות (Previous Versions) בתיבה שנפתחת.
   
2. אתרו את ההקובץ או התיקייה שברצונכם לשחזר ולחצו על העתקה (...Copy, וזאת בכדי למנוע דריסת קבצים קיימים) או על שחזור (...Restore, עם דריסה פוטנציאלית של קבצים קיימים).

באפשרותכם לשחזר לחלופין קבצים מתמונות גיבוי (Snapshots) בכך שתנווטו אל תיקיית snapshot. החבויה שממוקמת בתוך כל תיקייה, ותעתיקו כל קובץ שברצונכם לשחזר מתיקייה זו אל יעד רצוי כלשהו.

מק

על מנת להתחבר אל השירות ממחשבי מק:

1. בחרו בפקודת התחברות לשרת (Connect to Server) בתפריט התפוח או לחצו על שילוב המקשים Cmd + K בתוכנת Finder של macOS. החלון הבא יופיע.
   
2. בעת התחברות באמצעות SMB, הזינו את המסלול המתאים, החל ב-//:smb בשדה כתובת השרת (Server Address), כמו בדוגמה שלהלן:
   smb://isi.storwis.weizmann.ac.il/users/shalomg.
   
   אם הנכם מתחברים באמצעות CIFS, הזינו את המסלול המתאים, החל ב-//:cifs בשדה כתובת השרת (Server Address), כפי שמוצג בדוגמה הבאה:
   cifs://isi.storwis.weizmann.ac.il/users/shalomg.
3. בעת מיפוי הכונן, תידרשו לשם משתמש וסיסמה. הזינו את שם המשתמש המשויך לחשבונכם עם הקידומת \wismain ואת הסיסמה שלכם, וסמנו את אופציית שמירת הסיסמה (Remember this password in my keychain).
   

לינוקס

להתחברות לשירות StorWIS ממחשב מבוסס לינוקס:

1. הריצו את הפקודה הבאה:
   smbclient \\\\isi.storwis.weizmann.ac.il\\Users -U wismain/user_id (שם המשתמש, ה-User ID בדוגמה שלהלן הינו aaext4).
   
2. נווטו אל תיקיית המשתמש שלכם באמצעות הפקודה:
   smb: \>cd user_id
3. הציגו את תוכן התיקייה באמצעות הפקודה:
   smb: \user-id\> ls
   
   רשימה דומה לזו שלהלן תוצג בפניכם (שם המשתמש, ה-User ID בדוגמה שלהלן הינו aaext4).
   
4. לטעינת כונן ה-cifs הלוגי (Volume) של StorWIS ב-etc/fstab/, הריצו את הפקודה הבאה:
   //isi.storwis.weizmann.ac.il/Users/STORWIS cifs username=wismain\user_ID,password=password,defaults 0 0
5. לרשותכם הפקודות המוצגות בטבלה הבאה.
   
6. הפעילו את פקודת help על מנת להציג רשימה של כל פקודות smbclient (ראו להלן).
   
7. לקבלת סיוע עבור פקודות שונות, הקלידו סימן שאלה (?) ולאחריו את שם הפקודה (ראו דוגמאות להלן).
   
8. על מנת ללכוד את הפלט של פקודות מקומיות, הקדימו את שם הפקודות בסימן קריאה (!, כפי שמוצג בדוגמאות להלן).
   
9. להורדת כל הקבצים שתואמים צירוף סינון (Mask) רצוי, הזינו את הפקודה הבאה:
   mget [mask] (צירוף הסינון הרצוי בדוגמה שלהלן הינו dir1).
   
10. לביטול הודעות אישור (Confirmation Prompts), הקדימו את פקודת mget בפקודה prompt (ראו דוגמה להלן).
    

מדריך מקוצר זה מפרט את השלבים הדרושים להגדרת שירות ה-StorWIS שלכם לשימוש.

אם ברצונכם לאחסן תוצאות או נתוני Office, מומלץ TBA שתעשו שימוש בשירותי TBA Box.

משתמשים מהיחידות והמחלקות המורשות הבאות רשאים להירשם לשירות StorWIS:

• פקולטות.
• מחלקות הקשורות לפקולטות.
• יחידות עזר המשויכות לפקולטות (ההרשמה תבוצע באמצעות PI הפקולטה בלבד).
• יחידות הדרכת מדעים.

דרישות מינימום לעמדות לקוח (Clients) עבור התחברות ל-CIFS/SMB

עמדות הלקוח המפורטות בטבלה הבאה מאושרות לשימוש ב-StorWIS.

הרשמה לשירות StorWIS עבור תיקיות מעבדות

ההרשמה תבוצע על ידי מנהלן הפקולטה שלכם באמצעות שירותים פנימיים (Internal Services).

הגשת הזמנה חדשה

הליך ההרשמה לתיקיית StorWIS למעבדות עבור PIs

ההרשמה על ידי PIs תבוצע כדלהלן:

1. הזינו את שם המשתמש שלכם (User ID של ה-PI) ובצעו הרשמה לשירות  the StorWIS Lab Folder באמצעות שירותים פנימיים.
2. הגדירו את גודל הכונן (בגיגה-בייט) שברצונכן להקצות (100 גיגה-בייט לכל הפחות).
   
3. העניקו שם נוח לתיקיית האב של המעבדה. לדוגמה, אם שם ה-PI הוא John Doe, שם התקייה יוכל להיות DJohnLab ,JohnDLab ,JohndoeLab, או כל שם דומה.
   
4. בחרו במספר משתמש תקציב.
   
5. לחצו על Send.
6. בעת זו, סטטוס ה-PI יוצג כ-Registering (בהרשמה).
   
7. מרגע שנוצרה תיקיית המעבדה (פעולה שעושיה לארוך מספר שעות), סטטוס ה-PI יתעדכן ל-Registered (רשום).
   
8. עם השלמת הרשמת ה-PI (כשסטטוס ה-PI התעדכן ל-Registered), תיווצר תיקייה חדשה במסלול הבא:
   isi.storwis.weizmann.ac.il\labs\Lab-group-name\user-ID\\.

הגשת הזמנה נוספת

הרשמה לשירות StorWIS עבור תיקיות חברי מעבדות

הליך ההרשמה עבור חברי מעבדות

כחברי מעבדה, ה-PIs שלכם רשאים להוסיף אתכם לתיקיית ה-StorWIS של המעבדה שלהם.

ההרשמה לשירות StorWIS עבורת תיקיות חברי מעבדות (StorWIS Lab Member Folder) תבוצע כדלהלן:

1. הזינו את שם המשתמש שלכם בשירותים פנימיים ולחצו על Register (הרשמה) לצד אופציית StorWIS Lab Member folder.
   
2. בחרו בשם קבוצת ה-PI שלכם להוספת חבר מעבדה לתיקיית המעבדה.
   
3. בחרו ב-PI שלכם ברשימת ה-PIs שתוצג בפניכם.
   
4. בעלי הנתונים (ה-PI) יקבלו הודעה בדואר אלקטרוני שתבקש מהם לאשר את הבקשה להצטרף אל המעבדה שלהם (ראו הודעה לדוגמא שלהלן). על מנת לעשות זאת, על ה-PI ללחוץ על הקישור Click here to approve, כשבהמשך לזה, חבר המעבדה יזכה בגישה אל תיקיית המעבדה.

,Dear Dr. John Doe

.The user NMIHALPT belonging to Fred Wills has requested to use your group resources as StorWIS lab group: Johndoe

.Click here to approve

,Best regards
Internal services

.Please contact the HelpDesk at 4444 for any further clarification or assistance

5. לחצו על Send.
6. המתינו שעה ליצירת תיקיית חבר המעבדה בשירות (במהלך פרק זמן זה, סטטוס חבר המעבדה יוצג כ-Registering (בהרשמה).

לכשנוצרה תיקיית חבר המעבדה, הסטטוס יתעדכן ל-Registered (רשום).

8. עם השלמת ההרשמה (ועדכון סטטוס חבר המעבדה ל-Registered), תיווצר תיקייה חדשה במסלול הבא:
   isi.storwis.weizmann.ac.il\labs\Lab-group-name\user-ID\\.

הרשמה לתיקיית StorWIS פרטית

הליך ההרשמה עבור PIs וחברי מעבדות

PIs או חברי מעבדות שזקוקים לתקייה נפרדת מתיקיית המעבדה, שתהיה נגישה אך ורק להם, רשאים להירשם לתיקיית StorWIS פרטית. ההרשמה תבוצע כדלהלן:

1. הזינו את שם המשתמש שלכם בשירותים פנימיים, ולחצו על Register (הרשמה) לצד אופציית StorWIS Private folder.
   
2. הגדירו את גודל הכונן (בגיגה-בייט) ולחצו על Send.
   
3. המתינו מספר שעות ליצירת תיקיית ה-StorWIS הפרטית (במהלך פרק זמן זה, סטטוס ה-PI או חבר המעבדה יוצג כ-Registering, או בהרשמה).
   
4. לכשנוצרה תיקיית ה-StorWIS הפרטית, הסטטוס יתעדכן ל-Registered (רשום).
   
5. עם השלמת ההרשמה (ועדכון הסטטוס ל-Registered), תיווצר תיקייה חדשה במסלול הבא:
   isi.storwis.weizmann.ac.il\users\user-ID\\.

מיפוי תיקיית מעבדה וחברי מעבדות לכונן רשת

אנא פנו אל המשאבים הבאים למידע על מיפוי תיקיית מעבדה או חבר מעבדה לכונן רשת במחשבים מבוססי חלונות, macOS או לינוקס:

• TBA מיפוי תיקיית מעבדה לכונן רשת TBA (קישור שבור באתר הישן).
• TBA מיפוי חברי מעבדות לכונן רשת TBA (קישור שבור באתר הישן).

שירות הגיבוי הינו אופציונלי עבור משתמשי StorWIS. ניתן להפעיל או להשבית אותו עבור מעבדה ספציפית בכל עת באמצעות שירותים פנימיים (Internal Services).

דמי שירות הגיבוי מכסים גיבויים יומיים עם תקופת שימור של 4 שבועות.

הקבצים מגובים בשני עותקים (במכון ומחוצה לו) וגרסאות (להתאוששות קלה מתקלות), ונשמרים למשך מספר ימים קבוע מראש, בתלוי במדיניות הישימה הספציפית, כמפורט בטבלה הבאה.

מדיניות השימור עבור קבצים אשר מאוחסנים ב-StorWIS הינה כדלקמן:

• מספר גרסאות מאוחסנות: מספר גרסאות הגיבוי שיישמרו עבור קובץ שנמצא ב-StorWIS ולא נמחק.
• תקופת שימור בימים: מספר הימים שבמהלכם תישמר גרסת גיבוי של קובץ. עם חלוף הימים, יישמר העותק האחרון של כל קובץ. בהתאם לתקופת מדיניות השימור שנבחרה כיום (30 יום), ומספר הגרסאות המירבי הנתמך (10), יימחקו גרסאות של הקובץ שגילן חורג מ-30 יום.

בנוסף, מדיניות השימור עבור קבצים שנמחקו מ-StorWIS הינה כדלקמן:

• מספר גרסאות מאוחסנות: הגרסה העדכנית ביותר של קובץ שנמחק מ-StorWIS תישמר.
• תקופת שימור בימים: מספר הימים שבמהלכם תישמר הגרסה העדכנית ביותר של קובץ. עם חלוף מספר ימים זה, הקובץ יימחק.
• מספר העותקים מתייחס למספר העותקים של קובץ אשר מאוחסן במערכת המכון. הערך הוא 2, כשמשמעות הדבר היא שעותק יחיד נוסף של הקובץ יישמר מחוץ למכון, במתקן אחסון ייעודי.

מומלץ מאוד שלא לכלול קבצים שלא בהכרח חייבים בגיבוי (כגון יומני אירועים, קבצים זמניים, קבצי שגיאה וכו'), היות וזה עשוי להפחית משמעותית את עלויות הגיבוי שלכם. עיינו בסעיף הרשמה לשירות הגיבוי להסברים מפורטים על החרגת קבצים.

הרשמה לשירות הגיבוי

ההרשמה לשירות הגיבוי של StorWIS תבוצע באמצעות מנהלן המחלקה שלכם.

יש להגיש בקשה לשירות באמצעות שירותים פנימיים כדלהלן:

1. בעמוד המוצג להלן, בחרו ב-Backup (גיבוי) תחת List of Services (רשימת השירותים), ולחצו לאחר מכן על Go.
   
2. הזינו בעמוד הבא שייטען פרטים רלוונטיים בשדות Debit userid (שם משתמש לחיוב, Application Owner (בעלי היישום) ו-E-mail of person in charge of computer (כתובת הדואר האלקטרוני של האדם שהמחשב בשליטתו), ולחצו על Next.
   
3. אם הנכם נרשמים לגיבוי StorWIS עבור מעבדה, עם טעינת העמוד הבא, השתמשו בבקרת Action (פעולה) תחת Backup Details (פרטי גיבוי) לבחירה באופציית STORWIS LAB BACKUP. הקפידו להחריג כל קובץ שאינו חייב בהכרח בגיבוי (כגון יומני אירועים, קבצים זמניים, קבצי שגיאה וכו׳) באמצעות בוררי סוגי הקבצים ומסלולי התיקייה הרלוונטיים בתחתית העמוד, ולחצו על Send.
   
4. אם הנכם נרשמים לגיבוי StorWIS עבור משתמש פרטי, עם טעינת העמוד הבא, השתמשו בבקרת Action (פעולה) תחת Backup Details (פרטי גיבוי) לבחירה באופציית STORWIS PRIVATE BACKUP. הקפידו להחריג כל קובץ שאינו חייב בהכרח בגיבוי (כגון יומני אירועים, קבצים זמניים, קבצי שגיאה וכו׳) באמצעות בוררי סוגי הקבצים ומסלולי התיקייה הרלוונטיים בתחתית העמוד, ולחצו על Send.
   

עלויות השירות

עלויות גיבוי עשויות להשתנות בתלוי במנגנוני הדחיסה (De-duplication, או מניעת כפילויות) שבשימוש. כלל האצבע הוא שנתונים שחוזרים על עצמם באחסון StorWIS לא ייספרו יותר מפעם אחד בחישוב עלויות שירות הגיבוי.

עיינו בחיובי אגף טכנולוגיות מידע לתעריפי שירות הגיבוי הבסיסיים, ולמידע נוסף על תעריפים חודשיים.

* מניעת כפילויות נתונים (Data De-duplication) הינה טכניקת דחיסה ייעודית שמונעת אפקטיבית אחסון עותקי נתונים מיותרים. פריטי בלוק משניים (Sub-file Block Items) דומים של קבצים עשויים גם הם שלא להילקח בחשבון כנתוני גיבוי חדשים.

החומרה המשמשת לאספקת שירות StorWIS תוכננה במיוחד להבטחת זמינות גבוהה. לפיכך מיושמת יתירות בהיבטי המערכת הבאים:

• בקרי מערך האחסון.
• קישוריות חשמל ורשת.
• הנתונים המאוחסנים בדיסק מוגנים גם באמצעות מנגנונים שונים, לרבות בדיקות תקינות ברמת חומרה, עם תמיכה ביצירת קשר אוטמטית (״Call Home״) למוקד התמיכה של היצרן.

כלל המערכים מנוטרים עם מתן התראות על שגיאות וכל כשל אפשרי 24 שעות ביממה, 7 ימים בשבוע. רמת ניטור גבוהה זו, בשילוב יתירות מובנית במערך בקרי האחסון, מאפשרת הבטחת זמינות מירבית.

זמינות שירות

שירות האחסון StorWIS מתופעל על ידי צוות ה-IT שלנו כך שתובטח זמינות של 99.9%, ונועד להיות נגיש לכל קבוצות המחקר בכל עת, למעט במהלך חלונות תחזוקה מתוזמנים ועדכוני תחזוקה מונעת.

הודות לתכנון העמיד של השירות, כשלים והפסקות צפויים להיות נדירים יחסית, ויוגבלו ליישום תיקונים ושדרוגים שמצריכים כיבוי מערכים שלמים ו/או הפרעות בשירות הקשורות לתשתית (רשת, חשמל). כל הפסקה - בין אם מתוכננת ובין אם לא - תפורסם בלוח תקינות המערכת והידיעות (System Health and Bulletin Board), אשר זמין בדף הבית של האתר שלנו.

טקסונומיית StorWIS

עיינו בטבלה שלהלן לפרטים על רכיבי שירות StorWIS למיניהם.

מבנה תיקיות StorWIS

האיור שלהלן מציג את מבנה התיקיות של שירות StorWIS.