בשנת 2010 עבדתי בחברה כאיש סיסטם, במסגרת עבודת תחזוקה של יום ראשון לסביבה שלנו של שרתי VMWARE שמחוברים לסטורג׳ של Dell עם מכונות וירטואליות, הגיעו אלינו החברה שתמכה בסטורג׳ והטכנאי שלהם הריץ פקודת consolidate לדיסקים (פקודה שהרצנו כבר כמה פעמים והכול היה בסדר).
כמובן שכיבינו את כל הסביבה לפני.
התהליך רץ כ3 שעות שבסיומו הוא נכשל, ואז חשכו עיננו כל הלונים של הסטורג׳ נעלמו. המשמעות של זה היא שכל השרתים הווירטואלים שלנו לא זמינים יותר.
כמובן שכל המומחים של אותה חברה גדולה (לא אציין את שמה פה). הגיעו אלינו כדי לפתור את הבעיה.
יום שני: אז אחרי לילה לבן בלי שום התקדמות שניסינו את כל מה שיש לדל בנהלים שלהם, פנינו לגיבויים רק כדי לגלות שהגיבוי לא תקין כבר תקופה ארוכה מאוד ולמעשה אין לנו גיבוי (אני אציין שהתרענו על העובדה שהגיבויים שלנו לא תקינים עוד מלפני אבל מי שהיה אחראי על המחשוב בחברה תיעידף את הגיבוי ברמה הכי נמוכה ודי הזנחנו את הנושא).
פנינו לדל כמובן ולתמיכה של VMWARE שהעלו אותנו מול התמיכה הבכירה שלהם. כמובן שפנינו לד״ר גוגל וניסינו כל מה שמצאנו שם בנושא.
יום שלישי: שוב אחרי שישנו על הרצפה במשרד ואחרי שהחברה לא עובדת כבר שלושה ימים, המנכ״ל של החברה אוסף אותנו ומודיע שאם לא נשחזר את המידע יהיו לכך השלחות על העתיד של החברה. בינתיים עובדים על הסטורג׳ המומכים הכי בכירים של Dell בשיטוף עם VMWARE (עוד לפני האיחוד בינהם)...
יום רביעי: קנינו סטורג׳ חדש והתחלנו להרים מכונות בתקווה שנצליך באיזה שלב להביא את המידע מהסטורג׳ הישן, עבדנו מסביב לשעון 2 צוותים במקביל.
בערב של יום רביעי Dell מודיעים לנו שאין דרך לשחזר את הלונים של הסטורג׳ וכל המידע אבד!
אני בשלב הזה אחרי כמה ימים שלא יצאתי הביתה הודעתי למנכ״ל שלנו שכניראה שאין מה לעשות ואיבדנו את כל החומר, ואמרתי לצוות שלי שאני יוצא הביתה ולא ליצור איתי קשר עד שאני אחזור.
הגעתי הביתה ב 21:00 בערב התקלחתי אכלתי וצללתי לפורומים שמדברים על שיחזורים, דבר נוסף שעשיתי פניתי ל Support של כל חברת שיחזור מידע שיש בעולם וסיפרתי להם על המקרה שלנו, רובם חזרו אלינו עם כל מני רעיונות שכבר ניסינו עם דל אבל כלום לא עזר (דבר נוסף שמאוד בלט היה העובדה שאין חברות שמשחזרות מידע מסטורג׳ים כניראה בגלל הקלסטרים) חברה אחת עם מוצר שנקרה File Scavenger עלו מולי בצ׳אט שלהם ואמרו שיש להם מוצר שעדיין בפיתוח ועוד לא עבר QA והיות והדיסק שלי כבר מת כניראה וניסינו הכול אז הם מוכנים לשלוח לי את ההתקנה של זה ולנסות... כמובן שהסכמתי והתקנתי מרחוק את המוצר והתחלתי לסרוק את הסטורג׳,
יום חמישי: לפנות בוקר אחרי לילה של בהייה במסך עוקב אחרי הפס התקדמות של הסריקה אני רואה שהסריקה רואה מחיצות של הדיסקים ובסוף הסריקה התהליך שיחזור אפשר לי להגדיר מחדש את הלונים לפי הקלסטר הקיים.
שיחזרתי את הלון כמובן ומייד התקשרתי לחבר צוות שלי שהיה במשרד ואמרתי לו שיש מצב שאפשר להחזיר את החומר, (״המלאך״ הזה רץ במסדרונות וצעק שהצליח לשחזר את המידע) הגעתי למשרד והתחלנו לחבר VM's לדיסקים ששחזרנו והצלחנו להחזיר את רוב החומר.
בחמישי בערב כשהכול חזר לעבודה סדירה קלטתי שההצלחה בשיחזור של המידע נזקפה לזכותו של החבר צוות שלי הודעתי על סיום עבודתי בחברה (גם מתוך לקיחת אחריות על המחדל גיבויים)
ד.א אחרי שהוצאנו המון כסף בנסיון לשחזר את החומר כולל רכישה של כילים וכולל קניה של כרטיס טיסה של טכנאי של דל לארץ בסוף שחזרתי את המידע עם תוכנה שעלתה לי 120$ ששילמתי מהכרטיס אשראי שלי
איציק
