מיליוני משתמשים עצבניים ואלפי טיסות מקורקעות: מה לעזאזל קרה בסופ"ש למיקרוסופט ולשדות התעופה בארה"ב?
במשך יותר מיממה משתמשים ברחבי העולם לא הצליחו לגשת לאאוטלוק ולשירותים נוספים של מיקרוסופט, בזמן שבארה"ב תקלה בתשתית מיושנת הובילה לביטול אלפי טיסות
מקור: Unsplash
אם ניסיתם במהלך הסופ"ש להיכנס למייל שלכם באאוטלוק, לשלוח הודעה ב-Teams או להשתמש ב-Copilot (סתם סתם, אנחנו יודעים שאף אחד לא מנסה מרצונו להשתמש בקופיילוט) וגיליתם שכלום לא עובד, אתם כבר יודעים שאתם לא לבד. תקלה נרחבת בשירותי הענן של ענקית הטכנולוגיה השביתה במשך יותר מיממה כמה מהשירותים החשובים ביותר שלה, והשפיעה על מיליוני משתמשים ברחבי העולם.
במקביל, תקלה שונה לחלוטין, הפעם במערכות של רשות התעופה הפדרלית האמריקאית (FAA), הובילה לקרקוע של טיסות ברחבי ארה"ב ולכאוס בשדות התעופה. בשני המקרים, לפי ההודעות שפורסמו עד כה, אין אינדיקציה למתקפת סייבר, אלא לכשלים טכניים שהפכו במהירות לבעיה בקנה מידה עצום. אז נכון, יום חמישי, ומישהו נגע בסביבת פרודקשן, אבל מעבר לזה, מה בדיוק קרה שם?
השדרוג שהפך לשנמוך
נתחיל במיקרוסופט. ביום חמישי בערב (שעון ישראל) החלו משתמשים לדווח על בעיות בגישה לשירותי Microsoft 365, כשעיקר הפגיעה הורגשה ב-Outlook ובשירות Exchange Online, שעליו מבוססת תשתית המייל הארגונית של החברה. אבל התקלה לא נעצרה שם, והשפיעה גם על Teams, על שירותי לוח השנה ועל Copilot. מיקרוסופט אותתה כי מדובר בשתי תקלות שונות ותחילה דיווחה על בעיות בארה"ב בלבד, אך כעבור כשעה כבר היה ברור שמדובר בתקלה גלובלית.
אז מה בעצם קרה שם? לפי ההסבר הראשוני שפרסמה מיקרוסופט לאחר האירוע, שינויי תעבורה במהלך תחזוקה ושדרוגי רשת חשפו באג במערכות האחראיות להקמת חיבורים מאובטחים. בקשות החיבור הלכו והצטברו עד שהשרתים כבר לא יכלו לעבד אותן וקרסו. כאשר שרת כזה קורס, הוא בד"כ יוצא מ-pool השרתים הפעילים, כדי שלא ימשיך לקבל בקשות, ועל הנייר, מדובר במנגנון שנועד לשמור על יציבות השירות; אבל במקרה הזה הוא היה חלק משרשרת אירועים שרק החמירה את התקלה.
ככל שיותר שרתים יצאו מהמאגר הזמין למשתמשים, העומס על השרתים שנותרו פעילים הלך וגדל ואלו נאלצו להתמודד עם כמות גדולה יותר של בקשות, ובשלב מסוים גם הם החלו להפסיק להגיב. כך נוצר מחזור בעייתי: שרתים יוצאים משירות, העומס על האחרים גדל, והמערכת מתקשה להתאושש. מיקרוסופט זיהתה עומסים חריגים בתשתיות שלה בכמה אזורים בעולם, לצד שגיאות התחברות לשירותים. החלק המעניין, והמתסכל עבור משתמשי מיקרוסופט, היה שגם כשהחברה הצליחה להחזיר שרתים לפעילות, זה לא בהכרח פתר את הבעיה. בעדכון שפרסמה בלילה שבין חמישי לשישי (שעון ישראל), הסבירה החברה כי שרתים שהוחזרו לפעילות נראו תקינים בתחילה, אבל הפסיקו להגיב ברגע שהחלו לקבל תעבורה ממשתמשים.
בסופו של דבר, אחרי יותר מ-24 שעות, הודיעה מיקרוסופט כי השירותים חזרו לפעילות מלאה. על פי נתוני Downdetector, נרשמו יותר מ-7.4 מיליון דיווחים על תקלות, עם שיא של כמעט 20 אלף דיווחים בדקה. מדובר במספר דיווחים ולא במספר המשתמשים שנפגעו, אבל הוא בהחלט ממחיש את היקף האירוע, כי מרבית המשתמשים רק מתעצבנים ומקללים בשקט או פונים למנהל ה-IT ולא רצים לדווח באתר.
ההשפעה כמובן לא הסתכמה בכמה עובדים שלא הצליחו לקרוא מיילים. בין הנפגעים היו גופים ממשלתיים, שירותי בריאות, משטרה, חברות תעופה ומוסדות פיננסיים. בחלק מהמקרים נאלצו ארגונים לחזור לדרכי תקשורת עתיקות, כולל שימוש בפקס לצורך אישור עסקאות פיננסיות – what year is it? בנוסף, על פי דיווחים שקיבלנו במהלך הסופ"ש נתקלו קוראים גם בבעיות להפעיל תוכנות של מיקרוסופט לצרכנים הפרטיים כמו Clip Champ, עורך הווידאו (המעולה יש לציין) של Windows. חשוב לציין כי החברה טרם פרסמה דוח טכני מלא של התקלה – הפוסט-מורטם – וזה צפוי לצאת רק בימים הקרובים ואז נדע גם בדיוק את כל הפרטים הטכניים.
עברו לסיבים אופטיים, והובילו לתקלה ענקית
בזמן שמיקרוסופט ניסתה להחזיר את שירותיה לפעילות, בשישי חוותה ארה"ב תקלה אדירה נוספת, הפעם במערכת קריטית הרבה יותר, כשרשות התעופה הפדרלית הודיעה על עצירה ארצית של המראות לאחר שהתגלו בעיות תקשורת במרכזי בקרת התעבורה האווירית. ההוראה מנעה מטיסות חדשות להמריא משדות תעופה ברחבי המדינה, בזמן שמטוסים שכבר היו באוויר הורשו לנחות – אך מאות טיסות הוסטו ולא הגיעו ליעדן. זו הייתה השבתת ההמראות הארצית הארוכה ביותר בארה"ב זה 25 שנה, כאשר הפעם האחרונה שבה חוותה המדינה אירוע דומה הייתה בפיגועי 11 בספטמבר, אם נתעלם מאירוע קצר יותר ב-2023.
בניגוד למקרה של מיקרוסופט, כאן הרשויות כבר סיפקו הסבר טכני מפורט יחסית לתקלה, והוא כולל שילוב בעייתי במיוחד בין תשתיות מיושנות, ניסיון שדרוג וציוד תקשורת שלא הצליח להתמודד עם העומס שנוצר. על פי שר התחבורה האמריקאי שון דאפי, התקלה החלה במהלך עבודות תחזוקה שביצעה חברת L3Harris, שמפעילה את רשת התקשורת המשמשת את מערך בקרת התעבורה האווירית. במסגרת העבודות ניסתה החברה להחליף חיבורי תקשורת ישנים המבוססים על כבלי נחושת בחיבורי סיבים אופטיים, בניסיון להיפטר מטכנולוגיית תקשורת ותיקה שמקצה ערוצי תקשורת לפי חלונות זמן, ולעבור לרשת חדשה יותר שמעבירה מידע באמצעות פקטות.
אלא שבמהלך השדרוג משהו השתבש. לפי דאפי, ראוטר שהיה מעורב במעבר החל להציף ראוטרים אחרים ברשת בבקשות חיבור. כמה בקשות? יותר מ-1,000 ניסיונות התחברות בכל 4-5 שניות, כלומר קצב של יותר מ-200 בקשות בשנייה. ממש DoS מבית. העומס החריג הזה התפשט לחלקים נוספים של רשת התקשורת והוביל לפגיעה ביציבות. זאת מכיוון שמרכזי בקרת התעבורה האווירית משתמשים ברשת כדי להעביר מידע חיוני לפקחים, כולל נתוני מכ"ם ותקשורת הנדרשת לניהול בטוח של המטוסים במרחב האווירי. כשהנתבים החלו לסבול מעומס חריג, נוצרו שיבושים לסירוגין בתקשורת ובזרימת נתוני המכ"ם.
חשוב לציין כי למרות שה-FAA פרסמה סקירה טכנית מקיפה יותר מזו של מיקרוסופט, עדיין אין לה תשובה סופית לשאלה מדוע החל הראוטר להציף את הרשת. כרגע נבדקות שתי אפשרויות לכך: הראשונה היא טעות אנוש או תקלה בהתקנה מצד אנשי L3Harris, והשנייה היא שהראוטר שהותקן היה תקול.
והנזק? יותר מארבע שעות של מטוסים מקורקעים, יותר מ-9,200 טיסות בוטלו ביום שישי וכ-7,500 טיסות נוספות עוכבו. בשבת בוטלו יותר מ-6,400 טיסות ויותר מ-8,000 עוכבו ומאות נוספות בוטלו כבר היום – כך שהתקלה אמנם טופלה אך ממשיכה לחרב את לו"ז חברות הטיסה מכיוון שכל עיכוב או ביטול משפיע על טיסות נוספות.
KioskNews shows a cleaned-up reading view extracted from the publisher’s page — the original always lives on their site, not ours.