تأخيرات في المطالبات، مشاكل نشر المحفظة وعدم استقرار النظام واجه حدث مطالبات الإرسال الجوي اليوم مشكلتين رئيسيتين أثرتا على تجربة المستخدم: نافذة مطالبة متأخرة وفشل في إنشاء المحفظة. فيما يلي تفصيل واضح لما حدث، ولماذا حدث، وكيف أثر على المستخدمين، وما الذي فعلناه لضمان عدم فقدان أي رموز. المشكلة 1: تأخير المطالبة (12:15 ظهرا بالتوقيت العالمي المنسق → 12:35 ظهرا بتوقيت UTC) كانت المشكلة الأولى خطأ يدوي في التشغيل. خلال الزيادة الأولية في النشاط، اتخذ أحد مهندسينا قرارا تحت ضغط منعنا دون قصد من تفعيل وظيفة المطالبة في الوقت المحدد. من باب الحذر - ولتجنب تفعيل المطالبات في حالة غير مؤكدة - قررنا عدم المضي قدما حتى يتم التحقق الكامل من الوضع. تأثير: تأخر المطالبة بحوالي 20 دقيقة. بمجرد تفعيله في الساعة 12:35 ظهرا بتوقيت UTC، تمكن العديد من المستخدمين من المطالبة فورا دون أي مشاكل أخرى. كان هذا خطأ مباشرا حدثا في لحظة ضغط عالية. نحن نطبق إجراءات حماية لمنع حدوث أخطاء مماثلة خلال الأحداث ذات الحجم الكبير المستقبلية. المشكلة 2: إخفاقات إنشاء المحفظة المشكلة الثانية والأهم كانت تتعلق بفشل نشر المحفظة، مما أثر على المستخدمين الذين لم يكونوا قد أنشأوا محفظة ألمانك قبل الإرسال. ماذا حدث: هجوم DDoS أثناء الحمل الذروي تعرضت بنيتنا التحتية لهجوم شديد من DDoS في الوقت الذي كانت فيه المحافظ الجديدة تنشر. أدى ذلك إلى تعطيل خدمات الواجهة الخلفية المسؤولة عن التحقق من إنشاء المحفظة ومعالجة انتقالات الحالة. لم يتأثر المستخدمون الذين لديهم محافظ موجودة أي شخص أنشأ محفظة التقويم قبل الحدث كان بإمكانه المطالبة بشكل طبيعي بمجرد تفعيل المطالبات....