عندما كاد أمر الحذف الواحد أن يقتل فيلمًا: ماذا يمكن أن تتعلمه أعمالك من الكارثة الوشيكة لبيكسار

الخطأ المطبعي الذي كاد يمحو قصة لعبة 2

تخيل هذا: إنها عام 1998، وشخص ما في بيكسار يكتب أمر لينوكس واحد—rm -rf /—في الدليل الخاطئ. في غضون ثوانٍ، يبدأ العمل الذي استمر عامًا على فيلم توي ستوري 2 في التلاشي. نماذج الشخصيات. أصول الرسوم المتحركة. مشاهد كاملة. يشاهد الفريق بينما يتفكك عالم وودي وباز، ملفًا تلو الآخر.

أسوأ؟ عندما كان المهندسون يسعون لاستعادة النسخ الاحتياطية، اكتشفوا أن نظام النسخ الاحتياطي كان يفشل بصمت لأسابيع. كان حوالي 90% من المشروع مفقودًا.

لم يكن هذا اختراقًا للعملات المشفرة أو هجومًا برمجيًا فدية. كانت عملية تنظيف ملفات روتينية سارت بشكل خاطئ - لكنها كادت تقتل واحدة من أكثر التكملات انتظارًا في تاريخ الرسوم المتحركة.

كيف أن أمًا تعمل من المنزل أنقذت اليوم

دخلت غالين سوسمان، المشرفة على الاتجاه الفني في الفيلم. أثناء إجازة الأمومة، كانت تعمل من المنزل - وهو أمر كان يعتبر تابو في ذلك الوقت. والأهم من ذلك، كان لديها البصيرة لأخذ نسخة من المشروع إلى المنزل أسبوعيًا لتبقى على اطلاع.

عندما حدثت الكارثة، أصبح لابتوب سوسمان شريان الحياة لبيكسار. نقل الفريق الجهاز بعناية إلى المكتب، واسترجع ما يكفي من الملفات لإعادة بناء الفيلم، وسلموا توي ستوري 2 في الوقت المحدد.

انضباط النسخ الاحتياطي لشخص واحد أنقذ ملايين في تكاليف الإنتاج وموعد إصدار رئيسي.

دروس استمرارية الأعمال

هذه ليست مجرد قصة حرب هوليوودية - إنها دورة متقدمة في ما يحدث عندما تفشل أنظمة النسخ الاحتياطي بصمت:

قاعدة النسخ الاحتياطي 3-2-1

• احتفظ بـ 3 نسخ من البيانات الحيوية
• التخزين على نوعين مختلفين من الوسائط
• احتفظ بنسخة واحدة في موقع خارجي

تعلمت بيكسار بطريقة صعبة أن موقع النسخ الاحتياطي الواحد ليس كافياً. نظام فاشل واحد = فقدان كامل للبيانات.

النسخ الاحتياطية المنفصلة والموجودة في موقع آخر مهمة تضمن النسخة الاحتياطية الخارجية المتصلة بشبكتك الرئيسية الحماية من برامج الفدية، وفشل الأجهزة، والكوارث المحلية. كان جهاز الكمبيوتر المحمول في منزل سوسمان بمثابة فجوة هوائية لشركة بيكسار.

RPO & RTO غير قابلة للتفاوض

• هدف نقطة الاسترداد (RPO): ما مقدار فقدان البيانات الذي يمكنك تحمله؟
• هدف وقت الاسترداد (RTO): كم بسرعة يجب أن تكون عملياتك جاهزة؟

تدعي العديد من الشركات أنها “تختبر النسخ الاحتياطية بانتظام”، ولكن عندما يحدث الكارثة، تستغرق عملية الاستعادة وقتًا أطول بكثير مما هو مخطط له - وتزداد التكلفة يوميًا.

ت controls التحكم في الأذونات تمنع الحوادث الموظف الذي قام بتحفيز الحذف كان لديه وصول كامل إلى الخادم. درس اليوم: قصر صلاحيات الحذف على المجموعات الإدارية الصغيرة فقط في الدلائل الحرجة. يتطلب الأمر مصادقة ثنائية أو موافقة ثانوية للحذفات عالية المستوى.

الخلاصة

حدثت قريبة الفشل لشركة بيكسار قبل أكثر من 25 عامًا، ومع ذلك لا تزال معظم الشركات ترتكب نفس الأخطاء: الثقة في نظام نسخ احتياطي واحد، ومنح عدد كبير من الأشخاص حق الوصول الكامل إلى المجلدات، واكتشاف فشل النسخ الاحتياطي فقط أثناء الأزمات.

يجب ألا يؤدي أمر مكتوب بشكل خاطئ إلى تعطيل مشروع بقيمة أكثر من 100 مليون دولار. قم بإعداد ضوابط مناسبة الآن - قبل أن تحتاج إليها.