أعلنت Anthropic عن حلها لمشاكل تراجع أداء Claude من خلال تحديد وإصلاح ثلاث مشاكل منفصلة تسببت في تراجع استجابات Claude للمستخدمين خلال الشهر الماضي، وذلك في تقرير تحليل تفصيلي نُشر في 23 أبريل. تم إصلاح جميع المشاكل الثلاث اعتباراً من 20 أبريل في الإصدار 2.1.116، مع بقاء واجهة برمجة التطبيقات والطبقة الاستدلالية سليمة طوال الوقت.
نشأت مشاكل تراجع أداء Claude من تغييرات في Claude Code وClaude Agent SDK وClaude Cowork. المشكلة الأولى تتعلق بتحويل مستوى الجهد الاستدلالي الافتراضي من عالي إلى متوسط في 4 مارس، وكان الهدف منه تقليل الكمون لكنها أسفرت عن انخفاض في جودة الإخراج. عكست Anthropic هذا التغيير في 7 أبريل بعد أن أفاد المستخدمون بتفضيلهم للذكاء الأعلى بشكل افتراضي، مما أثر على نماذج Sonnet 4.6 و Opus 4.6.
ظهرت مشكلة ثانية من تحسين التخزين المؤقت الذي تم نشره في 26 مارس. كان التغيير مصمماً لمسح الاستدلال الأقدم من الجلسات الخاملة التي تستغرق أكثر من ساعة واحدة، لكن خطأ تسبب في مسحها في كل دور بدلاً من مرة واحدة فقط. هذا جعل Claude يبدو نسياناً وكرراراً، حيث فقد النموذج السياق بقراراته السابقة. تم إصلاح هذه المشكلة في 10 أبريل في الإصدار 2.1.101، مما أثر على Sonnet 4.6 و Opus 4.6.
مشاكل تراجع أداء Claude تتعلق بتغيير موجه النظام
تضمنت المشكلة الثالثة إضافة موجه نظام صُممة لتقليل الإسهاب في Claude Opus 4.7. في 16 أبريل، أضافت Anthropic تعليماً محدداً للطول ينص على: “حافظ على النصوص بين استدعاءات الأدوات عند ≤25 كلمة. احفظ الردود النهائية عند ≤100 كلمة ما لم تتطلب المهمة مزيداً من التفاصيل.” بينما كان الاختبار الداخلي يُظهر عدم وجود انحدارات، أظهرت التقييمات الأوسع لاحقاً انخفاضاً بنسبة 3 في المئة لـ Opus 4.6 و 4.7. عكست الشركة هذا التغيير في 20 أبريل.
أثرت كل مشكلة على قطاعات مستخدمين مختلفة على جداول زمنية مختلفة، مما أنشأ مظهر تراجع عام وغير متسق. بينما بدأت Anthropic التحقيق في التقارير في أوائل مارس، أثبت التمييز بينها وبين التباين الطبيعي في تعليقات المستخدمين صعوبة في البداية. لم تستنسخ أنماط الاستخدام الداخلية أو اختبارات التقييم المشاكل في البداية.
تحديات الاستنساخ أخرت التحديد
أثبت خطأ التخزين المؤقت صعوبة خاصة في التحديد. عقدت تجربتان غير مترابطتان جهود الاستنساخ: تجربة خادم داخلية فقط تتعلق بقائمة الانتظار للرسائل، وتغيير متعامد في كيفية عرض الاستدلال قمع الخطأ في معظم جلسات واجهة سطر الأوامر. موجود الخطأ عند تقاطع إدارة سياق Claude Code وواجهة برمجة تطبيقات Anthropic وإمكانيات الاستدلال الموسع. مرّ عبر مراجعات الكود اليدوية والمؤتمتة المتعددة واختبارات الوحدات واختبارات النهاية إلى النهاية والتحقق الآلي والاستخدام الداخلي قبل الاكتشاف.
أثناء التحقيق، استخدمت Anthropic Opus 4.7 لمراجعة مستودعات الأكواد بأثر رجعي التي أدخلت الخطأ. حدد Opus 4.7 المشكلة بينما لم يحددها Opus 4.6، مما دفع الشركة إلى الالتزام بدعم مستودعات إضافية كسياق لمراجعات الأكواد المستقبلية.
التغييرات التشغيلية لمنع التكرار
حددت Anthropic عدة تغييرات لمنع مشاكل مشابهة. ستضمن الشركة أن حصة أكبر من الموظفين الداخليين يستخدمون البناء العام الدقيق لـ Claude Code بدلاً من إصدارات الاختبار الداخلية. سوف تحسّن أيضاً أداة مراجعة الأكواد الداخلية وتشحنها للعملاء.
بالإضافة إلى ذلك، تطبق Anthropic ضوابط أكثر إحكاماً على تغييرات موجه النظام. ستشغل الشركة مجموعة واسعة من التقييمات لكل نموذج لكل تعديل موجه النظام، مستمرة في الاستئصالات لقياس تأثير كل سطر. تم بناء أدوات جديدة لتبسيط مراجعات تغيير الموجه والتدقيق. حدثت الشركة إرشادات CLAUDE.md الخاصة بها لضمان تطبيق التغييرات الخاصة بالنموذج على نماذجها المقصودة فقط.
للتغييرات التي قد تؤدي إلى مقايضة ضد الذكاء، ستضيف Anthropic فترات نقع وحزم تقييم أوسع وعمليات نشر تدريجية لاكتشاف المشاكل مبكراً. أنشأت الشركة مؤخراً حساباً على وسائل التواصل الاجتماعي لشرح قرارات المنتج والاستدلال بعمق، مع مشاركة التحديثات المماثلة في سلاسل مركزية على GitHub.
إعادة تعيين حدود الاستخدام لجميع المشتركين
أعادت Anthropic تعيين حدود الاستخدام لجميع المشتركين في 23 أبريل كتعويض عن التجربة المتدهورة. أقرت الشركة المستخدمين الذين قدموا تعليقات مفصلة من خلال أمر التعليقات أو نشروا أمثلة محددة وقابلة للاستنساخ عبر الإنترنت لتمكين التحديد والقرار من المشاكل.
“نحن نأخذ التقارير حول التراجع بجدية شديدة. لا نقوم بشكل متعمد بتدهور نماذجنا.”
Anthropic، 23 أبريل بعد الوفيات
يوضح تقرير ما بعد الوفيات المفصل نهج Anthropic لمعالجة مشاكل الأداء في نماذج الذكاء الاصطناعي الخاصة بها والتزامها بالشفافية مع المستخدمين فيما يتعلق بالمشاكل الفنية وحلها.
المصدر: anthropic.com
