الأبحاث · القياسات

جولةُ البرمجة الأولى: GAIBRA أمام ChatGPT وGemini وClaude Sonnet وDeepSeek

مهامُّ برمجيّةٌ يطلبها المطوّرون كلَّ يوم، أجاب عنها المتنافسون الخمسة وحكم عليها نموذجان لغويّان بعد نزع الأسماء — والكودُ شُغّل باختباراتٍ كُتبت قبل رؤيته. نبدأ بنتيجة الإصدار الحاليّ من GAIBRA، ثمّ كيف وصل إليها، ثمّ الجولةَ كاملةً بكلّ ردٍّ ودرجة — ما ربحناه وما خسرناه.

كلُّ الأبحاث

الإصدارُ الحاليّ · 7 سيناريوهات
GAIBRA 96.3Claude Sonnet 91.0
المركزُ الأوّل · عند المحكّمَين كليهما
6 من 7
ردودٌ غيرُ دقيقة · الإصدارُ الحاليّ
0 من 7الاختبارات 96/96

الخلاصة

  • على الإصدار الحاليّ (v2.31.03 فما بعد · 16–29 أكتوبر) حلّ GAIBRA أوّلاً في 6 من 7 سيناريوهات عند المحكّمَين كليهما، بمجموع 96.3 مقابل 91.0 لـ Claude Sonnet، ونجح في 96 من 96 اختباراً عند التشغيل، ولم يُسجَّل له ردٌّ غيرُ دقيق.
  • بدأ الجولةَ خلف Claude Sonnet وأنهاها متقدّماً عليه: الفرقُ عنه −2.0 ثمّ −3.6 ثمّ +5.3 — وهو ما أضافته الإصلاحاتُ العامّة بين الكتل.
  • الجولةُ كاملةً تخلط تسعة إصدارات من GAIBRA، فمتوسّطُها يصف تاريخ التطوير لا المنتج اليوم. ننشرها كاملةً في آخر الصفحة لأنّها ما جرى.
  • العيّنةُ على الإصدار الحاليّ صغيرة — سبعةُ سيناريوهات. تُعاد على عيّنةٍ كاملةٍ بإصدارٍ مجمَّد في الجولة التالية.

ما يجب أن تعرفه قبل أن تقرأ

  • المحكّمان نموذجان لغويّان، لا خبراءُ بشر: Claude Opus من Anthropic، وGrok من xAI. ننشر درجاتِ كلّ محكّمٍ منفصلةً، ونضع علامةً على كلّ سيناريو اختلفا فيه على المركز الأوّل.
  • ردودُ GAIBRA مضبوطةٌ على أطول خياراته، وعددُ كلمات كلّ ردٍّ منشور.
  • GAIBRA تغيّر خلال الجولة. كنّا نُصلحه بين السيناريوهات إصلاحاتٍ عامّة، فمرّت الجولة على تسعة إصدارات (v2.29.01 ⟵ v2.32.03)، والمنافسون اختُبروا كما هم.

النتيجة على الإصدار الحاليّ

v2.31.03 فما بعد · 16–29 أكتوبر 2026 · السيناريوهات CB-3-01 … CB-3-07

المتنافسالمجموععند Opusعند Grokالأوّل عند Opusالأوّل عند Grokالاختبارات الناجحةردودٌ غيرُ دقيقةمتوسّط الكلمات
GAIBRA96.394.098.66696/96 (100.0%)0 من 72,062
Claude Sonnet91.090.491.61195/96 (99.0%)1 من 71,259
ChatGPT82.779.086.50087/95 (91.6%)2 من 71,056
DeepSeek76.069.982.10083/96 (86.5%)5 من 71,101
Gemini67.063.071.00086/96 (89.6%)6 من 7677

اتّفق المحكّمان على صاحب المركز الأوّل في السيناريوهات السبعة كلّها. ولم يقع في هذه الكتلة عطلُ نسخ.

التطوّر عبر الإصدارات

الكتلةالإصداراتالسيناريوهاتGAIBRAClaude Sonnetالفرقأوّلُ GAIBRAردود GAIBRA غيرُ الدقيقة
١ · 3–8 أكتوبرv2.29.01 … v2.30.021083.585.5-2.03 من 107 من 10
٢ · 9–15 أكتوبرv2.30.03 … v2.31.011083.987.5-3.77 من 103 من 10
٣ · 16–29 أكتوبرv2.31.03 … v2.32.03796.391.0+5.36 من 70 من 7

في الكتلة ٢: في CB-2-09 (تدقيقٌ أمنيّ) أعاد GAIBRA رسالةَ تعذّرٍ بدل ردٍّ كامل فحلّ أخيراً، وهو محسوبٌ كما هو؛ وفي CB-2-03 لم يُنسخ ملفُّ كود Claude Sonnet إلى المحكّمين (التفصيلُ أدناه).

معدّلُ النتائج غير الدقيقة

نعدّ الردَّ غيرَ دقيق إذا فشل فيه اختبارٌ واحدٌ على الأقلّ عند التشغيل، أو نال في معيار «صدق الشرح» 6 من 12 فأقلّ عند أيّ محكّم. ولـ GAIBRA عبر الكتل الثلاث: 7 من 10 ⟵ 3 من 10 ⟵ 0 من 7. هذا أوّلُ قياسٍ لهذا المعدّل، ونحسبه بالتعريف نفسه في كلّ جولة.

GAIBRAClaude SonnetChatGPTDeepSeekGemini
ردودٌ غيرُ دقيقة (من 27)10 (37%)5 (19%)10 (37%)20 (74%)22 (81%)
اختبارٌ فاشل (من 24 بتشغيل)7481311
صدقٌ ≤ 6 من 126271620
الاختباراتُ الفاشلة من مجموعها5.4%9.6%13.0%18.6%18.6%

عتبةُ الصدق (6 من 12) وُضعت بعد الاطّلاع على درجات هذه الجولة، فهي خطُّ أساس؛ ومن الجولة التالية تُطبَّق كما هي دون تعديل.

الجولةُ كاملة — سجلٌّ تاريخيّ

27 من 40 سيناريو مخطَّطة · 3–29 أكتوبر 2026 · كلُّ الإصدارات

المتنافسالمجموععند Opusعند Grokالأوّل عند Opusالأوّل عند Grokالأخيرالاختبارات الناجحةردودٌ غيرُ دقيقةمتوسّط الكلمات
Claude Sonnet87.786.688.81482301/333 (90.4%)5 من 271,215
GAIBRA87.084.389.712162315/333 (94.6%)10 من 271,626
ChatGPT79.776.583.0033289/332 (87.0%)10 من 271,068
DeepSeek72.368.776.0105271/333 (81.4%)20 من 271,405
Gemini65.062.167.90015271/333 (81.4%)22 من 27688
  • اختلف المحكّمان على المركز الأوّل في 8 سيناريوهات، كلُّها في الكتلتين ١ و٢، واختار Opus في 7 منها Claude Sonnet.
  • ملفّاتٌ لم تُنسخ: في ثلاثة ردود (Claude Sonnet في CB-1-02 وCB-2-03، وChatGPT في CB-1-04) وضع المتنافسُ الكودَ في ملفٍّ منفصل لم يُنسخ مع الردّ إلى المحكّمين، فنال 0 في التشغيل. والدرجاتُ أعلاه كما سُجّلت. ولو استُبعدت السيناريوهاتُ الثلاثة لكانت متوسّطاتُ الجولة كاملةً: Claude Sonnet 92.7 · GAIBRA 86.7 · ChatGPT 81.8. لا يمسّ هذا نتيجةَ الإصدار الحاليّ.
  • طولُ الردّ: ردودُ GAIBRA هي الأطولُ في المتوسّط، وكان أطولُ ردٍّ هو الفائزَ في 17 من 27 سيناريو — والمحكّمان كانا مأمورَين ألّا يكافئا الطول.

كلُّ سيناريو

المجموعُ من 100، والأعلى في كلّ صفٍّ بالخطّ العريض. افتح رقمَ السيناريو لترى نصَّه والردودَ الخمسةَ كما وصلت المحكّمين.

#التاريخالإصدارالمهمّةGAIBRAClaude SonnetChatGPTDeepSeekGeminiالأوّل عند Opus · Grokملاحظة
CB-1-012026-10-03v2.29.01تتبّع خطأ وإصلاحه · Python · تشغيل76.394.574.868.362.0Sonnet · Sonnet—
CB-1-022026-10-03v2.29.01كتابة ميزة جديدة · JavaScript/TypeScript · تشغيل91.88.579.876.067.7GAIBRA · GAIBRAملفُّ كود Claude Sonnet لم يُنسخ
CB-1-032026-10-03v2.29.01قواعد بيانات وSQL · SQL · تشغيل90.089.583.083.515.0DeepSeek · Sonnetخلافُ محكّمين
CB-1-042026-10-03v2.29.01إعادة هيكلة · C# · تشغيل80.597.021.088.075.2Sonnet · Sonnetملفُّ كود ChatGPT لم يُنسخ
CB-1-052026-10-03v2.29.01تتبّع خطأ وإصلاحه · Go · تشغيل88.397.093.046.074.3Sonnet · Sonnet—
CB-1-062026-10-04v2.29.02خوارزمية · Java · تشغيل57.093.589.555.525.0Sonnet · Sonnet—
CB-1-072026-10-05v2.29.02كتابة اختبارات · Python · تشغيل75.394.773.889.278.5Sonnet · Sonnet—
CB-1-082026-10-06v2.29.02API وتكامل · JavaScript/TypeScript · تشغيل91.093.576.581.571.0Sonnet · GAIBRAخلافُ محكّمين
CB-1-092026-10-07v2.30.02كتابة ميزة جديدة · C# · تشغيل96.594.084.080.074.5Sonnet · GAIBRAخلافُ محكّمين
CB-1-102026-10-08v2.30.02مراجعة كود · C++ · بلا تشغيل88.593.091.579.068.5Sonnet · ChatGPTخلافُ محكّمين
CB-2-012026-10-09v2.30.03تتبّع خطأ وإصلاحه · Python · تشغيل91.597.585.062.772.0Sonnet · Sonnet—
CB-2-022026-10-09v2.30.03كتابة ميزة جديدة · Python · تشغيل94.591.582.575.068.0GAIBRA · GAIBRA—
CB-2-032026-10-09v2.30.03كتابة اختبارات · JavaScript/TypeScript · تشغيل93.738.589.059.078.0GAIBRA · GAIBRAملفُّ كود Claude Sonnet لم يُنسخ
CB-2-042026-10-10v2.30.03خوارزمية · Python · تشغيل98.092.539.550.386.0GAIBRA · GAIBRA—
CB-2-052026-10-10v2.30.03قواعد بيانات وSQL · SQL · تشغيل98.093.588.533.075.5GAIBRA · GAIBRA—
CB-2-062026-10-12v2.30.04ترجمة كود · Python · تشغيل94.590.577.573.075.5GAIBRA · GAIBRA—
CB-2-072026-10-12v2.30.04إعادة هيكلة · JavaScript/TypeScript · تشغيل94.593.571.277.236.7Sonnet · GAIBRAخلافُ محكّمين
CB-2-082026-10-13v2.30.05تحسين أداء · Python · تشغيل96.093.592.084.576.0Sonnet · GAIBRAخلافُ محكّمين
CB-2-092026-10-14v2.30.05تدقيق أمني · Python · بلا تشغيل13.093.592.592.541.0Sonnet · ChatGPTخلافُ محكّمين ردُّ تعذّرٍ من GAIBRA
CB-2-102026-10-15v2.31.01تصميم معماري · — · بلا تشغيل65.091.088.567.066.5Sonnet · ChatGPTخلافُ محكّمين
CB-3-012026-10-16v2.31.03تتبّع خطأ وإصلاحه · Python · تشغيل95.084.587.087.072.0GAIBRA · GAIBRA—
CB-3-022026-10-16v2.31.03تتبّع خطأ وإصلاحه · JavaScript/TypeScript · تشغيل97.593.589.586.040.2GAIBRA · GAIBRA—
CB-3-032026-10-16v2.31.03كتابة ميزة جديدة · C# · تشغيل98.093.554.732.061.2GAIBRA · GAIBRA—
CB-3-042026-10-17v2.31.03كتابة ميزة جديدة · Java · تشغيل96.085.590.576.570.5GAIBRA · GAIBRA—
CB-3-052026-10-17v2.31.03قواعد بيانات وSQL · SQL · تشغيل98.592.089.584.076.0GAIBRA · GAIBRA—
CB-3-062026-10-19v2.31.03كتابة اختبارات · Python · تشغيل93.597.583.585.581.5Sonnet · Sonnet—
CB-3-072026-10-29v2.32.03API وتكامل · Go · تشغيل95.590.584.581.067.5GAIBRA · GAIBRA—

كيف جرت الجولة

  1. نموذجٌ ثالث (Kimi) كتب السيناريوهات، ولا يعرف كيف ستُقيَّم.
  2. أُرسل السيناريو نفسُه إلى المتنافسين الخمسة مرّةً واحدة. الردُّ الأوّل هو المحسوب.
  3. نُزع من كلّ ردٍّ ما يدلّ على صاحبه قبل التحكيم. وترتيبُ الردود أمام المحكّم كان تدويراً دوريّاً ثابتاً — يتقدّم رمزُ كلّ متنافسٍ حرفاً في كلّ سيناريو — فوقع GAIBRA في كلّ موضعٍ 5 أو 6 مرّات. لم يكن عشوائيّاً.
  4. في المهامّ التي تتطلّب تشغيلاً، كتب Opus اختباراتٍ من نصّ الطلب وحده قبل أن يرى الكود، ثمّ شغّلها على الردود الخمسة. وصحّةُ التنفيذ (35 من 100) تُحسب من نسبة الاختبارات الناجحة، لا يضعها أيُّ محكّم.
  5. لم نُعِد تشغيل GAIBRA، ولم نُصلح شيئاً لسيناريو بعينه. الإصلاحاتُ عامّة، ورقمُ الإصدار مكتوبٌ بجانب كلّ سيناريو.

تعليماتُ المحكّمين حرفاً

تعليماتُ Opus (مشروعُ التحكيم · تشغيلُ الكود مفعّل)
أنت حَكَم تقني مستقل في مهام برمجية، ولديك بيئة لتشغيل الكود. تصلك في رسالة واحدة: مهمة، وهل هي «واجب التشغيل» أم لا، وخمسة ردود مرمّزة (أ، ب، ج، د، هـ). لا تحاول معرفة مصدر أي رد.

أولاً — إذا كانت المهمة «واجب التشغيل»، فاعمل بهذا الترتيب قبل أي حكم:
1. الاختبارات أولاً، من نص المهمة وحده: استخرج الواجهة المطلوبة (توقيع الدالة أو الكلاس، أو صيغة المدخلات والمخرجات) والقيود، واكتب بين 8 و15 اختباراً: حالات عادية، وحدية، ومدخلات غير صالحة إن حددتها المهمة. احفظها في ملف قبل استخراج أي كود من الردود.
2. كل اختبار يستند إلى جملة صريحة في المهمة، وتُذكر الجملة بجانبه. ما لم تحسمه المهمة صراحة لا يُختبر، بل يُكتب في سطر «نقاط غامضة لم تُختبر».
3. الاختبارات واحدة للردود الخمسة، ولا يُعدَّل أي اختبار بعد تشغيله على أي رد.
4. جهّز بيئة اللغة وثبّت ما يلزم (dotnet-sdk-8.0، golang-go، rustc، php-cli، openjdk-21-jdk، postgresql) وتأكد أنها تعمل.
5. استخرج الكود من كل رد كما هو. ممنوع إصلاح أي خطأ فيه ولو حرفاً واحداً. المسموح الوحيد: ربط اسم الدالة في الاختبارات باسمها في الرد إن اختلف الاسم واتفق السلوك، مع تسجيل ذلك.
6. ابنِ وشغّل الاختبارات على الردود الخمسة، والمهلة 10 ثوانٍ لكل اختبار. إن لم يُبنَ الكود فالنتيجة 0 من المجموع.

ثانياً — إذا كانت المهمة «غير واجب التشغيل»: احكم مباشرة دون تشغيل.

قواعد الحكم:
1. احكم على المكتوب فقط. الطول لا يُكافأ، والحشو يُنقص من الوضوح.
2. لا تطلب رأياً بشرياً ولا معلومات إضافية، ولا تؤجل الحكم.
3. لكل خصم سبب محدد مستند إلى سطر أو جملة في الرد أو إلى نتيجة التشغيل.
4. في واجب التشغيل لا تضع درجة لصحة التنفيذ؛ تُحسب من جدول التشغيل في مكان آخر. احكم على الحقول الستة فقط، ونتائج التشغيل دليل لك في «الحالات الحدية» و«صدق الشرح».
5. صدق الشرح: يُخصم بشدة إن ادّعى الرد ما لا يفعله الكود، أو اخترع دالة أو مكتبة غير موجودة، أو ادّعى أنه اختبر ولم يفعل. ويُحتسب له الاعتراف الصريح بالحدود والافتراضات.

الحقول الستة بالترتيب:
واجب التشغيل (65): المتطلبات والقيود 15 | الحالات الحدية 10 | جودة التصميم 12 | الأمان 8 | الصدق 12 | الكفاءة 8
غير واجب التشغيل (100): صحة المحتوى 30 | الشمول 20 | العمق والترجيح 15 | قابلية التطبيق 15 | الصدق 12 | الوضوح 8

صيغة الرد — بالعربية، بهذا الترتيب:
1) جدول التشغيل (واجب التشغيل فقط): الرمز · ناجح/المجموع · الحقيقة في سطر (سبب الفشل كما ظهر).
2) جدول الدرجات: صف لكل رمز وعمود لكل حقل.
3) لكل رمز: أهم نقطتي قوة، وأهم ثلاث نقاط ضعف، وكل نقطة بدليلها.
4) سطر الحكم: جملة واحدة تحدد الفارق الحاسم بين الأفضل والذي يليه.
5) سطور الإدخال — خمسة أسطر بهذه الصيغة حرفياً، أرقام فقط دون مجموع:
أ: 14|9|11|7|11|7
ب: …
6) ملحق (واجب التشغيل فقط): الاختبارات كاملة، كل اختبار مع الجملة التي استند إليها من المهمة، ثم سطر «نقاط غامضة لم تُختبر».

---
رسالة كل سيناريو (إلى المحكّمَين معاً):
[رقم السيناريو] — واجب التشغيل / غير واجب التشغيل
[نص الطلب فقط]
الملفات الخمسة مرفقة: أ، ب، ج، د، هـ.
تعليماتُ Grok (قراءةٌ فقط)
أنت حَكَم تقني مستقل في مهام برمجية. تصلك مهمة وخمسة ردود مرمّزة (أ، ب، ج، د، هـ). لا تحاول معرفة مصدر أي رد.

قواعد الحكم:
1. احكم على المكتوب فقط. الطول لا يُكافأ، والحشو يُنقص من الوضوح.
2. لا تطلب رأياً بشرياً ولا معلومات إضافية، ولا تؤجل الحكم.
3. لكل خصم سبب محدد مستند إلى سطر أو جملة في الرد.
4. في المهام «واجب التشغيل» لا تضع درجة لصحة التنفيذ؛ تُقاس بالتشغيل الفعلي في مكان آخر. احكم على الحقول الستة فقط.
5. صدق الشرح: يُخصم بشدة إن ادّعى الرد ما لا يفعله الكود، أو اخترع دالة أو مكتبة غير موجودة، أو ادّعى أنه اختبر ولم يفعل. ويُحتسب له الاعتراف الصريح بالحدود والافتراضات.

الحقول الستة بالترتيب:
واجب التشغيل (65): المتطلبات والقيود 15 | الحالات الحدية 10 | جودة التصميم 12 | الأمان 8 | الصدق 12 | الكفاءة 8
غير واجب التشغيل (100): صحة المحتوى 30 | الشمول 20 | العمق والترجيح 15 | قابلية التطبيق 15 | الصدق 12 | الوضوح 8

صيغة الحكم — بالعربية:
1) جدول الدرجات: صف لكل رمز وعمود لكل حقل.
2) لكل رمز: أهم نقطتي قوة، وأهم ثلاث نقاط ضعف، وكل نقطة بدليلها.
3) سطر الحكم: جملة واحدة تحدد الفارق الحاسم بين الأفضل والذي يليه.
4) سطور الإدخال — خمسة أسطر بهذه الصيغة حرفياً، أرقام فقط دون مجموع:
أ: 14|9|11|7|11|7
ب: …

[رقم السيناريو] — واجب التشغيل / غير واجب التشغيل
[نص الطلب فقط]
الملفات الخمسة مرفقة: أ، ب، ج، د، هـ.

الملفّات

  • جدولُ الدرجات كاملاً — لكلّ سيناريو ومتنافس: الإصدار · الاختبارات · درجةُ كلّ محكّم · الصدق · عددُ الكلمات · الترتيب.
  • نصُّ كلّ سيناريو وردودُه الخمسة — من جدول «كلُّ سيناريو» أعلاه.
  • سبقت الجولةَ ثلاثةُ سيناريوهاتٍ تجريبيّة لاختبار الإجراء، لم تُحسب.

ما لا تقوله هذه النتائج

إنّها حكمُ نموذجين لغويّين على 27 مهمّةً برمجيّة في شهرٍ واحد، بنماذج المنافسين كما كانت يومَ الاختبار — ونتيجةُ الإصدار الحاليّ على سبعٍ منها. هي تقديرٌ نرى أنّه مفيد، لا شهادةٌ نهائيّة. ولا نقول إنّ GAIBRA الأفضل؛ نقول ما جرى في هذه الجولة، بهذه المهامّ، عند هذين المحكّمين.

ما غيّرناه بعدها

من جولة نوفمبر 2026: Opus يكتب السيناريوهات ولا يحكم، والمحكّمان Grok وKimi، وليسا من عائلة أيّ متنافس.