كيف بُني كاشف الذكاء الاصطناعي من Textumi وكيف اختُبر

مصنِّف مستقل لكل لغة

تتشارك الأوكرانية واللغات الثماني عشرة التي أُضيفت لاحقًا مُرمِّزًا واحدًا متعدد اللغات، وهو نموذج يحوّل النص إلى أرقام. هذا المُرمِّز مجمَّد، أي أن أوزانه لا تتغير أبدًا. وفوقه يعمل مصنِّف صغير مدرَّب على لغة واحدة فقط.

يُقرأ النص الطويل على نوافذ متتالية، وتُجمع نتائجها في درجة واحدة للنص كله. كما تُقيَّم ما يصل إلى ثلاث فقرات طول كل منها 50 كلمة أو أكثر على حدة، وهي المقاطع التي يبرزها الكاشف.

للإنجليزية نموذج أقدم ومستقل: مُرمِّز إنجليزي مجمَّد خاص بها، ومصنِّفات درّبها Textumi فوقه، ونموذج ثانٍ تُدمج إشارته مع إشاراتها وفق قاعدة ثابتة.

يُقيَّم النص دائمًا بمصنِّف لغته. أما اللغة التي ليس لها مصنِّف معتمد فتحصل على رسالة خطأ، لا على درجة مستعارة من لغة أخرى.

من أين تأتي نصوص التدريب

تأتي النصوص البشرية للغات الثماني عشرة من مشاريع Wikimedia: أخبار من ويكي الأخبار، ومقالات من ويكيبيديا، وصفحات النقاش في ويكيبيديا. وليس للهندية والإندونيسية والفيتنامية والعبرية والدنماركية ويكي أخبار، فحلّت محلها كتب تعليمية من ويكي الكتب.

كل نص فقرة نثرية كاملة طولها بين 80 و280 كلمة، مأخوذة من آخر مراجعة لصفحتها قبل عام 2020. فالتاريخ هو الدليل على أن إنسانًا كتبها. ولا يُصنَّف أي نص على أنه بشري لأن كاشفًا آخر قال ذلك.

تُستبعد البذور التي كتبتها برامج آلية والإشعارات المكررة من صفحة إلى أخرى. وتقلّل المرشّحات منها، لكنها لا تستطيع التقاطها كلها حتى آخر واحد.

لكل نص بشري نظير آلي في الموضوع نفسه والنوع نفسه واللغة نفسها، وبطول متقارب. وقد كتب هذه النظائر نموذجان واسعا الانتشار من نماذج الذكاء الاصطناعي لدى مزوّدين مختلفين، كلٌّ منهما لنصف المصادر. واستُبعدت الإجابات المبتورة، أو التي نسخت مصدرها، أو التي لم تكن نثرًا عاديًا.

المدوّنة الأوكرانية أقدم: فهي تضم نصوصًا تاريخية من Wikimedia ونصوصًا آلية من نموذج واحد. ولا تُستخدم أي نصوص من العملاء في تدريب أي كاشف.

اختبار مغلق يُفتح مرة واحدة لكل إصدار

تُجمَّع النصوص بحسب المصدر، فتبقى فصول الكتاب التعليمي الواحد أو أرشيفات صفحة النقاش الواحدة معًا. وتُقسَّم المجموعات مرة واحدة إلى ثلاثة أجزاء: التدريب، والمعايرة، والاختبار. ويقع النص البشري ونظيره الآلي دائمًا في الجزء نفسه.

يضم الاختبار نحو 200 مجموعة مصادر. ويبقى مغلقًا أثناء اختيار المصنِّف وتحديد عتبته، ثم يُفتح مرة واحدة.

إذا أخفق الإصدار، لا يُستخدم ذلك الاختبار مرة أخرى. فتتحول نصوصه إلى بيانات تدريب، ويُختبر الإصدار التالي على مجموعات مصادر جديدة لم يرها أي إصدار سابق. وهذا يمنعنا من ضبط المصنِّف حتى يتوافق مصادفةً مع امتحانه.

كيف تُحدَّد العتبة وتصنيفات النتيجة

في اللغات الثماني عشرة توضع العتبة حيث لا يُصنَّف على أنه آلي أكثر من 2 من كل 100 نص بشري. ويُحسب ذلك على نصوص بشرية لم يتعلّم منها المصنِّف، وكانت في الإصدارات الأولى هي جزء المعايرة.

أما الإصدارات التي صُنعت بعد 12 أكتوبر 2026 فتحسبها على كل نص خارج الاختبار، ويُقيَّم كل نص بمصنِّف لم يرَ مجموعة مصادره قط. وتُجمَّد العتبة قبل فتح الاختبار.

تُبقي هذه القاعدة الإنذارات الخاطئة نادرة عن قصد، وتقبل في المقابل أن تفلت نصوص آلية أكثر. وهي لا تحوّل الدرجة إلى احتمال.

توضع عتبة كل مصنِّف عند 0.5 على مقياس النموذج من 0 إلى 1، وهذه النقطة هي حد الإشارة. وفي textumi.com تُعرض الدرجة دون رقم: إبرة على مؤشر يمتد من «إنسان» إلى «ذكاء اصطناعي»، وواحد من خمسة تصنيفات.

لا يحصل النص الذي يقل عن 50 كلمة على أي تصنيف، بل يعرض Textumi بدلًا منه «النص أقصر من أن يُحكم عليه». وكل تصنيف تقدير مبني على أسلوب النص، لا نسبة مقيسة من النص الآلي ولا دليل على هوية الكاتب. أما مساعد الذكاء الاصطناعي المرتبط عبر MCP فيتلقى الدرجة نفسها رقمًا.

المعيار الذي يجب أن يجتازه الإصدار قبل إطلاقه

لا يُتاح إصدار لإحدى اللغات الثماني عشرة إلا إذا ضم اختباره 150 نصًا بشريًا و150 نصًا آليًا على الأقل، وتحققت فيه الشروط الثلاثة التالية كلها:

• ألا يُصنَّف على أنه آلي أكثر من 5% من النصوص البشرية، كي تبقى الإنذارات الخاطئة قليلة؛
• أن يُكتشف 60% على الأقل من النصوص الآلية في الاختبار كله؛
• أن يُكتشف 50% على الأقل من النصوص الآلية في كل مجال من مجالات المدوّنة: الأخبار أو الكتب التعليمية، والمقالات الموسوعية، والنقاشات.

قبل الاعتماد، يُحمَّل المصنِّف المُصدَّر بالشيفرة نفسها التي تعالج الطلبات، وتُقارن درجاته بالدرجات التي أعطاها أثناء التدريب.

اللغة التي لا يجتاز إصدارها هذا المعيار لا تُتاح. فالتشيكية لم تجتزه، ولذلك لا يدعم Textumi اللغة التشيكية.

الهولندية هي الاستثناء الوحيد. فقد قصّر إصدارها الحالي بفارق ضئيل: إذ اكتشف 59.8% من النصوص الآلية بينما المطلوب 60%، و49.4% في المقالات الموسوعية بينما المطلوب 50%. وقرّر Textumi إتاحتها رغم ذلك، وأبقى القاعدة نفسها دون تغيير.

ما الذي يخبرك به الإصدار المُطلَق

الإصدار المُطلَق استوفى القاعدة مرة واحدة، على نثر Wikimedia ونصوص من نموذجين للذكاء الاصطناعي. وهذا يصف سلوكه على هذا النوع من المواد. ولا يضمن دقته على نصوص أخرى، ولا يعطي احتمالًا معايَرًا لهوية الكاتب.

كاشفا الإنجليزية والأوكرانية هما الأقدم في الخدمة. فقد اختُبر المصنِّف الأوكراني على 200 نص بشري و198 نصًا آليًا من 200 مجموعة مصادر، واختُبر النموذج الإنجليزي على مجموعة صغيرة محجوزة من 80 نصًا بشريًا و20 نصًا آليًا. ودرجاتهما أيضًا إشارات غير معايَرة.

ما لا تغطيه الاختبارات

• الأنواع الأخرى من الكتابة. على مجموعة صغيرة من النصوص الآلية من أنواع أخرى، مثل الإشعارات والشكاوى والتعليمات، أغفلت كواشف الفرنسية والفيتنامية والتركية والإندونيسية معظمها، وأغفل كاشفا السويدية والهولندية نحو نصفها. ولم تُفحص البرتغالية والعربية والبولندية والألمانية والإيطالية والنرويجية (بوكمول) والدنماركية على أنواع أخرى.
• النصوص القصيرة. يبلغ طول مقتطفات التدريب 80 كلمة على الأقل. وتحت 50 كلمة لا يعطي Textumi أي تصنيف، وتبقى النتيجة على نص يتجاوز ذلك بقليل أقل موثوقية في كل اللغات.
• التأليف المختلط والمحرَّر. تضم المدوّنة نصوصًا بشرية بالكامل وآلية بالكامل، لذا تقع المسودة الآلية المحرَّرة أو النص البشري المصقول بعناية خارج ما اختُبر.
• نماذج الذكاء الاصطناعي الأخرى. تأتي النصوص الآلية في المدوّنة من نموذجين، ولم تكن نصوص أي مولّد آخر جزءًا من الاختبار.
• الإنجليزية على نطاق واسع. فُحص النموذج الإنجليزي على مجموعة أصغر بكثير من مجموعات كواشف اللغات الأخرى.

لماذا تُصنَّف الكتابة البشرية على أنها آليةكل لغة وحالتها

كيف تتغير الإصدارات

لكل مصنِّف رقم إصدار. والإصدار الجديد يعني تقسيمًا جديدًا للمدوّنة واختبارًا مغلقًا جديدًا، وأي تغيير في العتبة يحتاج إلى تحقق خاص به وإلى سجل للإصدار.

يواصل Textumi العمل على جودة الكاشف، ويمر كل إصدار جديد بالقاعدة نفسها. ولا يُحكم على الإصدار إلا بمصادر لم يرها من قبل، وكل إطلاق قرار مستقل. وحين تتغير المنهجية، تتغير هذه الصفحة وتاريخها معها.