ماذا تعني درجة الكشف عن الذكاء الاصطناعي الخاصة بك؟

تقوم بفحص مقال أحد الطلاب أو مقال كاتب مستقل باستخدام أداة الكشف عن النصوص المكتوبة بواسطة الذكاء الاصطناعي. فيظهر رقم كبير وواضح على الشاشة: 65% من الذكاء الاصطناعي. ماذا ستفعل بعد ذلك؟

لا تشبه درجات الكشف عن المحتوى الذي تم إنشاؤه بواسطة الذكاء الاصطناعي معايير التقييم التقليدية، حيث يكون "النجاح" و"الرسوب" واضحين. فالفرق الدقيق بين "تم إنشاؤه بالكامل بواسطة الذكاء الاصطناعي" و"تم تحريره بواسطة الذكاء الاصطناعي" آخذ في التطور، وكذلك أنظمة الكشف لدينا في Pangram.

يشرح هذا الدليل النسب المئوية البسيطة بلغة واضحة ومفهومة. وسنستعرض كيف يحسب برنامج فحص الدرجات القائم على الذكاء الاصطناعي هذه النسب، وماذا تعني فترات الثقة، وكيفية تحديد الحد الأدنى المناسب لكاشف الذكاء الاصطناعي لاتخاذ الإجراءات اللازمة.

ما الذي تشير إليه هذه النسبة المئوية في الواقع؟

إذا قمت بمسح مستند ضوئيًا باستخدام أداة الكشف عن الذكاء الاصطناعي، فستحصل على نتيجة بنسبة مئوية. على سبيل المثال، «50٪». وبالتالي، وفقًا لأداة التحقق من النسبة المئوية للذكاء الاصطناعي، فإن 50٪ من هذا المستند يحتوي على نصوص تم إنشاؤها بواسطة الذكاء الاصطناعي أو بمساعدة الذكاء الاصطناعي.

مثال على درجة الكشف باستخدام الذكاء الاصطناعي

لا تعامل أدوات الكشف المتقدمة القائمة على الذكاء الاصطناعي المستند على أنه كتلة نصية واحدة ضخمة. بل تقوم هذه الأدوات بتقسيم النص إلى مقاطع وجمل وفقرات. ويتم تقييم هذه الأجزاء الفردية باعتبارها مقاطع.

إذا حصلت على درجة 30٪ في ورقة بحثية من 10 صفحات، فهذا يعني على الأرجح أن ما يقارب ثلاث صفحات من النص تظهر الأنماط التي تميز نماذج اللغة الكبيرة (LLM).

قراءة طيف درجات الذكاء الاصطناعي

إذا كنت تستخدم أداة كشف الذكاء الاصطناعي وحصل مستند معين على درجة منخفضة (على سبيل المثال، 30٪ من النص مولد بواسطة الذكاء الاصطناعي)، فهذا يشير عادةً إلى أنه مستند مختلط. وعادةً ما يكون المستند المختلط قد كُتب بواسطة شخص ثم تم تحريره بمساعدة أداة ذكاء اصطناعي، أو تمت إضافة نص مولد بواسطة الذكاء الاصطناعي إليه.

مزيج من المحتوى الذي تم إنشاؤه بواسطة الذكاء الاصطناعي والمحتوى الذي كتبه البشر

غالبًا ما تظهر درجة الكشف المدعومة بالذكاء الاصطناعي عندما يقوم الكاتب بما يلي:

• يستخدم أدوات مثل Grammarly.
• يطلب من برنامج LLM، مثل ChatGPT، «تنقيح» الفقرات التي كتبها.
• يستخدم الذكاء الاصطناعي لترجمة لغتهم الأم إلى الإنجليزية.

غالبًا ما تظهر نسبة عالية في اختبار الكشف عن الذكاء الاصطناعي عندما يكون «الحمض النووي اللغوي» للنص منشأً بشكل ساحق عن الذكاء الاصطناعي. وهذا يعني عادةً أن كاتب النص قد أدخل موجهًا إلى نموذج لغوي كبير (LLM)، ثم قام بنسخ ولصق الناتج المباشر لهذا النموذج مع إجراء بعض التعديلات عليه.

هل برامج التحقق من الدرجات التي تعمل بالذكاء الاصطناعي دقيقة؟

لا يمكننا التحقق من صحة نتائج الأدوات الأخرى، لكن أدوات الفحص التي تعمل بالذكاء الاصطناعي والمخصصة للشركات، مثل Pangram، تتمتع بدقة عالية (99.98٪). وللمساعدة في تقييم دقتها، توفر معظم أدوات الفحص هذه مقياس "الثقة" الذي يوضح مدى ثقة النموذج في نسبة الكشف التي توصل إليها.

تكمن إجابة السؤال «هل أدوات فحص الذكاء الاصطناعي دقيقة؟» في حقيقتين: تُستخدم النماذج الإحصائية لتحديد ما إذا كان النص قد تم إنشاؤه بواسطة الذكاء الاصطناعي، وتعمل هذه النماذج على أساس الاحتمالات وليس اليقين المطلق.

إذا كنت تستخدم أداة فحص للذكاء الاصطناعي تعتمد على تقييم ثنائي الأبعاد للمحتوى المكتوب، فإن أداة مثل Pangram يمكن أن تساعدك في تحديد الأجزاء المحددة التي تشير إلى كتابة بواسطة الذكاء الاصطناعي.

النتيجة "المختلطة"

من الحقائق البارزة في سير العمل المعاصر وجود المحتوى «المختلط» الذي يجمع بين الكتابة والتحرير البشريين والكتابة والتحرير بمساعدة الذكاء الاصطناعي. ولهذا السبب، تقوم أدوات مثل Pangram 3.0 (والإصدارات الأحدث) بتصنيف النصوص وفقًا لمقياس يتراوح بين: «بشري بالكامل»، و«بمساعدة طفيفة من الذكاء الاصطناعي»، و«بمساعدة معتدلة من الذكاء الاصطناعي»، و«من إنتاج الذكاء الاصطناعي بالكامل».

نتائج درجات الذكاء الاصطناعي المختلطة

يُعد تصنيف النصوص التي تم إنشاؤها بواسطة الذكاء الاصطناعي على نطاق متدرج أمرًا مهمًا؛ لأن النص الذي يحصل على درجة 10٪ في فئة "بمساعدة طفيفة من الذكاء الاصطناعي" قد يُعامل بشكل مختلف في المدارس أو في السياسات التحريرية مقارنةً بمقال حصل على درجة 95٪ في فئة "تم إنشاؤه بالكامل بواسطة الذكاء الاصطناعي". ويُظهر لك التمييز المحدد الأجزاء التي تم إنشاؤها بواسطة الذكاء الاصطناعي بالضبط.

ما هي عتبات درجات الذكاء الاصطناعي التي تستدعي اتخاذ إجراء؟

لا يوجد «رقم سحري» عام يستدعي اتخاذ إجراءات تصحيحية، ولكن كأفضل ممارسة، غالبًا ما تشير درجات الكشف عن الذكاء الاصطناعي التي تقل عن 20% إلى استخدام أدوات مساعدة رقمية عادية في الكتابة. أما الدرجات التي تزيد عن 60% فتستدعي في الغالب إجراء محادثة مباشرة حول أصالة كتابة الشخص المعني.

يجب عليك ضبط عتبة كاشف الذكاء الاصطناعي بحيث تعكس سياساتك المتعلقة بالذكاء الاصطناعي. على سبيل المثال، إذا كانت سياستك تسمح باستخدام «الذكاء الاصطناعي لتوليد الأفكار، ولكن ليس لصياغة النص نفسه»، فإن الحصول على نسبة 40٪ قد يستدعي إجراء تحقيق. أو، إذا كانت سياستك تنص على «عدم استخدام الذكاء الاصطناعي في أي جزء من عملية الكتابة»، فمن المرجح أن تستدعي حتى نسبة 15٪ إجراء تحقيق.

تعد درجة الكشف التي تحصل عليها من الذكاء الاصطناعي أداة تشخيصية. فإذا ظهرت درجة عالية، يمكنك الاستعانة بالمقاطع التي تم تمييزها في Pangram وتقرير«عبارات الذكاء الاصطناعي»للجلوس مع الكاتب وطلب توضيح طريقة صياغته للنص. وقد يؤدي ذلك إلى توضيح الأمور وتقديم التوجيه، وبالتالي الوصول إلى النتيجة التي تسعى إليها أنت والكاتب على حد سواء.

الكشف عن الذكاء الاصطناعي ليس مسألة ثنائية من نوع "نجاح/فشل"

تُعد «بانجرام» أداة تحليلية دقيقة توفر نظرة ثاقبة على العمليات التي تشكل أسلوب الكتابة المعاصر. ومن خلال الفهم الدقيق لمعنى «درجة الذكاء الاصطناعي»، يمكن للمهنيين الحفاظ على معايير النزاهة بثقة مع معاملة الكُتّاب بإنصاف.

لا داعي للتخمين بشأن معنى الأرقام. احصل على رؤى تفصيلية ومفهومة للجميع حول مؤلفي النصوص من خلال تحليل الشرائح الذي يقدمه Pangram.

امسح مستندك ضوئيًا