هل يمكن للذكاء الاصطناعي اكتشاف أسلوب كتابة كلود؟

الصورة: Anthropic

في نوفمبر، أصدرت Anthropic تحديثًا لـ Claude.ai يتيح للمستخدمين اختيار نبرة الصوت التي سيستجيب بها المساعد. بالإضافة إلى نبرة الصوت الافتراضية، يمكن للمستخدمين الاختيار من قائمة محددة مسبقًا من "موجز" و "توضيحي" و "رسمي". هناك أيضًا وضع لأنماط الكتابة المخصصة حيث يمكنك إدخال بعض المستندات أو التعليمات لتحويلها إلى نمط الكتابة الخاص بك.

الإعدادات المسبقة واضحة تمامًا. عادةً ما تستجيب الإعدادات الموجزة بنقاط أو قوائم. أما الإعدادات التوضيحية فتنتج استجابات أطول. أما الإعدادات الرسمية فتحذف عبارة كلود الشهيرة "هذا سؤال رائع" وتكتب بطريقة احترافية للغاية. لكن من واقع تجربتي، لا تزال جميعها تبدو وكأنها صادرة عن كلود - فهي لا تختلف عن طرح سؤال على المساعد وطلب إجابة موجزة/توضيحية/رسمية.

ولكن ما نريد اختباره هو نظام الكشف عن الذكاء الاصطناعي. طلبت من كل أسلوب كتابة في Claude كتابة مقال من 250 كلمة عن سقوط روما. دعونا نلقي نظرة على النتائج.

إخراج كلود القياسي إخراج كلود الموجز إخراج توضيحي من كلود إخراج كلود الرسمي

كل هذه العبارات لا تزال تشبه إلى حد كبير أسلوب كتابة كلود المعتاد. ولا تبدو مختلفة كثيرًا عن طلب إخراج "موجز" أو "رسمي" بشكل مباشر في الموجه.

لنرى ما إذا كان بإمكاننا تحسين الأداء باستخدام أنماط الكتابة المخصصة. الواجهة رائعة جدًا، فكل ما عليك هو نسخ بعض النصوص وستقوم بإنشاء موجه كامل لك. قمت بإنشاء نمط مخصص بناءً على منشورات مدونتي الخاصة. أطلق عليه كلود اسم "Tech Storyteller". وقمت بإنشاء نمط آخر من بعض منشورات مدونة Slate Star Codex وأطلق عليه كلود اسم "Scholarly Skeptic". يبدو أن هذه الميزة تستخدم LLM لإنتاج حوالي ثلاث جمل من التعليمات لأسلوب الكتابة. هناك أيضًا قسم لأمثلة المستخدمين، ولكن لدهشتي، فإن الأمثلة المقدمة إلى LLM مولدة بالكامل، وتبدو عامة جدًا مقارنة بالأمثلة المصدرية.

محفز قصص التكنولوجيا القاص التقني كلود أوتبوت الشكوك العلمية المنتج العلمي المتشكك كلود

لا تزال هذه النصوص تبدو بوضوح وكأنها مكتوبة بواسطة الذكاء الاصطناعي، ولا يزال نموذج الكشف الخاص بـ Pangram يكتشفها.

نظرًا لأنني لاحظت أن الأمثلة التي تم إنشاؤها بواسطة الذكاء الاصطناعي قد تكون ناقصة، قمت بتحرير مطالبات أسلوب الكتابة يدويًا لتشمل بدلاً من ذلك الأمثلة المصدرية: منشورات مدونتي ومنشورات Slate Star Codex.

تحديث إخراج كلود، راوي القصص التقنية تحديث نتائج الباحث المتشكك كلود

لا يزال من الواضح أنه كتابة بواسطة الذكاء الاصطناعي. هل كان أفضل أم أقل شبهاً بالذكاء الاصطناعي؟ ليس بشكل خاص، على الرغم من أن إزالة العنوان الذي يبدو شديد الشبه بالذكاء الاصطناعي في Tech Storyteller كان خطوة في الاتجاه الصحيح. أحد الأشياء التي لاحظتها هو أن تعليمات أسلوب الكتابة تحدثت عن تقديم "معلومات معقدة" أو "الاعتراف بالتعقيد"، مما أدى في الغالب إلى استخدام الذكاء الاصطناعي لكلمة "معقد" أكثر من المقالات الأخرى. ليس بالضبط أسلوب الكتابة الذي طلبناه.

ملاحظة أخيرة، استخدمت لوحة معلومات Pangram لفحص ما الذي يكشف بالضبط أن هذه المقالات كُتبت بواسطة الذكاء الاصطناعي. كانت العديد من العبارات المستخدمة أكثر شيوعًا في الكتابة بواسطة الذكاء الاصطناعي منها في الكتابة البشرية العادية.

لوحة معلومات Pangram

على سبيل المثال، وجد نموذجنا أن عبارة "معقدة ومتعددة الأوجه" تستخدم 700 مرة أكثر في الكتابة التي تتم بواسطة الذكاء الاصطناعي مقارنة بالكتابة البشرية. وتستخدم عبارة "تفاعل معقد" 100 مرة أكثر. وتستخدم عبارة "لعبت دورًا حاسمًا" 70 مرة أكثر. هذه العبارات هي مثال على كيفية اكتشافنا للكتابة التي تتم بواسطة الذكاء الاصطناعي بشكل حدسي، ولكن النموذج يستخدم نهجًا شاملاً، مع الأخذ في الاعتبار السياق الكامل للوثيقة.

بشكل عام، يبدو أن أنماط الكتابة في Claude ميزة رائعة للأشخاص الذين لا يرغبون في إضافة عبارة "no yapping" إلى كل موجه، ولكنها ليست أداة لجعل مخرجات الذكاء الاصطناعي غير قابلة للكشف.