ما مدى دقة Cast؟

المستخدمون الافتراضيون يتنبؤون بما يقوله الناس الحقيقيون ويفعلونه. وCast يحوّل ذلك إلى قرار يمكنك الدفاع عنه.

خمس دراسات محكّمة، شارك فيها أكثر من 120,000 مشارك حقيقي، تقول الشيء نفسه: النموذج اللغوي الذي يُعطى شخصًا محدد الملامح يجيب كما تجيب مجموعة ذلك الشخص. على هذه النتيجة بُني Cast، وعلى الهندسة التي تبقيه صادقًا.

86%
من اتساق الشخص الحقيقي مع نفسه، لدى وكلاء ذكاء اصطناعي بُنوا من مقابلات
Park وآخرون، 2024
70
تجربة مسجّلة مسبقًا، بمشاركة 119,330 شخصًا، تُنبئ بنتائجها قبل إجرائها
Ashokkumar وآخرون، 2026
1 من كل 4
من كل طاقم متشككون بحكم القاعدة، فلا يستطيع الطاقم مجاملتك
Cast، في الكود

أبحاث من

  • جامعة ستانفورد
  • جامعة نورث وسترن
  • معهد جورجيا للتقنية
  • غوغل ديب مايند
  • معهد ماساتشوستس للتقنية
  • كلية سلون للإدارة في معهد ماساتشوستس للتقنية
  • مايكروسوفت للأبحاث
  • جامعة فاندربيلت
  • كلية هارفارد للأعمال

ما يقوله البحث العلمي

خمس دراسات ونتيجة واحدة: المستخدم الافتراضي المحدد بدقة يجيب كما تجيب المجموعة الحقيقية التي ينوب عنها.

تعرض كل بطاقة النتيجة كما وردت في الورقة البحثية مع رابط إلى المصدر. والقراءات المطوّلة في يوميات Cast.

Political Analysis, 2023

العينات السيليكونية تعكس المجموعات الحقيقية

أعطِ النموذج خلفية شخص ما فيجيب كما تجيب مجموعة ذلك الشخص، بالتفصيل لا عشوائيًا. يسمّي المؤلفون هذه الخاصية الأمانة الخوارزمية. وهي الخاصية التي تقوم عليها طريقة Cast كلها.

Argyle وآخرون، 2023 (يفتح في علامة تبويب جديدة)

اقرأ المزيد…
Nature، 202670 دراسة

يتوقع نتائج التجارب الحقيقية

عند الطلب من النموذج التنبؤ بنتائج 70 تجربة حقيقية مسجّلة مسبقًا قبل معرفة نتائجها، تتبّعت تنبؤاته الآثار الفعلية بجودة تقارب ما حققه المتنبئون البشر مجتمعين. ما يطلبه Cast من المستخدمين الافتراضيين، أي توقّع ردود فعل الناس، هو بالضبط ما قيس النموذج فأجاده.

Ashokkumar وآخرون، 2026 (يفتح في علامة تبويب جديدة)

اقرأ المزيد…
Stanford، 2024حتى 86%

المقابلات تزيد وفاء الوكلاء للأصل

الوكلاء المبنيون من مقابلة مدتها ساعتان مع شخص حقيقي أعادوا إنتاج إجاباته على الاستبيان بنسبة 83% من اتساق الشخص نفسه بعد أسبوعين، و86% عند الجمع مع بيانات الاستبيان، مقابل 74% للبيانات الديموغرافية وحدها. كلما كان الشخص أغنى تفصيلًا، كانت الإجابات أصدق. Cast يجري مقابلات؛ ولا يوزّع استبيانات.

Park وآخرون، 2024 (يفتح في علامة تبويب جديدة)

اقرأ المزيد…
NBER، 2023

يتصرف مثل الفاعلين الاقتصاديين

تجارب الاقتصاد السلوكي الكلاسيكية، حين أُعيدت على نموذج لغوي، أعطت نتائج تشبه نوعيًا نتائج البشر الأصلية: الإنصاف، والانحياز إلى الوضع الراهن، والتأطير. يتفاعل النموذج مع السعر والمفاضلات كما يفعل الناس، ولهذا يستطيع Cast أن يسأل عن الاستعداد للدفع.

Horton وFilippas وManning، 2023 (يفتح في علامة تبويب جديدة)

اقرأ المزيد…
ICML، 2023

يعيد إنتاج الدراسات البشرية الكلاسيكية

أعاد المؤلفون تجربة لعبة الإنذار الأخير، وجمل الطريق المضلّل، وتجربة ميلغرام بمشاركين محاكين، فوجدوا الأنماط نفسها التي ظهرت في الدراسات البشرية. ووجدوا أيضًا تشوّه الدقة المفرطة في بعض النماذج، وهو أحد المزالق التي صُمّم Cast لتفاديها أدناه.

Aher وArriaga وKalai، 2023 (يفتح في علامة تبويب جديدة)

اقرأ المزيد…

ماذا يفعل Cast بهذا

يقول البحث إن الطريقة تنجح حين يكون الشخص محددًا بدقة ولا يقيّم أحد إجاباته بنفسه. وعلى هذا بالضبط بُني Cast.

كل آلية أدناه تعمل في الكود في كل دراسة. ليس بينها تعليمة عليك أن تتذكر كتابتها.

  1. مقابلات، لا استبيانات

    تُجرى المقابلة مع كل مستخدم افتراضي على حدة، في محادثة تتابع ما قيل للتو. وجد Park وزملاؤه أن الوكلاء المبنيين من المقابلات هم الأكثر أمانة؛ أما خانة الاختيار في الاستبيان فتهدر تلك الأمانة. ولا تتسرب إجابة من مقابلة إلى أخرى.

  2. التباين

    أول تحذير في البحث أن الإجابات الاصطناعية تخرج متشابهة أكثر من اللازم. التباين يوزّع كل طاقم حول ملف العميل المثالي (ICP): في المستوى المتوسط، يقع نحو ثلث الطاقم خارج القيمة المرجعية في كل بُعد، فلا يكون مستخدمان افتراضيان الشخص نفسه، وعلى كل موضوع أن يستحق عدده.

  3. حد أدنى من المتشككين

    يحجز كل طاقم مستخدمًا افتراضيًا واحدًا على الأقل من كل أربعة يبدأ غير مقتنع: ربع الطاقم، مقرّبًا إلى الأعلى، محجوز لمن جرّبوا وخابوا، أو لا يرون مشكلة، أو يفضّلون ألا يغيّروا شيئًا. إذا أحب الجميع فكرتك فالطاقم بُني خطأ، وقواعد Cast لا تسمح بذلك.

  4. اختيار طاقم يستند إلى بحث موثّق

    قبل اختيار أي أحد، يجري باحث ملفات ICP عمليات بحث على الويب عن سوقك ويكتب ورقة حقائق بمصادرها. تلك الورقة تحدد من يدخل الطاقم: نطاقات الإنفاق، والأدوات المستخدمة، والمشكلات الحقيقية. أما المستخدمون الافتراضيون أنفسهم فلا يرون الويب أبدًا. لا يعرفون إلا ما يقوله سجلهم، مثل العميل الحقيقي.

  5. ناقد ومدقّق على كل سطر

    يفحص المدقّق كل مستخدم افتراضي قبل المقابلات: حقائق تتناقض، ومعرفة لا يملكها الشخص، وموقف لا يطابق السجل. ثم يقرأ الناقد، وهو من عائلة نماذج مختلفة عن المستخدم الافتراضي، كل مقابلة منتهية في ضوء ذلك السجل ويعلّم الإجابات المختلقة أو الخارجة عن الشخصية أو المتلهفة لإرضائك. لا أحد يقيّم عمله بنفسه.

  6. اقتباسات حرفية، وأعداد يحسبها الكود

    كل اقتباس في التقرير يُطابَق كلمة بكلمة مع نص المقابلة: مقطع متصل واحد من إجابة المستخدم الافتراضي نفسه، وإلا حُذف. وكل عدد، كل «6 من 8»، يحسبه الكود من سجلات المقابلات. النموذج يكتب النثر؛ ولا يُسمح له أبدًا بكتابة رقم.

  7. ما أضافه Cast، موسوم

    حين يضيف وكيل الاختيار مجموعة لم تسمّها، لأن الموجز يستدعيها، تقول بطاقة ملف ICP «أضافه Cast» مع السبب. ويمكنك إزالتها بنقرة واحدة. لا شيء في الطاقم مفاجئ.

  8. النتائج في نحو 15 دقيقة

    تنتقل الدراسة من الموجز إلى النتائج في نحو ربع ساعة. وفي اختبار الحمل، وصلت خمس دراسات جرت في وقت واحد إلى النتائج كلها خلال 12 إلى 16 دقيقة، مع اكتمال كل مقابلة.

  9. تقارير بالشكل الذي يحتاجه قرارك

    Markdown وPDF وPowerPoint وإنفوغرافيك، وبودكاست بصوت واحد أو بمناظرة بصوتين، ومحادثة حول النتائج تجيب من نصوص المقابلات. دراسة واحدة، بكل صيغة، بالإنجليزية أو العربية.

  10. نماذج لا تحتفظ بالبيانات

    كل نموذج يلمس موجزك يعمل على مضيف لا يحتفظ بالبيانات، ولا يُستخدم ما تلصقه في التدريب. قاعدة التعامل مع البيانات مفروضة في الكود، لا في سياسة مكتوبة.

    اقرأ الثقة والبيانات

حيث يحذّر البحث

المزالق موثّقة. وكذلك ما يفعله Cast حيال كل واحد منها.

الأدبيات نفسها التي تقيس مدى جودة محاكاة النماذج للبشر تذكر أيضًا مواضع تعثّرها. وقد شكّلت تلك الأوراق تصميم Cast بقدر ما شكّلته الأوراق الخمس أعلاه.

يقول البحث

قد تخرج الإجابات الاصطناعية متشابهة أكثر من اللازم.

ما يفعله Cast

التباين ينوّع كل مستخدم افتراضي، والحد الأدنى من المتشككين يضمن وجود من يخالفك. والتقرير يعرض مدى التوزّع.

يقول البحث

قد تتغير الإجابات بتغيّر صياغة التعليمات.

ما يفعله Cast

تُجرى المقابلة مع كل مستخدم افتراضي على حدة بالدليل نفسه، ويعلّم الناقد أي إجابة تبدو صادرة عن النموذج لا عن الشخص.

يقول البحث

قد تكون النماذج دقيقة أكثر من اللازم، أو تخطئ في تقدير السعر.

ما يفعله Cast

لا يعرف المستخدم الافتراضي إلا ما يقوله سجله، وتعمل أهداف التسعير بتباين منخفض لتبقى قراءات السعر قابلة للمقارنة، ويخبرك التقرير بالنتائج التي عليك تأكيدها مع أشخاص حقيقيين قبل أن تراهن بشركتك.

المصادر: Bisbee وآخرون، 2024 (يفتح في علامة تبويب جديدة) · Brand وIsraeli وNgwe (يفتح في علامة تبويب جديدة) · القراءة المطوّلة في يوميات Cast

اسأل من بيدهم القرار.

صف عملاءك. قابلهم خلال دقائق، ومعهم الدليل.