يبدو ChatGPT وكأنه سحر من الخارج، لكن الوصفة موثقة جيداً إذا كنت تعرف أين تبحث، وهذا الشارح لمدة ثلاث دقائق يكثف الأفكار الأساسية. يبدأ النظام من نموذج أساسي من فئة GPT-3، ثم يطبق خط أنابيب InstructGPT: الضبط الدقيق الخاضع للإشراف على عروض مكتوبة بواسطة الإنسان، ونموذج مكافأة مدرب من تصنيفات تفضيل الإنسان، والتعلم المعزز من ردود الفعل البشرية لمحاذاة النموذج مع ما يريده المستخدمون فعلاً.

النتيجة المذهلة خلف المنتج هي أن نموذج InstructGPT بحجم 1.3B تفوق على GPT-3 بحجم 175B في تقييمات تفضيل الإنسان، مع قدر أقل من الناتج السام وتتبع تعليمات أفضل، كل ذلك بمائة مرة أقل من المعاملات. بالنسبة لأي شخص يبني وكلاء صوتية حوارية أو speech LLMs معايرة من الانحياز أو يحاول الاستدلال على سبب شعور ChatGPT بالاختلاف عن واجهات برمجية إكمال خام، يغطي هذا العرض المرتجل الآلية دون ضريبة قراءة الورقة. اضغط على التشغيل إذا كنت تريد نموذج العقل في الوقت الذي يستغرقه لصنع فنجان قهوة.