أصبحت أكثر اقتناعا بأن التعلم الواقعي والتقنيات المشابهة تكتشف من جديد كيف يتعلم البشر. فكر في ذلك: أولا، يكون النموذج مدربا مسبقا على لغة رسمية (أساسا قواعد نحوية خالية من السياق) والتي تولد "شبكة فرعية نحوية" داخل النموذج. فوق هذه الشبكة الفرعية، يتم دمج "اللغة الحقيقية" (مجموعة بيانات الإنترنت) في تدريب النماذج الفعلي (وفي سياق اللغات الرسمية يسمى هذا أساسا قواعد غير مقيدة) لكن بعد ذلك... هذه هي نفس الطريقة التي يتعلم بها الأطفال البشر اللغة، أليس كذلك؟ نحن نأتي "مدربين مسبقا" مع شبكة نحوية لفهم الشكل الأساسي للغة (إيقاع نقل المعلومات، القواعد الأولية) ثم "نفرض" اللغة الفعلية التي نتعلمها فوقها. أشياء رائعة!