جاسازی کلمه
پس از پیشرفت‌هایی که در سال ۲۰۱۰ در زمینه کاری نظری در مورد کیفیت بردارها انجام شد و سرعت آموزش مدل و پیشرفت‌های سخت‌افزاری امکان کاوش در فضای پارامتر وسیع‌تری را فراهم کرد این رویکرد توسط بسیاری از گروه‌های تحقیقاتی مورد استفاده قرار گرفت. در سال ۲۰۱۳، تیمی در گوگل به رهبری توماس میکولوف روش word2vec را ایجاد کردند که ابزاری است که جاسازی کلمه در مدل‌های فضای برداری را سریعتر از رویکردهای قبلی امکان‌پذیر می‌کند. رویکرد word2vec به‌طور گسترده‌ای استفاده شده‌است و باعث افزایش علاقه به استفاده از تکنیک جاسازی کلمات و در نهایت هموار کردن راه برای کاربرد عملی شده‌است.
دستور حالت
دستور زبان حالت سامانه‌ای برای تحلیل زبان است، که روی پیوند بین ظرفیت یک فعل (یا تعداد فاعل، مفعول و غیره) و بافت دستوری که آن فعل نیاز دارد، تمرکز می‌کند. این سامانه توسط یک زبان‌شناس آمریکایی به نام چارلز جی فیلمور، و در زمینه دستور زبان گشتاری (۱۹۶۸) ساخته شده‌است. این نظریه «ساختار نحوی سطحی» جمله را تحلیل می‌کند و روش آن مطالعه ترکیب «حالت‌های عمیق» مورد نیاز یک فعل خاص است (مثلاً نقش‌های معنایی - کنشگر، مفعول، ذی‌نفع، محل، یا ابزار). برای مثال، فعل «تحویل داد» نیاز به یک «کنشگر(A) و یک فاعل (O)، و یک ذی‌نفع (B) دارد؛ مثلاً «جعفر(A) به مدرسه(B) پول(O) تحویل داد».