言語モデルは、テクノロジーベースのテクノロジーベースのテクノロジー、トランスアーキテクチャを正確に使用します。簡単に説明すると、これらの数学的モデルは、テキストの次の可能性のある単語またはギャップに対応する単語を予測することができ、すでに周りの単語に注意を払います。これを行うために、人間は、言語を学習するために通常行うギャップ、言語モデルをトレーニングするための数百万のテキストのトレーニング、例のために行うギャップを満たすために、演習と比較して行われます。
Hizkuntza ereduek neurona sareetan oinarritutako teknologia darabilte, transformers arkitektura zehazki. Sinpleki azalduta, eredu matematiko hauek, testu batean hurrengo hitz probableena edo hutsune bati dagokion hitza zein izango den aurreikusteko gai dira, inguruan dagoeneko dituzten hitzetan arreta jarriz. Horretarako gizakiok hizkuntzak ikasteko egin ohi ditugun hutsuneak betetzeko ariketen pareko zerbait egiten da, hizkuntza eredua entrenatzeko ordenagailuari milioika testu eta adibide emanda.