Transformatorlar ikki asosiy tarkibiy qismdan iborat: kirish ma'lumotlarini ishlovchi kodlovchi va chiqish ma'lumotlarini ishlab chiqaradigan dekoder. Kodlovchi kirish ma'lumotlarini, masalan, gapni oladi va ularni neyron tarmoqlarning bir qator qatlamlari orqali o'tkazadi. Kodlovchi har bir qatlami kirish ma'lumotlarini undan xususiyatlarni olish uchun ishlov beradi. Keyin xususiyatlar dekoderga o'tkaziladi, u ulardan chiqish uchun foydalanadi. An'anaviy neyron tarmoqlardan farqli o'laroq, transformatorlar belgilangan miqdordagi kirish yoki chiqish xususiyatlariga tayanmaydi. Buning o'rniga, ular ma'lumotlarning mazmunini o'rganish va uning ma'nosini tushunishga imkon beradi. Transformatorlar kompyuterning turli xil til vazifalarida, tabiiy tilni qayta ishlashdan tortib, tabiiy tilni ko'rishgacha ishla
spam fails_task lang_mismatch pii not_appropriate hate_speech sexual_content quality toxicity humor helpfulness creativity violence