¿Cuál es la principal diferencia entre el transformador sólo decodificador y el transformador sólo codificador?
La principal diferencia es que el transformador sólo codificador mira la secuencia de entrada desde ambas direcciones, tanto por delante como por detrás, lo que significa que puede comprender mejor las relaciones entre cada token de la secuencia. En cambio, el transformador sólo decodificador sólo mira en una dirección de la entrada, lo que significa que son más adecuados para tareas de lenguaje autorregresivo, como la generación de textos.