GPT (Generative Pre-trained Transformer) es una familia de modelos de lenguaje que genera texto prediciendo, palabra por palabra, cuál es la continuación más probable de lo escrito hasta el momento, entrenados previamente sobre enormes cantidades de texto general antes de ajustarse para tareas específicas.
Su relevancia
Las sucesivas versiones de esta familia de modelos demostraron que aumentar el tamaño del modelo y de los datos de entrenamiento mejoraba de forma sostenida su capacidad de generar texto coherente y útil, lo que impulsó la carrera actual por modelos de lenguaje cada vez más grandes y capaces.