Pesos

Valores numéricos que gradúan la fuerza de cada conexión dentro de una red neuronal. Entrenar un modelo consiste, literalmente, en irlos corrigiendo hasta minimizar el error de sus predicciones: son el lugar donde queda almacenado todo lo que el modelo ha aprendido.

En el curso

Módulo 1 — aparecen en la primera de las tres etapas de entrenamiento de un LLM: durante el preentrenamiento el modelo recorre libros, artículos y repositorios de código, y ese recorrido se traduce en ajustes sucesivos de los pesos hasta construir una amplia "intuición del lenguaje". El módulo los introduce también al describir las redes neuronales, cuyos nodos ajustan pesos internos para reconocer patrones y clasificar.

Relacionado

Preentrenamiento · Ajuste fino · Probabilístico · Redes neuronales · Aprendizaje profundo