La discesa del gradiente è un algoritmo di ottimizzazione utilizzato nell'apprendimento automatico per trovare un insieme di parametri che minimizzi una data funzione di costo. Funziona facendo ripetutamente piccoli passi nella direzione opposta al vettore gradiente della funzione di costo, portando il costo verso un minimo globale. L'entità dei passi compiuti è determinata dal parametro della velocità di apprendimento, che può essere regolato per prestazioni ottimali. La discesa del gradiente viene utilizzata in molti algoritmi di apprendimento automatico ed è una delle tecniche chiave utilizzate nell'apprendimento profondo.
Spiegare il concetto di discesa del gradiente.