Domande taggate «relu»

Cosa succede quando mescolo le funzioni di attivazione?

Esistono diverse funzioni di attivazione, come ReLU, sigmoid o tanhtanh\tanh . Cosa succede quando mescolo le funzioni di attivazione? Recentemente ho scoperto che Google ha sviluppato la funzione di attivazione Swish che è (x * sigmoid). Modificando la funzione di attivazione può aumentare la precisione su piccoli problemi di rete …

10 neural-networks machine-learning activation-function relu sigmoid

Quali sono i vantaggi di ReLU vs Leaky ReLU e Parametric ReLU (se presenti)?

Penso che il vantaggio di usare Leaky ReLU invece di ReLU sia che in questo modo non possiamo avere sfumature sfumate. Parametric ReLU ha lo stesso vantaggio con la sola differenza che la pendenza dell'uscita per gli ingressi negativi è un parametro apprendibile mentre nella Leaky ReLU è un iperparametro. …

10 neural-networks activation-function relu

Utilizzando il nostro sito, riconosci di aver letto e compreso le nostre Informativa sui cookie e Informativa sulla privacy.

Licensed under cc by-sa 3.0 with attribution required.