Quali sono alcuni buoni framework per la selezione dei metodi?

Ho esaminato i quadri teorici per la selezione dei metodi (nota: non la selezione dei modelli) e ho trovato pochissimo lavoro sistematico, motivato matematicamente. Per "selezione del metodo" intendo un framework per distinguere il metodo appropriato (o migliore, ottimale) rispetto a un problema o tipo di problema.

Quello che ho scoperto è sostanziale, se frammentario, lavorare su metodi particolari e sulla loro messa a punto (cioè selezione precedente nei metodi bayesiani), e selezione dei metodi tramite selezione bias (es. Politica induttiva: la pragmatica della selezione bias ). Potrei non essere realistico in questa fase iniziale dello sviluppo dell'apprendimento automatico, ma speravo di trovare qualcosa di simile a ciò che la teoria della misurazione fa nel prescrivere trasformazioni e prove ammissibili per tipo di scala, scritto solo nell'arena dei problemi di apprendimento.

Eventuali suggerimenti?

machine-learning methodology theory

— John L. Taylor
fonte

Qual è la differenza tra la selezione del modello modelselection.org (argomento caldo in statistica negli ultimi 20 anni) e la selezione del metodo.

— robin girard,

Mentre la selezione del modello comporta in genere il punteggio dei modelli all'interno di una famiglia di distribuzioni, in base alla loro misura e penalizzando il numero di parametri utilizzati (come AIC e BIC), mentre la selezione del metodo è più generale. La selezione del metodo implica affrontare un problema (ad esempio test, classificare, prevedere) per il quale abbiamo una certa conoscenza di base (le variabili sono note per essere (ad esempio indipendenza, tipo di dati) e per le quali vengono fatte ipotesi ausiliarie (ad esempio normalità, omoscedasticità) e dobbiamo selezionare un metodo.

— John L. Taylor,

Ora ci sono prescrizioni matematiche lungo le linee del tipo di misurazione, i risultati della convergenza, l'ottimalità e la complessità tempo / spazio, ma non ho un quadro per la loro applicazione sistematica, di cui sono a conoscenza, quindi la domanda.

— John L. Taylor

Puoi dare un esempio di selezione del metodo con più dettagli (un collegamento a una pagina o un documento potrebbe andare bene), questo potrebbe aiutarmi a capire più precisamente. Grazie in anticipo

— Robin Girard,

Il documento di cui sopra affronta la selezione del metodo, in generale. Per quanto riguarda esempi specifici e maggiori dettagli, possono essere trovati sparsi tra specifiche discipline meta-metodologiche (teoria della misurazione, teoria dell'apprendimento algoritmico, teoria dell'apprendimento statistico, teoria della complessità), ma non ho trovato un trattamento sistematico, quindi la domanda. Se desideri discutere questi problemi in generale, puoi inviarmi un'e-mail a johnnylogic su gmail.

— John L. Taylor

John, non sono sicuro che il mio suggerimento possa essere di aiuto. Ma in ogni caso il libro Intuitive Biostatistics di Harvey Motulsky può essere di aiuto. Il capitolo 37 'Scelta di un test' ha una tabella abbastanza buona a pagina 298 che ti dice data la natura del set di dati e il problema che stai affrontando quale metodo statistico dovresti usare. Amazon ti consente di cercare in questo libro.

In bocca al lupo.

— sympa
fonte