Esiste un sistema di classificazione standard per le pubblicazioni su riviste scientifiche?


9

Ho sentito che alcune riviste hanno un punteggio più alto di altre. È vero? E se sì, quali sono i criteri per giudicare il valore di un giornale con revisione paritaria rispetto a un altro? Come faccio a sapere la sua valutazione? La mia pubblicazione avrà meno "valore" se verrà accettata in un diario meno rispettabile, per esempio, della SIAM Review?


1
Questa domanda potrebbe essere considerata fuori tema, soggettiva o troppo ampia. Ma penso che valga la pena discutere qui e scriverò una risposta.
David Ketcheson,

@DavidKetcheson: anche questa era la mia sensazione.
Geoff Oxberry,

Risposte:


5

Quali fattori determinano dove pubblicherò un articolo?

  • Le persone che voglio leggere questo articolo lo vedranno? Se sto seguendo il lavoro di un altro gruppo (forse per mostrare un punto di vista diverso, a volte per mostrare miglioramenti algoritmici o per risolvere problemi con un documento precedente), vorrò inviare il documento allo stesso giornale, anche se c'è un problema di impatto.

Come giovane scienziato computazionale ancora nella fase di sviluppo della carriera della mia carriera, direi che c'è un ulteriore aspetto, e forse anche più critico, in questa domanda. . . .

  • Le persone che potrebbero essere in grado di valutarmi vedranno questo documento?Ho spesso parlato con colleghi nel campo della scienza computazionale della necessità di avere un "tappeto erboso domestico": la scienza computazionale è un campo altamente interdisciplinare. Sfortunatamente, non siamo davvero in grado di essere considerati scienziati computazionali quando arriva il momento di essere considerati per una posizione permanente. In assenza di lavorare in un dipartimento di scienze computazionali, dovremo fare domanda per un mandato in un dipartimento esistente, il che di solito significa che i nostri "colleghi" saranno altri ingegneri, scienziati e matematici, molti dei quali non hanno davvero un forte esperienza in scienze computazionali. Ciò significa che anche se vuoi andare nella direzione della fertilizzazione incrociata, devi comunque concentrare alcune delle tue pubblicazioni sulle riviste di riferimento per la tua disciplina. Questa è una sfida che molti dei nostri coetanei non dovranno necessariamente affrontare ed è un'ulteriore complicazione nella nostra vita. Ma è qualcosa di cui dobbiamo essere consapevoli prima di iniziare a lavorare!

  • Quanta concorrenza ho adesso? Più un campo è affollato, più è importante ottenere i risultati in anticipo. Mentre è bello provare ad andare su Nature o Science con tutti gli articoli del tuo gruppo (supponendo che tu non sia in matematica pura o qualcosa di simile), essere prima fuori dal cancello in un campo "caldo" conta molto di più che pubblicare nel "miglior" diario in un campo.

  • Quanto è importante questo documento? Un documento che rappresenta un insieme di lavori che fornisce molti nuovi dati, ma non molto in termini di approfondimento, probabilmente non merita di andare su un diario di alto livello. Probabilmente è meglio cercare un diario affidabile. Tuttavia, se hai davvero trovato qualcosa di grosso, spara in alto, a patto che non ti preoccupi della crisi del tempo che colpisce le grandi riviste. (Ad esempio, può essere necessario più tempo per pubblicare in Physical Review Letters che in una delle altre serie di Physical Review , che sono di quantità comparabile.)

Dopo aver tenuto conto di tutti questi aspetti, inizierò a preoccuparmi di problemi come il fattore di impatto , ma solo come misura di controllo della qualità. Le differenze del 10-20% sono essenzialmente insignificanti, ma un 1,0 contro un 2,0 o un 2,0 contro un 3,0 rappresenta un livello misurabile di differenza tra i giornali.


8

In un mondo ideale, dovresti considerare solo una cosa quando scegli dove inviare un manoscritto:

quali lettori del diario includono il pubblico più vasto che sarebbe interessato a questo lavoro?

In pratica, consideri anche altri fattori, forse più significativamente

Quanto pubblicherà su questo diario aiuterà la mia carriera?

Chiunque sia in grado di comprendere bene il tuo lavoro lo giudicherà dal suo reale significato , ma coloro che sono troppo lontani possono usare la qualità del diario come proxy per la qualità del tuo documento.

Come viene determinata la qualità del giornale? I professionisti con esperienza hanno le loro opinioni sulla base delle esperienze con ciascun diario e degli articoli che leggono. In alcuni campi, come la matematica, questa opinione di esperti può essere sintetizzata solo parlando con molti esperti. In altri campi, come l'informatica, questo è stato esplicitamente codificato in un sistema di classificazione a più livelli .

La metrica più ampiamente disponibile per la qualità dei periodici è il cosiddetto fattore di impatto . Il pericolo di avere un'unica metrica ampiamente utilizzata per qualsiasi cosa è che può essere manipolata o applicata in modo errato o potrebbe non essere utile per alcune delle cose a cui è applicata. Ad esempio, poiché misura solo citazioni nell'arco di due anni, non ha molto senso per gli articoli di matematica, che in genere ottengono la maggior parte delle citazioni dopo due anni, spesso molto più tardi. Sembra inoltre essere scarsamente correlato con l'opinione degli esperti. Esistono alternative, ad esempio Eigenfactor . E molte persone stanno ora proponendo l'uso delle metriche dei social web per classificare le riviste .

Non utilizzo il fattore di impatto o altre metriche simili nelle mie decisioni, poiché ritengo che la mia esperienza diretta mi dia una misura più accurata del significato di un giornale. Un esercizio interessante è quello di consultare la tua biblioteca personale di riferimenti (ad esempio, in un file bibtex) e vedere il numero di articoli che contiene da diverse riviste. Questo probabilmente ti darà la migliore indicazione di dove pubblicare.

A proposito, c'è una proposta per creare una classifica basata su esperti di riviste matematiche; vedi questo rapporto e questo blog IMU ufficiale .

Dovresti anche essere consapevole del fatto che recentemente si è verificata un'esplosione di nuove riviste di bassa qualità basate su un modello di pagamento dell'autore. I loro editori spesso inviano spam a grandi comunità di scienziati (spesso inclusi molti che non sono qualificati) nel tentativo di ottenere nomi ragionevolmente rispettabili nei loro consigli di redazione e sollecitare invii cartacei. Per quanto ne so, sono vanity press orientate al profitto .


Come si distinguono questi editori "vanity press" da editori di qualità, sottoposti a revisione paritaria?
Paolo

1
@Paul buona domanda; di solito è abbastanza ovvio. I segni sono che spammano molte persone, arruolano redattori non qualificati e richiedono che tu paghi per pubblicare. Di solito hanno anche messaggi e siti Web scritti male (in termini di cose basilari come grammatica e ortografia).
David Ketcheson,

Nel considerare quanto vasto sia il pubblico, potresti voler considerare se il journal è ad accesso aperto e se il journal ha criteri di archiviazione di dati e codice. La ricerca ha dimostrato 1 2 [3] (Rendere i dati al massimo disponibili.) Che le riviste ad accesso aperto ricevono un pubblico più ampio e un impatto maggiore. In alternativa, se non si desidera rilasciare dati e codice, le riviste con mandato di archiviazione potrebbero essere una scelta sbagliata.
cboettig,

1
Sono d'accordo con i commenti di @ DavidKetcheson, ma aggiungerò alcuni dei miei. Avendo partecipato al pannello di matematica Discovery Grant per NSERC, ci sono molte insidie ​​nell'uso dei fattori di impatto del giornale per valutare la qualità dei singoli documenti. Anche le migliori riviste contengono articoli con una vasta gamma di qualità e risultati mediocri (o errati) scivolano anche attraverso i migliori processi di revisione tra pari. Detto questo, troverei comunque utile l'elenco proposto dall'IMU / ICIAM o dall'AustMS (menzionato da @Dirk).
John Stockie,

@cboettig In matematica, sospetto che i lettori effettivi possano essere negativamente correlati all'accesso aperto, a causa dello sfortunato diluvio di editori di "accesso aperto" di bassa qualità. Naturalmente, arXiv arriva a un pubblico molto vasto! È il mio "editore" ad accesso aperto preferito.
David Ketcheson,

5

Dipende davvero da quanto credi nelle valutazioni del diario. La metrica più popolare di cui sono a conoscenza è il fattore di impatto. Questo articolo di Wikipedia descrive il fattore di impatto, come viene calcolato e come è suscettibile alla manipolazione, nonché metriche di valutazione delle riviste alternative. La cosa più importante da notare è che i fattori di impatto per le riviste in diversi settori non sono necessariamente comparabili, anche se il sistema di valutazione dei fattori di impatto cerca di ridurre la "qualità" di ogni giornale in un'unica metrica. (Per una discussione interessante sul perché un'idea del genere possa portare a risultati fuorvianti o facilmente manipolabili, vedi il saggio di New Yorker di Malcolm Gladwell, The Order of Things , che discute le classifiche dei college e le classifiche delle auto.)

Il fattore di impatto è il numero medio di citazioni ricevute per articolo pubblicato su quel giornale nei due anni precedenti, quindi il criterio per giudicare il valore di un giornale con revisione paritaria su un altro è quante volte i suoi articoli recenti vengono citati in media, per articolo base. Questa metrica significa che riviste come la scienza e la natura sono classificate in alto, come ci si aspetterebbe, ma significa anche che l' International Journal of Nonlinear Sciences and Simulation (3.100) viene classificata più in alto rispetto al SIAM Journal of Scientific Computing (3.016), anche se il quest'ultimo diario è molto più riconoscibile.

Per quanto riguarda la tua pubblicazione di meno "valore", dipende dalla persona. I miei colleghi più anziani mi hanno detto che avere articoli su riviste più prestigiose è utile per cose come il possesso e le decisioni di assunzione; non avendo esperienza diretta di tali questioni, rimando ai commenti delle persone che hanno più esperienza con questo tipo di situazioni. Dipende dalla comunità di persone che stai cercando di raggiungere o impressionare. Se pubblichi qualcosa in un diario matematico, non aspettarti che le persone al di fuori della matematica lo leggano necessariamente. (Lo stesso consiglio si applica ad altri argomenti.) Inoltre, potresti decidere di pubblicare su un giornale meno prestigioso perché vuoi ottenere un risultato rapidamente piuttosto che aspettare molto tempo affinché venga esaminato da un giornale più prestigioso. IO' è stato detto che le riviste SIAM possono impiegare un anno o più per rivedere un documento e pubblicarlo, che è supportato guardando il tempo tra la data presentata e la data pubblicata sul documento. La presentazione a un particolare diario dipende anche da obiettivi e scopi, dalla politica (che è nel comitato editoriale, che probabilmente rivedrà il tuo articolo), a quale comunità vuoi raggiungere (in un certo senso va con i consigli sull'argomento sopra ). Continuo a consultare altre persone su questi argomenti. a quale comunità vuoi raggiungere (in un certo senso va con i consigli sull'argomento sopra). Continuo a consultare altre persone su questi argomenti. a quale comunità vuoi raggiungere (in un certo senso va con i consigli sull'argomento sopra). Continuo a consultare altre persone su questi argomenti.

Quando guardo gli articoli, il "prestigio" di una rivista, per me, è davvero il mio sentimento interiore che riflette le preziose opinioni di altre persone che conosco nella scienza (i miei consulenti, colleghi, ecc.). Sono più propenso a fidarmi di un articolo in un diario che è più prestigioso perché ritengo che sia più probabile che sia affidabile, ma ci sono sicuramente articoli cattivi in ​​riviste prestigiose, quindi il prestigio non è un sostituto per fare la propria due diligence. Ad esempio, ci sono alcuni errori di battitura piuttosto seri in un articolo di giornale altrimenti buono che ho citato da SIAM Review .

Comunque, questa è la mia opinione sconclusionata, e come dottorato di ricerca (quasi) coniato di recente, sono sicuro che gli altri con più esperienza avranno molte più prospettive e intuizioni da aggiungere.


Buon riassunto. I tempi di attesa dipendono tanto dall'argomento quanto dal "prestigio". I documenti di matematica pesante richiedono molto più tempo per essere esaminati rispetto a un documento orientato al software, ad esempio, almeno nella mia esperienza. Grazie per il link New Yorker. È una buona lettura
Faheem Mitha,

3

La valutazione è necessariamente un'attività soggettiva. Se ti interessa il modo in cui gli altri valuteranno il tuo documento, allora devi capire quali sono i loro criteri. Come regola generale, meno competenza hanno nel tuo campo di lavoro, più faranno affidamento sulla valutazione del diario piuttosto che sulla valutazione del tuo lavoro, e più faranno affidamento sulla bibliometria (fattori di impatto, fattori h, ...) piuttosto che esperienza personale.


3

Questa è una conversazione che dovresti avere con le persone sopra di te che ti valuteranno. Se sei uno studente di dottorato di ricerca, dovresti parlare con il tuo consulente e altri professori su come il loro dipartimento e altri dipartimenti di altre istituzioni valutano il lavoro della facoltà di monitoraggio quando prendono le loro decisioni di ruolo. Se ora sei docente di ruolo, avresti dovuto già avere questa conversazione con il tuo presidente di dipartimento e altri membri del consiglio di bilancio del dipartimento o organi simili su come valutano il lavoro dei candidati di ruolo. Se non sei un professore di qualche moda o se sei un accademico in un posto senza mandato, dovresti porre le stesse domande del tuo supervisore sulla promozione e la conservazione presso il tuo istituto.

La mia esperienza è stata che la maggior parte dei ricercatori non legge o cerca di tenere il passo con le pubblicazioni su riviste pertinenti alle loro aree direttamente quando escono. Non molte persone hanno abbonamenti personali a IJNMF, diciamo, e leggono le copertine dei numeri di ogni mese. Ci sono troppi posti per stare al passo. Più spesso, trovo, le persone sono alla ricerca di lavoro correlato, utilizzano e-mail o avvisi di Google per cercare elementi correlati e seguono direttamente il lavoro di colleghi e concorrenti. Quindi, la cosa importante non è cercare di vedere il tuo lavoro attraverso le riviste, ma di pubblicare nella migliore sede possibile, come determinato da coloro che giudicheranno la tua carriera.

Il modo per vedere il tuo lavoro è pubblicizzarlo in modo aggressivo attraverso conferenze, seminari, software gratuito, il tuo sito Web, ecc. Ciò probabilmente non influirà sulla decisione del tuo comitato di promozioni (o simili), ma se le persone vedono e utilizzano il tuo lavoro attraverso altri luoghi, e tu dai loro prestampe e collegamenti a dove è pubblicato nelle riviste, questo aumenterà il tuo numero di citazioni, che è qualcosa di importante per quelli sopra di te.


Io per primo leggo i sommari di giornale. Uso un aggregatore di feed RSS e mi bastano pochi minuti a settimana per tenere il passo con una dozzina di riviste. In genere, in questo modo ottengo anche gli articoli ben prima della data di pubblicazione. Puoi vedere quali ho letto qui: scienceinthesands.blogspot.com/2011/10/…
David Ketcheson,

Ho pensato che ci fossero persone che hanno tenuto il passo più di me. Sono per lo più fuori dalla scena dell'editoria accademica (non trovarmi su quella strada). Ora è certamente più facile tenere il passo rispetto a quando tutto era solo di carta. Solo per curiosità, quanti articoli di quella collezione finisci per leggere in un mese?
Bill Barth,

Probabilmente solo 1-2 in qualsiasi profondità. Ma ricavo molto valore dall'essere consapevole del lavoro leggendo alcuni abstract. Probabilmente leggerò sull'ordine di 25 abstract in un mese. Il resto viene scartato dopo aver scansionato il titolo.
David Ketcheson,

2

La mia breve risposta è: purtroppo, c'è (quasi).

C'è il rating dell'Aust MS per le riviste matematiche e penso che ci siano anche altri rating. Tuttavia, secondo me questo non è utile. Cito dal mio blog: "La mia opinione è che la valutazione sia possibile ma sia inutile che pericolosa. È possibile, dal momento che puoi chiedere a matematici esperti e otterrai una risposta affidabile. È inutile, dal momento che o sai quali riviste sono bene o si può chiedere a un collega (che è sostanzialmente la stessa ragione di quello precedente). e 'pericoloso, in quanto offre la possibilità di decisioni di forma sulla permanenza o contributi su questi numeri e sposta l'attenzione da quello che si pubblica a cui si pubblicare."


Purtroppo, è non necessario preoccuparsi sia ciò e dove pubblicare, almeno se si è nella fase della tua carriera in cui siete preoccupati per la necessità di trovare un altro lavoro.
Aeismail,

Bene, l'attenzione dovrebbe essere su ciò che è nel documento. Comunque: se sei molto bravo, non importa dove pubblichi. Almeno la comunità matematica è abbastanza resistente contro misure come il fattore di impatto e si basa su opinioni di esperti (ad es. Arbitri e lettere di raccomandazione).
Dirk,

Se ti trovi in ​​un campo come la matematica, non è un grosso problema. Tuttavia, non sappiamo specificamente in quale campo si trovi il PO, e quindi ci sono ottime possibilità che possa essere valutato da scienziati non computazionali. Quindi l'intera questione della conoscenza rispetto alle impressioni viene alla ribalta.
Aeismail,

Immagino che ci siano altrettante persone su entrambi i lati della questione (sia che sia importante da una prospettiva pragmatica) ... In alcune istituzioni, importa dove, in altre, importa CHE COSA.
Paolo

1

Esistono alcuni sistemi di classificazione delle citazioni, che si potrebbe sostenere siano decenti misure di prestigio - documenti importanti vengono citati di più e simili - il più comune di questi è il "fattore di impatto". Ma tutti questi hanno i loro problemi - non sono costanti per campo, sono suscettibili di manipolazione da parte di ricercatori intelligenti, ecc. Altri che sono leggermente migliori sono l'indice h e l'indice g, ma ... meh.

In generale, ho scoperto che c'è un "feeling" sul campo per ciò che è buono e ciò che non lo è - e, cosa più importante, ciò che è appropriato e ciò che non è per il tuo documento. Ad esempio, ho un documento che è riuscito a entrare in un ottimo diario, ma è assolutamente inappropriato, quindi languisce un po '.

I tuoi valutatori o colleghi sarebbero probabilmente le migliori fonti con cui parlare. L'esperienza è spesso il miglior giudice di ciò che viene considerato "buono" per un determinato articolo che si presterebbe bene a un particolare giornale. Classifiche di campo generale (Biologia, Medicina, ecc.) O, peggio ancora, classifiche a livello accademico potrebbero non essere utili.

Utilizzando il nostro sito, riconosci di aver letto e compreso le nostre Informativa sui cookie e Informativa sulla privacy.
Licensed under cc by-sa 3.0 with attribution required.