Question:
Comment PLOS ONE maintient-il son facteur d'impact?
StrongBad
2015-09-09 23:03:40 UTC
view on stackexchange narkive permalink

La revue PLOS ONE a un facteur d'impact supérieur à 3. Les revues spécialisées dans mon domaine obtiennent des facteurs d'impact d'environ 3. Le facteur d'impact étant essentiellement une mesure des citations par article, il semble surprenant qu'une revue comme PLOS ONE qui se targue de ne pas porter de jugement subjectif sur des choses comme "importance" peut conserver un facteur d'impact plus élevé que les revues qui donnent la priorité à "l'importance".

Je n'ai cité que quelques articles publiés dans PLOS ONE et je regarde ce qui a été publié dans PLOS ONE dans mon domaine, la majorité des choses semblent "sans importance". Il semble que dans ma spécialité, PLOS ONE publie un pourcentage plus élevé de travaux «sans importance» que les revues spécialisées. Cela pourrait bien sûr être dû à la taille de l'échantillon et à mon propre biais.

Je suis curieux de savoir ce qui motive le facteur d'impact de PLOS ONE. Existe-t-il des spécialités pour lesquelles le facteur d'impact PLOS ONE est faible par rapport aux revues spécialisées? Les rédacteurs en chef et les critiques de revues spécialisées sont-ils particulièrement mauvais pour identifier «l'importance»? Y a-t-il autre chose?

Je ne connais pas spécifiquement PLOS ONE, mais je suppose qu'une partie de la réponse sera que le facteur d'impact dépend assez du terrain. D'ailleurs, [d'autres revues interdisciplinaires] (https://en.wikipedia.org/wiki/Nature_%28journal%29) parviennent à atteindre des facteurs d'impact beaucoup plus élevés.
Alors que je compare * PLOS ONE * à * Nature *, je dois noter que la taille du journal est également critique. Les revues ayant des facteurs d'impact très élevés y parviennent en grande partie en ne publiant que les articles susceptibles d'obtenir un grand nombre de citations. Il y a un [éditorial en PRL] intéressant (http://journals.aps.org/prl/abstract/10.1103/PhysRevLett.102.060001) d'il y a quelques années à propos de cet effet.
Légèrement plus significatif (étant basé sur un système de notation crédible et public), l'Eigenfactor de PLOS ONE est maintenant de 1,533 par rapport à Nature's 1,499, donc dans l'ensemble, on peut dire qu'il a plus d'impact, mais l'impact de l'article est massivement inférieur. Cela semble indiquer qu'elle publie un nombre énorme d'articles dont la plupart ne reçoivent que quelques citations, tandis que Nature publie moins d'articles qui sont presque tous très cités.
Huit réponses:
Fomite
2015-09-09 23:44:19 UTC
view on stackexchange narkive permalink

Il y a, je pense, deux facteurs distincts au travail qui peuvent aider à expliquer une partie de votre perplexité:

  • Le facteur d'impact de votre domaine n'est pas le facteur d'impact du milieu universitaire. Par exemple, les revues de société dans mon domaine ont un facteur d'impact de ~ 5, et certains des grands noms des études très éclaboussantes ont des facteurs d'impact allant de 20 à 56. En fonction de l'équilibre des domaines soumis à PLOS ONE , leur facteur d'impact peut provenir de domaines plus cités.
  • Articles de citation à longue queue. Les facteurs d'impact, comme de nombreuses moyennes, sont sensibles aux effets à longue traîne. PLOS ONE est un journal en libre accès et très visible. Il est possible que le document généraliste occasionnel très accessible y parvienne et aboutisse à un grand nombre de citations, augmentant ainsi le facteur d'impact global.

Les deux sont aidés, dans mon avis, par le manque de révision pour "importance" - au-delà de votre suggestion que cela aboutit à des articles moins importants finissant dans PLOS ONE , c'est aussi un avantage pour les articles qui ne "correspondent pas" dans des revues hautement spécialisées, mais peut encore avoir un impact.

Je suis d'accord avec ces deux points, et je pense qu'ils mènent vers un n ° 3 non déclaré - un méga-journal non sélectif comme PLOS One pourrait bien tendre vers un facteur d'impact largement représentatif de la littérature scientifique. Le taux de citation global de tous les articles publiés est-il de l'ordre de 3 citations sur deux ans? Quelqu'un a dû étudier cela ...
Vérification rapide sur WoS: les articles publiés en 2012 sur tous les sujets ont été cités 3,8 fois en 2014 pour les auteurs appelés `` White '' (7k articles), 6,03 pour les auteurs appelés 'Black' (1,5k), 3,48 pour les auteurs appelés 'Green' (5k ), 3,03 pour les auteurs appelés «Clark» (6k); moyenne pondérée 3,83. C'est donc plausible. Hmmm. Plus de travail à prévoir :-)
Le nombre moyen de citations reçues en deux ans est à peu près égal au nombre moyen de citations * données * aux articles des deux dernières années par un article aléatoire. Cela dépend beaucoup du terrain, mais 3 ressemble à une bonne estimation approximative.
@Andrew Je pensais qu'ils devraient être inférieurs à la moyenne car ils ne sont pas sélectifs.
@StrongBad Mais un facteur d'impact légèrement supérieur à la moyenne pourrait s'expliquer par une distribution inégale des domaines dans lesquels les articles proviennent, qui pourrait être biaisée vers ceux avec des moyennes plus élevées (les mathématiques ont certainement une moyenne assez faible, et je n'ai jusqu'à présent entendu parler de personne publiant leurs articles de mathématiques dans PLOS One).
@StrongBad Je m'attendrais à ce qu'il soit un peu en dessous (parce que le meilleur matériel dans tous les domaines va certainement préférentiellement à d'autres revues) mais pas de façon dramatique. En ce qui concerne votre requête originale, il pourrait être très intéressant de "subdiviser" PLOS One (par exemple 'tous les articles de paléontologie') et de voir comment ce sous-ensemble se compare à d'autres revues thématiques ... mais un peu plus de travail.
Je viens de tomber sur cette étude qui semble quelque peu pertinente - http://leo.cineca.it/index.php/jlis/article/view/11257/10621 - environ la moitié des catégories JCR ont un titre OA dans le quartile supérieur , et le journal le plus élevé est OA dans huit d'entre eux. Cependant, aucun d'entre eux n'est un mégajournal de style PLOS One.
jakebeal
2015-09-10 00:26:38 UTC
view on stackexchange narkive permalink

Je pense que PLOS ONE parie sur deux hypothèses clés:

  1. Les gens sont très mauvais pour juger de l'importance future - donc, pas de filtrage «significatif».
  2. Les moteurs de recherche et les réseaux sociaux sont désormais bien meilleurs pour fournir des articles que des abonnements - donc, le libre accès.

Ceci est certainement conforme à mon expérience: actuellement, j'ai deux articles PLOS ONE, chacun publié il y a environ 5 ans, l'un avec 80 citations et l'autre avec 9 citations au moment de la rédaction de cet article. Les deux sont assez spécialisés et auraient probablement eu du mal à être publiés dans des revues "sélectives", mais ont trouvé une sorte de public. Je ne suis donc pas surpris qu'ils semblent être en mesure de maintenir un facteur d'impact raisonnable.

Je ne pense pas que PLOS s'intéresse à «maintenir» le facteur d'impact de PLOS ONE dans la revue. De nombreuses personnes impliquées dans PLOS considèrent les mesures des facteurs d'impact des revues comme étant activement nuisibles à la science et à l'édition scientifique.
@MichaelHoffman vous plaisantez? C'est leur produit: pas de rejet rédactionnel et un IF qui se rapproche de celui des bonnes revues dans de nombreux domaines. Sinon, comment pourraient-ils générer autant de revenus et payer un demi-million à leur PDG par an?
Non, je ne plaisante pas.
_Beaucoup de personnes impliquées dans PLOS considèrent les métriques des facteurs d'impact des revues comme étant activement nuisibles à la science et à l'édition scientifique._ - J'ai vu cette opinion également sans rapport avec l'Open Access et PLOS.Mais, pour autant que je sache, cette opinion n'a pas atteint vos comités de mandat et de recherche typiques.Pas encore?
WetlabStudent
2016-03-13 11:55:28 UTC
view on stackexchange narkive permalink

Notez que cette réponse est anecdotique, mais depuis que j'ai entendu cela déclaré par 3 professeurs d'édition à grand volume maintenant, je pense que cela peut être un facteur. Ces 3 professeurs ont affirmé classer les revues comme suit (approximativement)

  1. nature et science
  2. PNAS et la revue la plus spécialisée (mais toujours assez large) dans leur domaine
  3. Toutes les autres revues, y compris PLOS one

Une philosophie de la réussite académique est qu'une fois que vous avez de nombreuses publications dans des revues raisonnablement bonnes, l'avantage marginal d'une autre n'est pas si grand. Cependant, l'avantage marginal d'un article supplémentaire sur la science ou la nature est assez important. Par conséquent, comme PLOS, il est souvent moins compliqué de se soumettre, si un article est rejeté par Science, Nature ou PNAS, le prochain arrêt pour ces professeurs à fort impact est souvent PLOS. Cela ne vaut tout simplement pas la peine pour ces professeurs occupés de parcourir plusieurs soumissions dans la chaîne alimentaire de la revue, car ils veulent se concentrer sur leur prochaine soumission ou proposition de subvention Science / Nature qui pourrait conduire à un tel article. Cela signifie que PLOS one reçoit beaucoup d'articles écrits par des professeurs assez célèbres qui n'étaient tout simplement pas assez jazzy pour la nature et la science. Bien sûr, PLOS one reçoit également un tas d'articles sans importance (rédigés par des auteurs célèbres et non célèbres), mais je soupçonne que certains des articles à queue lourde suggérés par @fomite proviennent d'universitaires avec cette philosophie.

Je souligne encore une fois que c'est anecdotique et que je n'ai pas de données pour confirmer cette hypothèse.

Je pense que c'est tout à fait possible.
Jeromy Anglim
2016-03-14 11:55:15 UTC
view on stackexchange narkive permalink

Bien que PlosOne publie ostensiblement des articles de tous les domaines scientifiques, il est fortement orienté vers la biologie et la médecine. Les revues dans ces domaines ont des facteurs d'impact plus élevés car (a) elles ont plus de références par article (je suppose que cela pourrait également être lié à l'utilisation de citations numériques plutôt que de style apa / harvard), et (b) elles ont plus demi-vies de référence (c'est-à-dire que les articles accumulent une plus grande proportion de leurs références totales dans la période de deux à trois ans suivant la publication qui est utilisée pour calculer le facteur d'impact).

Ce sont des facteurs purement idiosyncratiques qui influencent le facteur d'impact moyen des revues dans un domaine particulier.

  • Si vous venez d'un domaine de la biologie ou de la médecine, vous pourriez considérer un facteur d'impact de 3 comme peut-être moyen ou légèrement supérieur à la moyenne.
  • En psychologie d'où je viens, certaines des meilleures revues d'une sous-discipline donnée ont des facteurs d'impact de l'ordre de 3 à 6.
  • Dans d'autres domaines comme les mathématiques ou les sciences humaines, un facteur d'impact de 3.0 serait perçu comme encore plus élevé.

Le point principal est que les facteurs d'impact sont plus élevés y corrélé avec des évaluations subjectives de la qualité et de l'importance lorsque de telles comparaisons sont effectuées pour des revues d'une discipline.

De plus, même par rapport à des domaines comme la médecine et la biologie, le facteur d'impact de PlosOne est respectable. Les articles sont clairement cités assez souvent dans ces domaines. Pour en savoir plus, accédez à scimago ou Web of Science Citation Reports.

Si vous souhaitez comparer des revues d'une manière plus neutre sur le plan de la discipline, vous pouvez consulter le SJR. Il utilise une procédure de pondération itérative qui, je crois, pondère plus fortement les références provenant de revues plus prestigieuses et permet à chaque article de ne donner qu'une quantité limitée de prestige. Ainsi, par exemple, un article avec de nombreuses citations ne peut donner qu'un prestige partiel. Cela permet aux disciplines avec plus de références par article de compter un peu moins.

Par exemple, sur cette métrique, PlosOne a un SJR de 1,3. En revanche, une revue de psychologie que je connais qui a un facteur d'impact similaire à PlosOne avait un SJR ou 1,8, ajustant vraisemblablement pour les différentes pratiques de citation et le prestige relatif des publications sources. Vous voudrez peut-être consulter le SJR des revues dans votre domaine pour comparer.

En passant, les mesures d'impact chez plosone ont considérablement diminué ces dernières années (comparez 2010 à 2016); mais il s'agit toujours d'une revue classée dans le premier quartile Deux explications possibles: (1) en tant que revue multidisciplinaire, le mélange d'articles, la proportion d'articles provenant de disciplines à fort nombre de citations a diminué, ou (2) la qualité moyenne / l'impact de la recherche a diminué.

enter image description here https://www.scimagojr.com/journalsearch.php?q=10600153309&tip=sid&clean=0

Manolis Antonoyiannakis
2018-09-23 18:21:17 UTC
view on stackexchange narkive permalink

La réponse à cette question est donnée par le théorème central des limites. Fondamentalement, PLoS ONE est si grand qu'il échantillonne la population de tous articles qui, ensemble (s'ils sont publiés dans un seul journal fourre-tout) ont un IF = 3. En statistique, cela s'appelle «régression vers la moyenne».

Pour plus d'informations, veuillez consulter mon article " Les facteurs d'impact et le théorème central des limites: pourquoi les moyennes des citations dépendent de l'échelle" dans le Journal of Informetrics .

Wetlab Walter
2016-03-04 22:51:44 UTC
view on stackexchange narkive permalink

Le principal argument de vente d'une revue de premier plan n'est pas que le contenu est plus important, mais plutôt que ses normes de publication en général sont beaucoup plus élevées. Bien entendu, l'un des critères est l'impact, mais on peut soutenir que le critère le plus important est le niveau auquel l'examen par les pairs est effectué. J'ai vu des articles nécessitant 3 ou 4 nouvelles expériences pour plaire aux critiques de Cell / Nature.

Quelle différence y a-t-il entre les efforts supplémentaires de diligence raisonnable et le taux de citation d'un article? Je doute peu ou pas. Les gens citent des publications pertinentes pour leur travail, quel que soit le nombre de répliques utilisées ou le nombre de chiffres supplémentaires. Bien sûr, les revues à fort impact ont d'autres critères qui font augmenter le taux de citation, comme l'impact, mais mon point est que c'est une fausse hypothèse de supposer que la seule chose qui va pour les revues de premier plan est leurs exigences d'impact. >

Un réviseur demandant une réplication n'est pas rare dans n'importe quel journal. Plos One est assez rigoureux quant à la qualité de la science (sans doute tout autant que la nature, bien que probablement plus variable compte tenu du nombre d'articles traités). Je n'achète pas cette explication.
@WetLabStudent assez [rigoureux sur la qualité de la science] (https://twitter.com/jomcinerney/status/705032888694263808) en effet.
@CapeCode Je savais que quelqu'un allait en parler. Considérant que plos one publie 85 articles par jour, environ 50 fois plus fréquents que même les revues les plus prolifiques (par exemple Nature), si Nature et Plos one étaient de qualité égale, vous vous attendriez à ce que Plos one ait environ 50 fois plus de publications ridiculement mauvaises qui ont glissé à travers la fissure que la nature. Je connais de nombreux articles qui ont été rejetés par plos one puis publiés avec succès dans des revues à accès non ouvert raisonnablement bonnes (Q1).
Pour être juste à mon argument initial, les papiers ridicules ne sont pas vraiment le problème. PLOS et Nature déraperont tous les deux, à un rythme à peu près similaire en supposant que le taux de critiques qui ne donnent pas de **** existe à la même fréquence. Mon argument était que Nature et al, dans des circonstances de révision positives, sont plus abouties. C'est ce que je recherche dans un article, et c'est pourquoi je lis Nature / Cell - mais cela n'améliore pas directement le facteur d'impact.
@WetLabStudent merci d'avoir élevé les chiffres de volume stupéfiants, un autre facteur bien sûr est que PLOS gagne de l'argent chaque fois qu'il accepte un papier. Une forte incitation à accepter plus d'articles.
Cela ajoute jusqu'à 46 millions de dollars / an de revenus, pas étonnant qu'ils prônent l'obsolescence du rejet éditorial.
@CapeCode Votre point sur les revenus est bien compris. Mais qu'entendez-vous par "pas étonnant qu'ils prônent l'obsolescence du rejet éditorial"? Ils ont plaidé pour ne pas rejeter les articles sur la base de "l'importance", mais ils ont fortement plaidé pour le rejet des articles qui sont incorrects. Bien sûr, des erreurs se produisent en raison de critiques paresseux et encore pire d'éditeurs associés paresseux. De nombreux papiers de qualité ont été rejetés par PLOS one, voir
Mark
2016-03-13 09:01:51 UTC
view on stackexchange narkive permalink
  1. Le grand nombre d'articles publiés par PLoS ONE peut augmenter la probabilité que certains soient très cités. Cela peut augmenter le facteur d'impact.
  2. Je suis d'accord qu'il peut également refléter la moyenne (géométrique ou arithmétique) de toutes les revues. Parce que PLoS ONE publie beaucoup d'articles de biologie, en particulier de biologie, ceux-ci ont tendance à être plus cités car il s'agit d'un domaine plus vaste (par exemple par rapport à la géologie ou aux statistiques).
Crunkenstien
2016-03-04 22:10:09 UTC
view on stackexchange narkive permalink

Une chose qui semble avoir été omise de ce fil est le volume d'articles publiés par PLOS ONE. Environ 85 par jour selon leur page wikipedia. Il semble que cela plaiderait contre un effet de longue traîne.

Pourquoi pensez-vous que cela irait à l'encontre d'un effet de longue traîne? il me semble que le nombre élevé d'échantillons faciliterait en fait l'apparition de la longue traîne.


Ce Q&R a été automatiquement traduit de la langue anglaise.Le contenu original est disponible sur stackexchange, que nous remercions pour la licence cc by-sa 3.0 sous laquelle il est distribué.
Loading...