Question:
Dois-je recommander le rejet d'un article que je réfère si les auteurs n'apportent pas les changements qu'ils auraient pu apporter?
Buzz
2015-05-24 05:56:41 UTC
view on stackexchange narkive permalink

Plus tôt cette année, j'ai reçu un article pour arbitrer pour la meilleure revue dans mon domaine de recherche. Je connais les deux auteurs. Le premier a récemment terminé un doctorat. travailler avec un de mes amis. Mon ami de la faculté est la personne la plus connue qui travaille dans notre région; c'est un chercheur extrêmement attentif et consciencieux et, travaillant sous sa direction, l'étudiant a produit un très bon travail. L'autre auteur du manuscrit que je réfère est le nouveau directeur postdoctoral de ce récent doctorat. grad. C'est un scientifique très expérimenté mais pas très distingué, et je pense que certains de ses travaux sont plutôt mal faits.

Le premier brouillon de manuscrit que j'ai reçu de cette paire d'auteurs avait un problème flagrant. Il peut y avoir eu une erreur fondamentale dans la façon dont ils ont interprété leurs résultats. Le système qu'ils étudient pourrait se comporter de deux manières différentes, et ils supposent qu'il va dans un sens, apparemment sans même remarquer l'autre. Ils ont peut-être raison sur la façon dont le système se comporte, mais j'ai renvoyé un rapport disant que le travail serait publiable s'ils expliquaient pourquoi ils n'envisageaient qu'une des deux possibilités ou élargissaient leur analyse pour couvrir les deux. La conclusion finale restera probablement inchangée quelle que soit la manière dont le système se comporte, mais il est important de le vérifier; de plus, il est intéressant en soi de savoir dans quelle direction les choses se passent.

Après une période assez brève, j'ai récupéré un manuscrit révisé de la revue. Les auteurs avaient apporté un certain nombre d'autres corrections mineures que j'avais demandées, mais ils ont fondamentalement ignoré mon point principal. À ce stade, je ne sais pas quoi faire. J'ai toujours l'impression que le papier contient une quantité importante de matériel intéressant et qu'il pourrait être corrigé sans trop d'effort. Cependant, je suis contrarié que les auteurs n'aient fait aucun effort pour résoudre le problème réel que j'ai signalé. Ils ne reconnaissent même pas vraiment le problème dans leur lettre de nouvelle soumission.

J'étais le seul arbitre à avoir rendu un rapport sur la première ébauche, donc ce que je dirai déterminera presque certainement si l'article est publié. Dois-je le renvoyer une fois de plus, en insistant pour que les changements que j'ai réclamés soient effectivement apportés cette fois? Ou devrais-je recommander le rejet, car les auteurs ne sont apparemment pas disposés à faire des ajustements raisonnables.

Est-il bien connu que le système pourrait se comporter de deux manières? Avez-vous soutenu votre réclamation avec des références? Votre remarque était-elle suffisamment forte pour exprimer son importance?
Je passe environ les deux tiers du rapport à discuter de la question, les auteurs ont donc dû volontairement éviter de répondre. Je soupçonne que les auteurs n'avaient pas réalisé que des comportements différents étaient possibles lorsqu'ils ont rédigé l'article. Ils ont fait une hypothèse, basée sur la façon dont les systèmes similaires se comportent; cependant, les caractéristiques mêmes qui ont rendu le système plus compliqué qu'ils ont décidé de considérer comme intéressant permettent également qu'il puisse se comporter différemment. Cela n'a peut-être pas été évident lorsqu'ils pensaient au problème, mais cela m'est venu à l'esprit comme une question évidente lorsque j'ai lu le manuscrit.
Je ne comprends pas pourquoi vous feriez autre chose que recommander le rejet. Y a-t-il une raison pour laquelle vous le feriez?
@Ben Crowell: Le papier pourrait encore être une contribution valable s'ils apportaient réellement les changements, ce qui me fait hésiter à le rejeter d'emblée.
Cinq réponses:
Nate Eldredge
2015-05-24 07:00:35 UTC
view on stackexchange narkive permalink

Il est tout à fait raisonnable d'être contrarié que les auteurs aient ignoré vos commentaires, mais aux fins de la révision du document, je pense que vous devriez mettre cela de côté. Je laisserais l'éditeur décider si les auteurs "ne veulent pas faire des ajustements raisonnables". Envoyez-lui une note disant quelque chose comme:

J'ai mentionné dans mon rapport initial qu'il était essentiel que les révisions abordent le problème de XXXX, mais cela n'a pas été fait, ni mentionné dans les commentaires des auteurs. Cet article a de nombreuses qualités, mais je ne pense pas qu'il convienne à la publication si ce problème n'est pas abordé. Si vous pensez que cela vaut la peine de demander aux auteurs une révision supplémentaire traitant de ce problème, je serais ravi de la lire et de donner mon avis.

Je pense que c'est à l'éditeur de juger entre "c'est un article que je veux vraiment dans mon journal, donc je suis prêt à supporter un peu de merde" ou "les auteurs perdent notre temps, au diable avec eux".

@nateeldregdge: En tant qu'éditeur, je préfère que les critiques viennent au fait que d'être circonspect. «Ce papier a beaucoup de bonnes qualités, mais…» et «Si vous voulez bien que le temps en vaille la peine…» ne communiquent vraiment pas correctement ce que vous pensez. Soyez franc: "Je pense qu'il est important que les auteurs abordent les problèmes soulevés dans la première revue, mais ils ne l'ont pas fait." C'est le travail des éditeurs de prendre une décision, votre avis n'a pas besoin de le souligner.
Je trouve la réponse claire. Il fait la déclaration d'expertise et indique clairement qu'il s'agit en définitive d'une décision éditoriale.
jakebeal
2015-05-24 07:10:26 UTC
view on stackexchange narkive permalink

S'il est effectivement le cas que:

  1. La faille potentielle pourrait vraiment changer fondamentalement la conclusion de l'article, et
  2. Les auteurs n'ont même pas abordé votre problème du tout même dans leur lettre de réponse

alors je recommanderais le rejet.

Lors d'une révision majeure, il est impératif que les auteurs parlent au moins de chaque point soulevé par les réviseurs dans la lettre de réponse, même s'il s'agit simplement de dire: "Non, nous ne ferons pas cela."

Si un auteur ne parvient pas à résoudre un problème critique de manière flagrante, je pense qu'il est raisonnable de conclure qu'ils évitent le problème et de recommander le rejet. Si le problème est important mais pas critique, ou si vous n'êtes pas d'accord avec la façon dont les auteurs le traitent, alors je pense qu'il vaut mieux recommander une révision majeure.

Même si vous recommandez le rejet, si l'éditeur le souhaite donnez-leur une autre chance, ils peuvent certainement le faire. De même, même s'ils sont rejetés, ils peuvent modifier leurs habitudes (ou non) et aller dans une autre revue de niveau inférieur. Alors: votez votre conscience scientifique.

Blaisorblade
2015-05-24 12:59:17 UTC
view on stackexchange narkive permalink

Dois-je le renvoyer une fois de plus, en insistant pour que les modifications que j'ai demandées soient effectivement apportées cette fois? Ou devrais-je recommander le rejet, puisque les auteurs ne sont apparemment pas disposés à faire des ajustements raisonnables.

Tant qu'ils ne réagissent même pas à la remarque, la politesse serait d'assumer un bon problème de communication religieuse, surtout compte tenu du nombre de personnes impliquées. Donc, je demanderais juste une autre révision et je soulignerais que la remarque n'a de toute façon pas été traitée.

Personnellement, j'éviterais d'être subtile une fois qu'ils ont manqué le point, alors je voudrais simplement préciser que les auteurs devrait répondre à la remarque (dans le papier), vous convaincre qu'ils ne devraient pas dans la lettre de nouvelle soumission, ou vous recommanderez le rejet. Pour éviter d'être trop négatif ou agressif, je ferais également des commentaires positifs - disons, vous vous attendez à ce que le point soit facilement traité.

J'étais déjà très explicite sur ce qu'ils devraient changer. La seule conclusion possible est que les auteurs ont volontairement ignoré le point principal de la revue.
@Buzz: ou ils ne communiquaient pas bien entre eux pour savoir qui devrait résoudre le problème. Ou les deux «bons auteurs» ont fait confiance à l'auteur que vous n'aimez pas traiter et il ne l'a pas fait. J'ai vu de près des erreurs beaucoup plus compliquées, donc je n'essaierai pas de couvrir toutes les possibilités.
Il n'y avait que deux auteurs sur cet article, le récent diplômé et son nouveau directeur postdoctoral. Je ne pense pas qu'une mauvaise communication entre les deux est probable, même si une incompétence extrême pourrait toujours être une explication.
Bill Barth
2015-05-24 06:01:44 UTC
view on stackexchange narkive permalink

Vous devriez encourager l'éditeur à obtenir un deuxième avis. Si vous vous sentez fermement, vous devez rejeter à nouveau l'article en citant ou en répétant votre commentaire sur l'explication alternative. D'après ce que vous avez dit ici, cela semble probablement important.

J'ajouterais une option pour les contacter directement - si cela n'a pas encore été fait. Étant donné que les deux auteurs sont apparemment bien connus du PO, cela pourrait faciliter les choses.
@Nox: En supposant que la revue utilise l'arbitrage anonyme, de nombreuses personnes jugeraient inapproprié pour l'OP de contacter directement les auteurs (révélant ainsi son identité). Voir http://academia.stackexchange.com/questions/9523/is-it-acceptable-as-referee-to-contact-an-author-on-a-paper-you-review
user6726
2015-05-24 09:49:23 UTC
view on stackexchange narkive permalink

Il me semble que vous devriez écrire une brève critique qui commence par dire quelque chose comme "Je recommande de rejeter la soumission X, au motif que l'article ne tient même pas compte d'une interprétation alternative plausible des résultats expérimentaux, et donc la signification théorique de l'article est indéterminée ". Dans mon examen, je réitérerais les points essentiels concernant l'alternative faite dans l'examen précédent, et je le déclarerais également comme un résumé "J'ai déjà mentionné ceci". Il n'est pas scientifiquement acceptable d'affirmer ou de laisser entendre qu'une conclusion spécifique a été établie sur la base de certaines preuves, alors qu'en fait plusieurs conclusions sont compatibles avec ces preuves.

Il n'est pas clair si votre recommandation précédente était "réviser et resoumettre "ou" rejeter "- je suppose que c'était" réviser et soumettre de nouveau ", sinon il serait étrange que le document ait été révisé et soumis de nouveau. Je pense donc qu'il serait utile d'expliquer aux auteurs et à l'éditeur les raisons d'une recommandation plus fortement négative, alors que l'article n'a pas (apparemment) empiré. Un certain nombre de revues utilisent la norme «un cycle de révision», selon laquelle vous jugez qu'après une révision, l'article est susceptible d'être acceptable. Selon cette norme, si vous jugez qu’un article est susceptible d’être acceptable après une révision, il doit être rejeté. Un corollaire est que si un article s'avère inacceptable après une seule révision, il doit être rejeté. Maintenant, je connais des revues où 4 séries de révisions sont tolérées, donc vous ne pourrez peut-être pas contextualiser la décision de «rejet» en fonction de la politique de revue annoncée, mais vous pouvez certainement adopter une telle norme, implicitement ou explicitement, comme la vôtre norme de qualité pour l'acceptation.

Ma première critique n'était pas un rejet, mais elle exigeait une révision majeure. Les lignes directrices de la revue fixent l'objectif de déterminer la possibilité de publication avec au plus deux révisions. Cela donne du temps pour des révisions majeures, si nécessaire, puis des révisions mineures qui peuvent être identifiées lors d'un deuxième tour de révision. Cependant, le processus de révision peut, à la discrétion de l'éditeur, durer un peu plus longtemps.


Ce Q&R a été automatiquement traduit de la langue anglaise.Le contenu original est disponible sur stackexchange, que nous remercions pour la licence cc by-sa 3.0 sous laquelle il est distribué.
Loading...