Facteur d'impact
Un facteur d'impact, également abrégé par les sigles FI ou IF (pour l'anglais : impact factor), est un calcul qui estime indirectement la visibilité d'une revue scientifique. Le FI d'une revue est le nombre moyen de citations de chaque article publié dans cette revue. Ces facteurs d'impact, qui mesurent une certaine visibilité, sont considérés par certains gestionnaires de la recherche et certains chercheurs comme des critères pertinents : une revue avec un IF élevé serait ainsi considérée comme plus importante (parce que plus visible: plus lue et plus citée) qu'une revue avec un FI faible. Ces facteurs d'impact ont pour le coup une influence certaine dans le domaine de la publication scientifique. Ils sont utilisés par ailleurs comme critère pertinent d'évaluation par les tenants d'une évaluation quantitative de la recherche (sujet à controverse).
Les FI sont indexés dans le Thomson Reuters Journal Citation Reports et publiés tous les ans.
Calcul
Pour une année donnée, le FI d'une revue scientifique est le nombre moyen de citations de chaque article publié dans cette revue par les autres revues durant la période des 2 ans précédents[1]. Les nouvelles revues, indexées depuis leur premier numéro, recevront un facteur d'impact après une période de deux ans. Certaines publications annuelles ou irrégulières ne publient rien pendant un an, ce qui a une incidence sur ce calcul. Le FI concerne une période de temps définie. Il est possible de le calculer pour n'importe quelle période désirée. Les Journal Citation Reports (JCR) incluent aussi un FI de 5 ans[2]. Le JCR montre aussi les rangs de journaux par FI, et si nécessaire par discipline, comme la chimie organique ou la psychiatrie.
Histoire
Le FI a été conçu par Eugène Garfield, le fondateur de l'Institute for Scientific Information (ISI) maintenant faisant partie de Thomson Reuters. Il est publié dans le Journal Citation Reports.
Utilisation
Par exemple, les deux revues scientifiques considérées comme les plus prestigieuses sont Nature et Science. Toutes les deux ont des facteurs d'impact autour de 30. Certaines revues biomédicales ont des valeurs plus importantes. Nombre de revues de domaines spécialisés de haut niveau ont des facteurs d'impact inférieurs à 5. Le FI est utilisé pour comparer différentes revues dans un même domaine. L'index de l'ISI recense plus de 11 000 revues scientifiques[3]. Il est parfois commode de pouvoir faire des comparaisons entre différentes revues ou différents groupes de recherche. Par exemple, le financeur d'une recherche scientifique désire un critère pour juger la productivité de son investissement. Une mesure quantitative apparemment objective de l'importance des publications peut lui sembler alors nécessaire, laquelle peut utiliser le facteur d'impact.
Utilisation détournée
Les facteurs d'impact ne sont cependant pas sans biais, surtout quand on utilise le FI dans des situations dans lesquelles il n'est pas adapté. Comme d'autres outils de bibliométrie, leur usage est critiqué[4].
- Bien que le facteur d'impact ait été créé à l'origine comme mesure de la réputation d'une revue, il est de plus en plus employé comme mesure de la productivité des chercheurs[5].
- C'est une mesure trop grossière de la fiabilité de l'information donnée. Un postulat voudrait que, par exemple, un essai qui démontre l'efficacité d'un traitement dans un article d'une grande revue médicale à FI élevé pourrait changer la pratique médicale quotidienne et que ce serait rarement le cas dans une revue avec un FI faible (avec le postulat secondaire que si l'essai possédait des résultats intéressants, il serait publié dans une plus grande revue). Ce postulat n'est pas démontré: en effet, seul un petit nombre d'articles de ces revues à FI élevé sont très cités (ce que cache la moyenne). Par exemple, environ 90 % du FI de Nature en 2004 était basé sur seulement le quart des publications[6]. Ainsi, l'importance des publications sera très variable dans une même revue. Le FI sous-estime l'importance des articles d'une même revue les plus cités et sur-estime l'importance des articles les moins cités qui sont la grande majorité d'une revue.
Discussion
Avantage
L'avantage du facteur d'impact est dans sa facilité d'usage, il est très facilement calculable, et qu'il couvre 8 400 revues de plus 60 pays différents. Cela en fait un des outils bibliométriques les plus simples et les plus connus.
Inconvénients et critiques
Inconvénients, difficultés
- Le nombre de citations n'est pas une mesure correcte de la qualité ni même de la quantité d'informations nouvelles des publications. Il y a d'autres critères que la qualité scientifique brute du travail qui font qu'un article est lu et cité : la clarté de l'article, le fait qu'il soit dans un thématique « à la mode » ou pas, voire que l'article soit cité comme exemple de mauvaise recherche scientifique.
- La fenêtre temporelle est trop courte. Dans la recherche de pointe, l'importance de l'article peut ne devenir apparente qu'après plusieurs années, et ne sera donc pas prise en compte par le facteur d'impact de l'ISI[7]. De plus, les articles classiques sont cités fréquemment, même après plusieurs décennies. Pour les revues ayant des processus de publication assez longs, les auteurs n'auront cité que des articles qu'ils ont lu au moment de la rédaction de leur travail. En effet, pour certaines revues, le temps entre la soumission de l'article et sa publication peut prendre plus de deux ans. Seules les citations d'articles de moins de 3 ans avant la publication et de moins de 1 an avant la rédaction seraient alors pris en compte. Un FI d'au moins 5 ans et plus serait alors plus pertinent.
- La nature d'un domaine scientifique implique des rythmes et des quantités différentes de publication, ce qui affecte le facteur d'impact. Par exemple, les revues médicales ont des facteurs d'impact supérieurs à ceux de revues de mathématiques ; il est illogique de comparer sur le même plan une revue médicale avec une revue mathématique tant le travail d'un chercheur en biomédecine diffère de celui d'un chercheur en mathématiques. Le nombre de publications et le FI des revues qui les ont publié ne reflètent pas les mêmes types d'effets.
- Le facteur d'impact augmente avec le prestige de la revue, qui peut être artificiellement augmenté par une politique éditoriale adéquate et ses moyens en termes de publicité. Comptant la fréquence de citation par article et négligeant le prestige de la revue, le facteur d'impact confond des mesures de popularité, de prestige et d'impacts réels.
Le facteur d'impact étant fortement lié à la revue plus qu'à l'article ; un article publié dans une revue à fort impact peut avoir un nombre de citations très bas, voire nul, et inversement. - Le facteur d'impact ne prend pas en compte l'impact d'une information scientifique nouvelle diffusée par le biais des cours et d'autres formations. Il « représente » mieux les chercheurs qui publient le plus, que ceux qui enseignent ou par exemple améliorent ou enrichissent le contenu de wikipédia[8].
- Il existe un biais linguistique : les revues non-anglophones étant moins bien répertoriées, elles ne bénéficient pas ou peu d'un facteur d'impact, même quand elles sont internationalement reconnues (en sciences sociales particulièrement). Elles souffrent également de bugs dus aux diacritiques propres aux langues autres que l'anglais[5].
- Le facteur d'impact pourrait tendre à uniformiser la recherche. Il encourage aussi la « multiplication des publications avec tronçonnement des résultats » (afin de gonfler artificiellement les chiffres)[5].
- Le FI ne pourrait pas être reproduit à partir d'un audit indépendant, les données brutes n'étant pas accessibles[9].
- À court terme, surtout dans le cas de journaux à FI faible, de nombreuses citations sont faites dans les articles sur les travaux précédents du chercheur (auto-citation)[10] ; Garfield maintient cependant que ce phénomène influence peu le FI d'une revue[11]. Par ailleurs, une étude d'auto-citations d'auteur dans la littérature sur le diabète montre que la fréquence des auto-citations n'est pas associée à la qualité des publications[12]. par ailleurs, une auto-citation de la revue est fréquente dans les revues qui traitent de sujets spécialisés et qui ont de forts regroupements entre leur lectorat et leurs auteurs. Ce n'est pas nécessairement un signe de mauvaise qualité ou de manipulation[13].
- Les listes de classement des revues basés sur le FI ou sur les résultats d'une enquête d'expert ont une corrélation modérée[14].
- La politique éditoriale d'une revue peut affecter le FI[15],[16] :
- Une revue peut publier un pourcentage important d'articles sur l'état de l'art (revues de la littérature scientifique, review article en anglais) qui sont généralement plus souvent citées que les articles de recherche proprement dit [17]. Par conséquent, ces articles de synthèse sur l'état de l'art peuvent augmenter le FI d'une revue et les revues qui se consacrent à ces états de l'art ont souvent le FI le plus élevé dans leur domaine respectif. A contrario, des revues peuvent décider de ne pas publier des articles sur des études de cas qui ont moins de chance d'être cités et qui diminueraient le nombre moyen de citation par article.
- Les journaux changent la fraction d'objets citables (chiffre au dénominateur). Il s'agit d'un sujet de négociation avec Thomson Scientifique. Par conséquent, des variations du FI pouvant atteindre 300 % ont été décelées[18]. Par exemple, les éditoriaux dans une revue ne sont pas considérés comme des articles citables et ainsi ne rentrent pas dans le dénominateur dans le nombre d'articles citables. Cependant, les citations de ces articles vont toujours rentrer dans le numérateur, augmentant ainsi le FI. Par ailleurs, si de tels articles citent d'autres articles (souvent d'une même revue) ces citations seront comptées et augmenteront le FI. Cet effet est difficile à évaluer. La distinction entre un éditorial et un article court est difficile à établir, par exemple les lettres aux éditeurs/rédacteurs.
- Les journaux peuvent publier une plus grande proportion de leurs articles ou surtout les articles qu'ils s'attendent à voir cités dans le début de l'année. Cela donne plus de temps à la revue pour récolter les citations.
- L'« impact factor » est manipulable :
- En 2007, la revue spécialisée Folia Phoniatrica et Logopaedica, avec un FI de 0.66, publia un éditorial qui citait tous ses articles de 2005 à 2006, en protestation contre l'utilisation absurde du FI[19]. Le grand nombre de citations entraîna une augmentation du FI à 1,44. Par conséquent, la revue n'a pas été incluse dans le Journal Citation Reports de 2008 et 2009[20].
- En 2008, un article unique (en anglais), Une brève histoire du SHELX, incluait la phrase « Cet article peut servir comme une citation de littérature générale quand un des logiciels libres SHELX est utilisé pour déterminer la structure d'un cristal. » Cet article a reçu plus de 6 600 citations. Par conséquent, le FI de Acta Crystallograhica Section A augmenta de 2,051 en 2008 à 49,926 en 2009, soit plus que Nature (31,434) et Science (28,103)[21]. Le second article le plus cité dans Acta Crystallographica Section A en 2008 avait seulement 28 citations[22].
- Incitation à l'auto-citation
C'est la pratique d'éditeurs qui forcent un auteur à ajouter des auto-citations de sa revue pour accepter la publication de son article, ce qui permet d'augmenter artificiellement le FI. Une étude de 2012 indique que ceci a été vécu par un chercheur sur cinq en dans les domaines de l'économie, sociologie, psychologie et du commerce. Cette pratique est plus fréquente dans le monde du commerce et dans les journaux avec un faible FI[23]. Cependant, des cas d'incitation à l'auto-citation ont rarement été rapportés dans les autres disciplines scientifiques[24].
Critiques, recherches d'alternatives
Mi-2013, plus de 150 scientifiques et 75 sociétés savantes avaient signé la Déclaration de San-Francisco sur l'évaluation de la recherche (DORA) initiée par l’American Society for Cell Biology (ASCB) en collaboration avec un groupe d’éditeurs de journaux scientifiques.
Autres mesures d'impact
- L'algorithme Pagerank
En 1976, un FI récursif, qui donne aux citations provenant de revues avec un plus grand impact une plus grande importance que les citations provenant de revues de faible impact, a été proposé[25]. Un tel système ressemble à l’algorithme Pagerank du moteur de recherche Google. De nombreuses approches différentes ont été proposées[26],[27],[28]. - L'Eigenfactor (en) ou facteur Eigen est un autre type de mesure de type Pagerank de l'influence d'une revue. Ces classements qui s'appuyent sur le corpus du Journal Citation Reports sont librement accessibles en ligne.
- Le SCImago Journal Rank (en), corpus de Scopus.
Notes et références
- (en) Cet article est partiellement ou en totalité issu de l’article de Wikipédia en anglais intitulé « Impact factor » (voir la liste des auteurs).
- ↑ (en) « Introducing the Impact Factor » (consulté le 26 août 2009)
- ↑ (en) « JCR with Eigenfactor » (consulté le 26 août 2009)
- ↑ (en) « Web of Knowledge > Real Facts > Quality and Quantity » (consulté le 5 mai 2010)
- ↑ (en) « European Association of Science Editors statement on impact factors » (Archive • Wikiwix • Archive.is • Google • Que faire ?), consulté le 25 mars 2009
- 1 2 3 Laurence Coutrot, « Sur l’usage récent des indicateurs bibliométriques comme outil d’évaluation de la recherche scientifique », Bulletin de méthodologie sociologique, octobre 2008, no 100, p. 45-50.
- ↑ « Not-so-deep impact », Nature, vol. 435, no 7045, , p. 1003–1004 (PMID 15973362, DOI 10.1038/4351003b)
- ↑ « Que disent les indicateurs ? », entretien avec Jean-Pierre Merlet, animateur du groupe de réflexion sur les indicateurs de la commission d’évaluation de l’INRIA, Lettre d'information de l'INRIA, no 59, mai 2007.
- ↑ WEUSC (2013), Wikipédia, objet scientifique non identifié, CNRS-ISCC, 5 juin 2013, Paris
- ↑ (en) Rossner M, Van Epps H, Hill E, « Show me the data », Journal of Cell Biology, vol. 179, no 6, , p. 1091–2 (PMID 18086910, PMCID 2140038, DOI 10.1083/jcb.200711140, lire en ligne)
- ↑ (en) Marashi SA, « On the identity of "citers": are papers promptly recognized by other investigators? », Medical hypotheses, vol. 65, no 4, , p. 822 (PMID 15990244, DOI 10.1016/j.mehy.2005.05.003)
- ↑ (en) Eugene Garfield, « The Impact Factor and Using It Correctly », Der Unfallchirurg, vol. 101, no 6, , p. 413–414 (PMID 9677838, lire en ligne)
- ↑ (en) Gami AS, Montori VM, Wilczynski NL, Haynes RB, « Author self-citation in the diabetes literature », CMAJ, vol. 170, no 13, , p. 1925–7. (PMID 15210641, PMCID PMC421720, DOI 10.1503/cmaj.1031879)
- ↑ (en) Natasa Kovacic et Aleksandra Misak, « Author self-citation in medical literature », CMAJ, vol. 170, no 13, , p. 1929–30. (DOI 10.1503/cmaj.1040513)
- ↑ (en) Serenko A, Dohan M, « Comparing the expert survey and citation impact journal ranking methods: Example from the field of Artificial Intelligence », Journal of Informetrics, vol. 5, no 4, , p. 629–648. (DOI 10.1016/j.joi.2011.06.002, lire en ligne [PDF])
- ↑ (en) Richard Monastersky, « The Number That's Devouring Science », The Chronicle, The Chronicle of Higher Education, (lire en ligne)
- ↑ (en) Douglas N. Arnold et Kristine K. Fowler, « Nefarious Numbers », Notices of the American Mathematical Society, vol. 58, no 3, , p. 434–437. (arXiv 1010.0278)
- ↑ (en) Eugene Garfield, « The Thomson Reuters Impact Factor », Thomson Reuters, (lire en ligne)
- ↑ (en) PLoS Medicine Editors, « The Impact Factor Game », PLoS Medicine, vol. 3, no 6, , e291 (PMID 16749869, PMCID 1475651, DOI 10.1371/journal.pmed.0030291)
- ↑ (en) Schuttea HK, Svec JG, « Reaction of Folia Phoniatrica et Logopaedica on the Current Trend of Impact Factor Measures », Folia Phoniatrica et Logopaedica, vol. 59, no 6, , p. 281-285 (PMID 17965570, DOI 10.1159/000108334)
- ↑ (en) « Journal Citation Reports - Notices » (consulté le 24 septembre 2009)
- ↑ (en) Bob Grant, « New impact factors yield surprises », The Scientist, (lire en ligne)
- ↑ (en)What does it mean to be #2 in Impact? - Thomson Reuters Community
- ↑ (en) A. W. Wilhite et E. A. Fong, « Coercive Citation in Academic Publishing », Science, vol. 335, no 6068, , p. 542–3. (PMID 22301307, DOI 10.1126/science.1212540)
- ↑ (en) R. Smith, « Journal accused of manipulating impact factor », BMJ, vol. 314, no 7079, , p. 461 (PMID 9056791, PMCID PMC2125988, DOI 10.1136/bmj.314.7079.461d)
- ↑ (en) Gabriel Pinski and Francis Narin, « Citation influence for journal aggregates of scientific publications: Theory with application to literature of physics », Information Processing & Management, vol. 12, no 5, , p. 297–312 (DOI 10.1016/0306-4573(76)90048-0)
- ↑ (en) S. J. Liebowitz and J. P. Palmer., « Assessing the relative impacts of economics journals », Journal of Economic Literature, American Economic Association, vol. 22, no 1, , p. 77–88 (JSTOR 2725228, lire en ligne [PDF])
- ↑ (en) I. Palacios-Huerta and O. Volij, « The measurement of intellectual influence », Econometrica, vol. 72, no 3, , p. 963–977 (DOI 10.1111/j.1468-0262.2004.00519.x)
- ↑ (en) Y. K. Kodrzycki and P. D. Yu, « New approaches to ranking economics journals », B. E. Journal of Economics Analysis and Policy, vol. 5, no 1, (DOI 10.2202/1538-0645.1520)
Voir aussi
Articles connexes
- Bibliométrie
- Scientométrie
- Institute for Scientific Information
- PageRank
- Indice h
- Publish or Perish
Liens externes
- (en) Le facteur d'impact sur le site du Thomson ISI.
- (en) Impact Factor
- (en) Le nombre qui dévore la science, un article en anglais publié dans The Chronicle of Higher Education sur l'utilisation du facteur d'impact dans le recrutement académique.
- (en) Citation data: the wrong impact?
- (en) Impact factor: a valid measure of journal quality?
- Portail des sciences
- Portail de la presse écrite