Exercícios bibliométricos com aplicações da Workshop II Conferência Ibero-Americana de Publicações Eletrônicas no Contexto da Comunicação Científica -

Apresentação em tema: "Exercícios bibliométricos com aplicações da Workshop II Conferência Ibero-Americana de Publicações Eletrônicas no Contexto da Comunicação Científica -"— Transcrição da apresentação:

1 Exercícios bibliométricos com aplicações da Workshop II Conferência Ibero-Americana de Publicações Eletrônicas no Contexto da Comunicação Científica - CIPECC 2008 Rio de Janeiro, 17 de novembro de 2008 Rogério Mugnaini Centro Latino-Americano e do Caribe de Informação em Ciências da Saúde (BIREME/OPS/OMS) rogerio.mugnaini@bireme.org

2 Sumário Bibliometria: história, definição e escopo Principais indicadores: –Fator de Impacto, –Índice de Obsolescência –Índice h Contextualização de indicadores –nacional versus internacional –diversidade das áreas Produção científica nacional –indexação de periódicos –análise de fontes de informação Indicadores bibliométricos da SciELO Exercícios bibliométricos com aplicações da SciELO –Fator de Impacto –Vida Média –Fator de Impacto Modificado (janela de tamanho variável) –Dispersão das citações, segundo a Lei de Bradford

3 Bibliometria: história 1917 - Primeira aplicação por Cole e Eales 1926 - Lei de Lotka 1927 - Gross & Gross: medida de impacto de revista 1934 - Lei de Bradford 1949 - Lei de Zipf 1955 - Garfield publica artigo sobre Índice de Citação Déc. 60 - Criação do termo Bibliometria por Pritchard Uso para análise da ciência por Price Science Citation Index Déc. 70 - Informática, bases de dados, novas técnicas Demanda de indicadores de C&T Déc. 80 - Recuperação de informação, mapeamento, modelagem Subsídio à Política Científica Narin e Moll, 1977; White e McCain, 1989; Barré, 1990; Araújo,2006; Archambault & Larivière, 2007

4 Bibliometria: história Aplicações atuais –Identificação de: áreas de excelência, associações temáticas, interdisciplinaridade, disciplinas emergentes, redes de colaboração temática, prioridades –Incorporação a conjuntos de indicadores nacionais publicados periodicamente –Bibliometria de escritório –Open Access, Open Archives, Google Acadêmico García-Zorita, 2000; Filippo e Fernández, 2002; Mugnaini, 2006

5 Bibliometria: definição aplicação de métodos matemáticos e estatísticos a livros, artigos e outros meios de comunicação (Pritchard, 1969 apud Rostaing, 1996)... conjuntos de referências bibliográficas (Rostaing, 1996) Rostaing sugere a mudança na definição do objeto de estudo alegando que naquela época a definição de Pritchard se restringia à administração de bibliotecas.

6 Bibliometria: escopo Indicadores de CT&I Indicadores de output Indicadores de produção científica Bibliometria Cientometria Informetria, Webometria Relação entre conceitos de análise quantitativa da ciência e indicadores de C&T macro micro

7 Consagração do Fator de Impacto Archambault & Larivière, 2007 Originalmente desenvolvido para desenvolvimento de coleções, não para avaliação Incomparabilidade, dadas as especificidades entre áreas Assimetria entre elementos contados no numerador e denominador Janela de citação de dois anos Estabelecimento da língua inglesa e centralização americana

8 Aspectos metodológicos Citações recebidas pelas revistas SciELO, na própria SciELO, segundo idade do artigo citado Impacto Obsolescência

9 Fator de impacto formula FI Ano (X) = Cits. + Ano (X a X-1) Cits. Ano (X a X-2) Arts. + Ano (X-1) Arts. Ano (X-2)

10 Média: 60,7 Mediana: 44 Média: 3,7 Mediana: 2 Fator de impacto a média não é uma medida adequada para distribuições assimétricas Média: 3,8 Mediana: 0,6

11 Fator de impacto Assimetria entre elementos contados no numerador e denominador FI Ano (X) = Cits. + Ano (X a X-1) Cits. Ano (X a X-2) Arts. + Ano (X-1) Arts. Ano (X-2) Inclui: artigos originais e de revisão Não inclui: editoriais, cartas, etc “pois, geralmente, não são citados” Considera citações a qualquer tipo de documento

12 Arts. Ano (X-n) Arts. +... Ano (X-3) Fator de impacto Janela de citação de dois anos FI Ano (X) = Cits. + Ano (X a X-1) Cits. + Ano (X a X-2) Cits. +... Ano (X a X-3) Cits. Ano (X a X-n) Arts. + Ano (X-1) Arts. + Ano (X-2) Impacto Obsolescênci a

13 Fator de impacto Janela de citação de dois anos Porcentagem garantida pela janela de citações de 2 anos e janela de tamanho variável (de acordo com a Vida Média)

14 Aspectos metodológicos obsolescência Fonte: Larivière et al., 2007

15 Aspectos metodológicos obsolescência Fonte: Larivière et al., 2007

16 Aspectos metodológicos índice h Pesquisador em início de carreira Pesquisador em fim de carreira

17 Aspectos metodológicos índice h (Mugnaini, R.; Packer, A.L.; Meneghini, R., 2008)

18 Contextualização de indicadores nacional versus internacional SciELO Brasil: Coleção com 100% de revistas Brasileiras (150) ? 6 mil Tamanho da audiência potencial MacRoberts; MacRoberts, 1996

19 Contextualização de indicadores nacional versus internacional

20 Estudo comparativo de revistas brasileiras de alto impacto –Total de aprox. 150 revistas SciELO –amostra de 12 revistas (metade ISI) –Ciências da Vida –Impacto na SciELO e ISI de dois grupos de revistas Mugnaini, 2006 Grupo 1: 6 periódicos indexados apenas na SciELO Grupo 2: 6 periódicos indexados na SciELO e ISI

21 Contextualização de indicadores nacional versus internacional Citações às revistas dos Grupos 1 e 2, no período de 2000 a 2004 Grupo 1: 6 periódicos indexados apenas na SciELO Grupo 2: 6 periódicos indexados na SciELO e ISI

22 Contextualização de indicadores nacional versus internacional Taxa de crescimento do número citações aos grupos da amostra, na bases SciELO e ISI – período de 2000 a 2004

23 Contextualização de indicadores nacional versus internacional Na base SciELO, as citações à amostra provêm principalmente de artigos nacionais (aproximadamente 75% dos artigos sem participação de estrangeiros), ao passo que no ISI essa porcentagem cai pela metade. Na base ISI, os brasileiros são os que mais citam as revistas brasileiras (30% das citações provenientes de revistas estrangeiras), seguidos dos americanos (20%, das mesma revistas).

24 Contextualização de indicadores nacional versus internacional Artigos em colaboração, e principalmente com a participação de estrangeiros, são os mais citados, quando as revistas encontram-se indexadas também no ISI (Grupo 2). Já os artigos de revistas não indexadas naquela base (Grupo 1) são citados principalmente quando publicados em autoria única ou colaboração nacional.

25 Contextualização de indicadores nacional versus internacional Metodologia para avaliação de revistas científicas brasileiras –Total de aprox. 150 revistas SciELO –amostra de 39 revistas –Ciências da Vida –Análise multivariada considerando alguns indicadores de impacto Mugnaini, 2006

26 Análise Fatorial do impacto (SciELO e ISI) das 39 revistas de Ciências da Vida – ano de 2004

27 Pode-se observar um novo agrupamento de revistas, associadas segundo especificidades comuns, diferindo dos grupos propostos inicialmente (Grupos 1 e 2, segundo indexação na base SciELO e no ISI) Contextualização de indicadores nacional versus internacional

28 Contextualização de indicadores diversidade das áreas Análise Fatorial entre área citante e tipo documento citado - SciELO 2004 Fonte: Mugnaini et al., 2007

29 Contextualização de indicadores diversidade das áreas Análise Fatorial entre área citante e ano do documento citado - SciELO 2004 Fonte: Mugnaini et al., 2007

30 Contextualização de indicadores diversidade das áreas Fonte: Journal Citation Reports 2007

31 Contextualização de indicadores diversidade das áreas Fonte: SciELO 2007

32 Contextualização de indicadores diversidade das áreas (Mugnaini, R.; Packer, A.L.; Meneghini, R., 2008)

33 Contextualização de indicadores diversidade das áreas Revista de Saúde Pública

34 Contextualização de indicadores diversidade das áreas Revista da Associação Médica Brasileira

35 Contextualização de indicadores diversidade das áreas Brazilian Journal of Physics

36 Contextualização de indicadores diversidade das áreas Ciência da Informação

37 Bases de dados para geração de indicadores bibliométricos Contexto atual –Oferta de bases de dados –Facilidade de análise bibliométrica –Novos indicadores Resultados –Complexidade na análise –Capacitação usuários

38 Indicadores Bibliométricos

39 www.scielo.org

40

41

42

43

44

45

46

47

48 Referências Bibliográficas ARAÚJO, C. A. Bibliometria: evolução histórica e questões atuais. Em Questão, Porto Alegre, v. 12, n. 1, p. 11-32, 2006. ARCHAMBAULT, E.; LARIVIÈRE, V. Origins of measures of journal impact: historical contingencies and their consequences on current use. Proceedings of the 11th International Conference of the International Society for Scientometrics and Informetrics. Madrid: CINDOC- CSIC; 2007. p. 45-50. BARRÉ, R. Prefácio. In: COURTIAL, J. P. Introduction à la scientométrie. Paris: Anthropos, 1990. FILIPPO D. ; FERNÁNDEZ M T. Bibliometría : importancia de los indicadores bibliométricos. In: ALBORNOZ, M. (Eds.) El estado de la ciencia: principales indicadores de ciencia y tecnología iberoamericanos/ interamericanos. Buenos Aires, Argentina: Artes Gráfica Integradas, 2002. GARCIA-ZORITA, J. C. La actividad científica de los economistas españoles, en función del ámbito nacional o internacional de sus publicaciones: estudio comparativo basado en un análisis bibliométrico durante el período 1986-1995. Espanha. 2000. 405 f. Tese (Doutorado em Documentação) - Universidad Carlos III de Madrid, Madrid, 2000. GARFIELD E. Citation indexes for science. Science 1955; 122: 108-111. LARIVIÈRE, V;ARCHAMBAULT, E; GINGRAS, Y. Long-term patterns in the aging of the scientific literature, 1900-2004. Proceedings of the 11th International Conference of the International Society for Scientometrics and Informetrics. Madrid: CINDOC-CSIC; 2007. p 449-456. MACROBERTS, M. H.; MACROBERTS, B. R. Problems of citation alysis. Scientometrics, v. 36, n. 3, p. 435 - 444, 1996. MUGNAINI, R. Caminhos para adequação da avaliação da produção científica brasileira: impacto nacional versus internacional. São Paulo, 2006. 253 p. Tese (Doutorado em Ciência da Informação) - Escola de Comunicações e Artes. Universidade de São Paulo. MUGNAINI R, MENEGHINI R, PACKER AL. Citation profiles in Brazilian journals of the SciELO database in different scientific areas. Proceedings of the 11th International Conference of the International Society for Scientometrics and Informetrics. Madrid: CINDOC- CSIC; 2007. p 904-905. MUGNAINI, R., PACKER, A.L. e MENEGHINI, R. Comparison of scientists of the Brazilian Academy of Sciences and of the National Academy of Sciences of the USA on the basis of the h-index. Braz J Med Biol Res [online]. 2008, vol. 41, no. 4 [citado 2008-08-18], pp. 258-262. Disponível em:. NARIN, F.; MOLL, J. K. Bibliometrics. Annual Review of Information Science and Technology, vol. 12, p. 35-58, 1977. ROSTAING, H. La bibliométrie et ses techniques. Marseille : Sciences de la Société, 1996. WHITE, H. D.; McCAIN, K. W. Bibliometrics. Annual Review of Information Science and Technology, vol. 24, p. 119-186, 1989.

49 –Fator de Impacto –Vida Média –Fator de Impacto Modificado (janela de tamanho variável) –Dispersão das citações, segundo a Lei de Bradford Exercícios bibliométricos com aplicações da