Faculdade de Medicina da Universidade do Porto Introdução à Medicina Introdução à Medicina Regente da disciplina: Prof. Dr. Altamiro da Costa Pereira Orientador: Dr. Ricardo Correia AVALIAÇÃO DA UTILIZAÇÃO DOS SISTEMAS ELECTRÓNICOS DE RECOLHA DE INFORMAÇÃO POR PARTE DOS MÉDICOS 2004/2005 Afonso, M.; Fernandes, M.; Ferreira, M.; Ferreira, M. F.; Morais, M.; Neto, M.; Pintalhão, M.; Sousa, M.; Torres, M.

Passos do nosso trabalho: Encontro da «melhor» query Pesquisa na Pubmed Selecção dos artigos Procura do full-text dos artigos seleccionados

Passos do nosso trabalho: Leitura e análise dos artigos pelo menos por 2 revisores (23 artigos analisados) Discussão dos resultados Redacção do artigo Elaboração da página na Internet

Dificuldades/Limitações Artigo base vago quanto aos métodos utilizados Query Selecção dos artigos  Reprodutibilidade do método Impossibilidade de obter o full-text de todos os artigos seleccinados Destaque da informação mais relevante Síntese em texto da pesquisa

Reprodutibilidade do nosso método Estatísca Kappa Estatísca Kappa Revisor 1Revisor 2Revisor 3 Revisor 1 - Pc=77% Kw=0,35 Pc=76% Kw=0,39 Revisor 2 - Pc=80% Kw=0,33 Revisor 3 - Tabela 1 - Resultados do estudo de concordância inter-revisor ( Pc – Percentagem de concordância; Kw – Teste Kappa ponderado)

CRITÉRIOS DE ANÁLISE Frequência de utilização dos sistemas electrónicos de informação Propósito da sua utilização Satisfação do utilizador Efectividade dos sistemas na pesquisa Razões do insucesso na pesquisa Aplicação/Impacto da evidência na prática clínica.

Análise dos artigos Tabela de análise Tabela de análise Tabela SPSS Tabela SPSS

1) Frequência de utilização dos sistemas electrónicos de informação 2) Propósito utilização; 3) Satisfação do utilizador; 4) Efectividade dos sistemas na pesquisa - precisão e recall; - factores inerentes ao utilizador; - comparação entre pesquisa manual e electrónica; - comparação entre diferentes bases de dados. 5) Razões do insucesso na pesquisa; 6) Aplicação/Impacto da evidência na prática clínica.

Factores Inerentes ao utilizador (6 artigos) Treino e formação (+) Pesquisas em cooperação (+) Outros factores: Demográficos (ex. Tipo de estudante) (+) Factores cognitivos (-) Factores de personalidade (-) Experiência com computadores (-) Riqueza em vocabulário do utilizador (+) 4) Efectividade Dos Sistemas Na Pesquisa

Pesquisa Manual / Pesquisa Electrónica 3 artigos: 25, 8, 29 3 artigos: 25, 8, 29

4) Efectividade Dos Sistemas Na Pesquisa

Diferenças entre o número de ensaios clínicos randomizados identificados através da pesquisa manual ou através da MEDLINE; Diferenças entre a sensibilidade obtida por cada um dos métodos; Melhores resultados quando utilizada a pesquisa manual; A pesquisa manual não deve ser o único método de pesquisa; 4) Efectividade Dos Sistemas Na Pesquisa

Estudo (base(s) de dados) Resultados das pesquisas (recall) Tema(s) da pesquisa N.º total de documentos conhecidos Gehanno et al (10)  Medline  Niosh-tic  Embase e Medline ou Toxline  Medline e Niosh-tic  Medline, Embase e Biosis  Medline, Toxline e Nioshtic  Medline, Embase, Toxline e Biosis  Medline, Toxline, Biosis e Nioshtic 63% (A) 11% (B) 86% (A) 42% (B) 96% (A) 72% (B) 99% (B) 83% (A) Mesotelioma e abestos (A) Alergia ao látex (B) N = 315 N = 462 Derry et al (19)  Medline  Embase  Medline e Embase  Em nenhuma delas 49% 40% 52% 48% Efeitos adversos de medicamentos N = 107 Suarez-Almazor et al (26)  Medline  Embase  Medline e Embase 77% 90% 99% Dores lombares, osteoporose e artrite reumatóide N = 243 4) Efectividade Dos Sistemas Na Pesquisa Tabela 2 - comparação entre bases de dados

Conjugação dos dois métodos para uma pesquisa mais completa e mais válida; Não deixar de parte a pesquisa manual, pois apesar de trabalhosa e dispendiosa existem ainda muitos artigos que não estão indexados na MEDLINE ou noutro tipo de bases de dados. 4) Efectividade Dos Sistemas Na Pesquisa

Comparação entre diferentes bases de dados 4) Efectividade Dos Sistemas Na Pesquisa Artigos citados: (26) (3) (19) (27) Diferenças entre as bases de dados: - número de revistas e referências citadas - sistema de indexação A utilidade da pesquisa depende da eficiência da base de dados escolhida A utilidade da pesquisa depende da eficiência da base de dados escolhida

Strain et al (27) compara sistemas on-line e em CD-rom: Sistemas on-line : - MEDLINE → pesquisas são morosas; 1/3 dos artigos publicados não têm registo - MEDLINE → pesquisas são morosas; 1/3 dos artigos publicados não têm registo - Micromedex → mais fácil de usar e com mais informação do que a MEDLINE; informação delineada, sumariada e referenciada; baixa precisão Sistemas em CD-rom : - Reactions → regista 7500 revistas, mas é lento - AHF’s → não apresenta referências - PDR → pesquisa incompleta 4) Efectividade Dos Sistemas Na Pesquisa

Resultados da pesquisa na mesma base de dados discrepantes Eficiência da base de dados relacionada com o tema da pesquisa Devem escolher-se bases de dados adaptadas ao assunto em estudo 4) Efectividade Dos Sistemas Na Pesquisa

1) Frequência de utilização dos sistemas electrónicos de informação 2) Propósito utilização; 3) Satisfação do utilizador; 4) Efectividade dos sistemas na pesquisa - precisão e recall; - factores inerentes ao utilizador; - comparação entre pesquisa manual e electrónica; - comparação entre diferentes bases de dados. 5) Razões do insucesso na pesquisa; 6) Aplicação/Impacto da evidência na prática clínica.

5) Razões Do Insucesso Na Pesquisa Tabela 3 - Causas do insucesso na pesquisa Artigos Causas Má elaboração da questão clínica Ausência de abstracts/ abstracts estruturados Base de dados inapropriada Problemas de indexação/ Mesh Falta de treino do utilizador Desequilíbrio entre recall e precisão Inadequação de limites Allison et al (9) XXXX Hersh et al (12) XXX Shen et al (17) XX Derry et al (19) X Shaw et al (20) XXXX Strain et al (27) X Robinson et al (28) XX Murphy et al (29) XX

5) Razões Do Insucesso Na Pesquisa Má elaboração de uma questão clínica; Treino inadequado do utilizador; Base de dados inapropriada \ Informação limitada Problemas nas práticas de indexação \ uso de termos MeSH;

Problema na capacidade de equilibrar recall e precisão; Problemas na adequação dos limites à pesquisa; Ausência de abstract/abstracts estruturados. 5) Razões Do Insucesso Na Pesquisa

1) Frequência de utilização dos sistemas electrónicos de informação 2) Propósito utilização; 3) Satisfação do utilizador; 4) Efectividade dos sistemas na pesquisa - precisão e recall; - factores inerentes ao utilizador; - comparação entre pesquisa manual e electrónica; - comparação entre diferentes bases de dados. 5) Razões do insucesso na pesquisa; 6) Aplicação/Impacto da evidência na prática clínica.

Não foram encontrados estudos; Mais investigação é necessária a este nível.

Em suma… Da leitura dos artigos verifica-se: - baixa frequência de utilização dos profissionais de saúde destes sistemas de informação; - existência de várias falhas nas suas pesquisas, decorrentes de estratégias inadequadas  diminuição da efectividade; - crescente adesão; - satisfação dos utilizadores.

Em suma… Para o futuro: - maior formação dos médicos; - divulgação das vantagens do uso apropriado destes sistemas. Extracção de um número acrescido de artigos; Ampliação a magnitude dos resultados obtidos.

ELABORAÇÃO DA PÁGINA NA INTERNET

Agradecimentos Agradecemos a todos aqueles que através da sua orientação, indicações, sugestões e auxílio na realização de diversas tarefas: Dr. Ricardo Correia Professor Dr. Altamiro da Costa Pereira Dra Cristina Santos

FIM