Validade e Reprodutibilidade Erros Sistemáticos e Aleatórios

1. Introdução à Medicina Metodologia Científica Validade e Reprodutibilidade Erros Sistemáticos e Aleatórios

2. Introdução à Medicina Reprodutibilidade e validade de medidas • Reprodutibilidade de medidas • Capacidade de medir consistentemente um determinado fenómeno em medições repetidas • Validade de medidas • Capacidade de medir o fenómeno que realmente se pretende medir (em comparação com um padrão)

3. Introdução à Medicina Reprodutibilidade e validade de testes diagnósticos • Como medir validade de testes diagnósticos • Diagnóstico • Teste diagnóstico • Comparação com um gold standard

4. Introdução à Medicina Reprodutibilidade e validade de testes diagnósticos • Características dos testes diagnósticos • Sensibilidade: proporção de indivíduos doentes que têm um teste positivo ou a probabilidade de, estando doente, ter um teste positivo • Sensibilidade= a/ (a+c)

5. Introdução à Medicina Reprodutibilidade e validade de testes diagnósticos • Características dos testes diagnósticos • Especificidade: proporção de indivíduos não doentes que têm um teste negativo ou a probabilidade de, não estando doente, ter um teste negativo • Especificidade= d/ (b+d)

6. Introdução à Medicina Não Doentes Doentes 220 mg/dl Reprodutibilidade e validade de testes diagnósticos 180 mg/dl

7. Introdução à Medicina Reprodutibilidade e validade de testes diagnósticos

8. Introdução à Medicina Reprodutibilidade e validade de testes diagnósticos

9. Introdução à Medicina Reprodutibilidade e validade de testes diagnósticos • Características dos testes diagnósticos • Valor preditivo positivo: proporção de indivíduos com o teste positivo que são doentes ou a probabilidade de, tendo um teste positivo, estar doente (probabilidade pós-teste) • VPP= a/ (a+b)

10. Introdução à Medicina Reprodutibilidade e validade de testes diagnósticos • Características dos testes diagnósticos • Valor preditivo negativo: proporção de indivíduos com o teste negativo que não são doentes ou a probabilidade de, tendo um teste negativo, não estar doente • VPN= d/ (c+d)

11. Sensitivity = a/(a + c) = 731/809 = 90% Specificity = d/(b + d) = 1500/1770 = 85%

12. Positive predictive value = a/(a + b) = 731/1001 = 73% Negative predictive value = d/(c + d) = 1500/1578 = 95%

14. Introdução à Medicina Precisão e Validade de estudos A Investigação Científica como um acto de medição Objectivos gerais • Validade (minimizar erros sistemáticos) • Precisão/Reprodutibilidade (minimizar erros aleatórios)

15. Introdução à Medicina Precisão e Validade de estudos • Precisão • “Ausência” de erros aleatórios • Capacidade de medir consistentemente um determinado fenómeno em medições repetidas • Varia inversamente relativamente à variabilidade inerente à medição do fenómeno em causa • Erros aleatórios - erros relacionados com a variabilidade intrínseca do fenómeno que se pretende medir

16. Introdução à Medicina Precisão e Validade de estudos • Precisão • Variabilidade intra-individual (ex: TA) • Variabilidade inter-individual ou intra-populacional (ex: QI) • Variabilidade de medição (ex: Temperatura) • Variabilidade em estudos de investigação • Variabilidade amostral • Importância da análise estatística - estatística inferencial

17. Introdução à Medicina Precisão e Validade de estudos • Precisão • Variabilidade em estudos de investigação Ex: Qual é a prevalência de hipercolesterolemia na população do Porto? Estudo transversal numa amostra aleatória de indivíduos da população com determinações do colesterol sérico. O que acontece se repetissemos este estudo n vezes com amostras de 100 indivíduos? O que acontece se repetissemos este estudo n vezes com amostras de 10 000 indivíduos?

18. Introdução à Medicina Precisão e Validade de estudos • Precisão • Variabilidade em estudos de investigação Ex: O que acontece se repetíssemos este estudo n vezes com amostras de 100 indivíduos? O que acontece se repetíssemos este estudo n vezes com amostras de 10 000 indivíduos?

19. Introdução à Medicina Precisão e Validade de estudos • Precisão Qual é a prevalência de hipercolesterolemia na população do Porto? (>240mg/dl) Amostra 1 305; 276; 195; 215; 170 180 174 215 305 233 276 146 195 205 188 190 295 170 164 248 162 220 219 228 250 25% 40% Amostra 2 295; 146; 220; 162; 228 20% Amostra 3 219; 164; 190; 188; 233 0%

20. Introdução à Medicina P P Med Med 0 0 5 5 10 10 15 15 Risco (%) Risco (%) Precisão e Validade de estudos • Precisão • Variabilidade em estudos de investigação Ex: Ensaio clínico randomizado e duplamente cego compara risco de apresentar enfarte aos 5 anos em indivíduos tratados com placebo e indivíduos tratados com medicamento antidislipidémico. Estudo 1 (200 indivíduos) Estudo 2 (2000 indivíduos)

21. Introdução à Medicina Precisão e Validade de estudos • Precisão e Validade Muito válido Muito preciso Pouco válido Muito preciso Muito válido Pouco preciso Pouco válido Pouco preciso

22. Introdução à Medicina Precisão e Validade de estudos • Validade • “Ausência de erros sistemáticos” • Capacidade de medir o fenómeno que realmente se pretende medir • Erros sistemáticos (viéses) - erros relacionados com o facto de não se estar a medir o fenómeno que se pretende medir

23. Introdução à Medicina Precisão e Validade de estudos • Validade • Validade de medições (ex: balança descalibrada) • Validade em estudos de investigação • Validade Interna - mede até que ponto os resultados do estudo reflectem a verdade na população em estudo • Validade Externa - mede até que ponto os resultados do estudo (que reflectem a verdade na população em estudo) podem ser generalizados para outras populações

24. Introdução à Medicina Precisão e Validade de estudos • Validade • Viéses - são erros sistemáticos presentes no estudo que alteram os seus resultados • Viéses de selecção • Viéses de Informação • Confundimento

25. Introdução à Medicina Precisão e Validade de estudos • Validade • Viéses de selecção Erros sistemáticos relacionados com o método de selecção de participantes • Volunteers bias • Healthy worker effect • Perdas de seguimento • Berkson’s bias

26. Introdução à Medicina Precisão e Validade de estudos • Validade • Viéses de informação Erros sistemáticos relacionados com o método de colheita de dados relativos às variáveis que se pretende estudar (má-classificação ou misclassification) • Má classificação não diferencial (nondifferential misclassification) • Má classificação diferencial (differential misclassification)

27. Introdução à Medicina Conteúdo de gordura na dieta Alto Baixo Conteúdo de gordura na dieta Alto Baixo 60 40 40 60 48 52 32 68 60 40 40 60 60 40 32 68 EAM Sem EAM EAM Sem EAM OR = (60*60)/(40*40) = 2,3 OR = (48*68)/(32*52) = 2,0 Má classificação não diferencial (em 20% de casos e controlos) Conteúdo de gordura na dieta Alto Baixo Conteúdo de gordura na dieta Alto Baixo EAM Sem EAM EAM Sem EAM OR = (60*60)/(40*40) = 2,3 OR = (60*68)/(32*40) = 3,2 Má classificação diferencial (só em 20% dos controlos) Precisão e Validade de estudos • Validade • Má classificação diferencial e não diferencial

28. Introdução à Medicina Precisão e Validade de estudos • Validade • Confundimento Erro sistemático em que se verifica a distorção da associação em estudo devido ao entrecruzamento com o efeito de um outro factor Um factor de confusão deve concorrentemente: • Estar associado com a doença em estudo, inclusivé nos não expostos • Estar associado à exposição em estudo na população (e não só na amostra de casos) • Não deve ser afectado pela exposição ou pela doença em estudo

29. Introdução à Medicina EAM Sem EAM EAM Sem EAM EAM Sem EAM Precisão e Validade de estudos Não bebe vinho tinto • Validade • Confundimento Bebe vinho tinto OR = (36*36)/(24*24) = 2,25 Fumadores Não fumadores OR = (34*3)/(6*18) = 0,94 OR = (2*33)/(18*6) = 0,61 ORAjustado = 0,78

30. Introdução à Medicina Precisão e Validade de estudos • Validade • Confundimento • O que fazer? • Na fase de desenho do estudo • Especificação • Emparelhamento • Na fase de análise • Estratificação • Ajustamento estatístico