Reliability and validity of ICPC-2-R encoding by medical students

Leonardo Ferreira Fontenelle; Álvaro Damiani Zamprogno; André Filipe Lucchi Rodrigues; Lorena Camillato Sirtoli; Natália Josiele Cerqueira Checon; Marcelo Santana Vetis; Diego José Brandão

doi:10.5712/rbmfc13(40)1655

Autores/as

Leonardo Ferreira Fontenelle Universidade Vila Velha http://orcid.org/0000-0003-4064-433X
Álvaro Damiani Zamprogno Universidade Vila Velha http://orcid.org/0000-0002-8456-1707
André Filipe Lucchi Rodrigues Universidade Vila Velha http://orcid.org/0000-0002-7857-4202
Lorena Camillato Sirtoli Universidade Vila Velha http://orcid.org/0000-0002-5952-5237
Natália Josiele Cerqueira Checon Universidade Vila Velha http://orcid.org/0000-0001-7069-4165
Marcelo Santana Vetis Universidade Vila Velha http://orcid.org/0000-0002-4999-6983
Diego José Brandão Universidade Vila Velha http://orcid.org/0000-0002-5000-3256

DOI:

https://doi.org/10.5712/rbmfc13(40)1655

Palabras clave:

Atención Primaria de Salud/clasificación, Variaciones Dependientes del Observador, Reproducibilidad de Resultados, Educación de Pregrado en Medicina, Prácticas Clínicas

Resumen

Objetivo: Estimar la confiabilidad y la validez de la codificación de motivos de consulta y problemas de salud por estudiantes utilizando la Clasificación Internacional de Atención Primaria, 2ª edición (CIAP-2). Métodos: Para cada encuentro supervisado durante todo un semestre, tres profesores médicos de familia y comunidad registraron los motivos de consulta y los problemas de salud en un formulario usando texto libre. Dos de cuatro estudiantes de medicina y un profesor codificaron cada motivo de consulta o problema de salud utilizando la CIAP-2. En el comienzo del estudio, se llevaron a cabo dos sesiones de estandarización de tres horas, hasta que los profesores estuvieron seguros de que los estudiantes estaban listos para la codificación. Después de que todos los motivos de consulta y problemas de salud fueran codificados independientemente, los siete codificadores resolvieron los códigos definitivos por consenso. Se definió confiabilidad como concordancia entre los estudiantes y validez como la concordancia de éstos con los códigos definitivos; se estimó esta concordancia con el AC₁ de Gwet. Resultados: Después de la exclusión de los encuentros codificados antes de la última sesión de estandarización, la muestra consistió en 149 encuentros consecutivos, que comprendían 262 motivos de consulta y 226 problemas de salud. La codificación tuvo una confiabilidad moderada a sustancial (AC₁ 0,805; IC 95% 0,767–0,843) y validez sustancial (AC₁ 0,864; IC 95% 0,833–0,891). Conclusión: Los estudiantes de medicina pueden codificar los motivos de consulta y los problemas de salud con la CIAP-2 si fueran adecuadamente capacitados.

Descargas

Los datos de descargas todavía no están disponibles.

Métricas

Cargando métricas ...

Biografía del autor/a

Leonardo Ferreira Fontenelle, Universidade Vila Velha

Family and community physician, with a master's degree in community health and a PhD in epidemiology. Professor in the medical school and preceptor in the medical residency program in family and community medicine of Universidade Vila Velha (UVV) and legislative consultant in public health in Câmara Municipal de Vitória (CMV).

Marcelo Santana Vetis, Universidade Vila Velha

Family and community physician, undertaking a master's program in public policies and local development. Preceptor in the medical residency programs in family and community medicine of Universidade Vila Velha (UVV) and Escola Superior de Ciências da Santa Casa de Misericórdia de Vitória (EMESCAM), and teacher in the UVV medical school.

Diego José Brandão, Universidade Vila Velha

Family and community physician and PhD candidate in medicine. Coordinator of the medical residency program in family and community medicine and teacher in the medical school of Universidade Vila Velha (UVV).

Citas

Soler JK, Okkes I, Wood M, Lamberts H. The coming of age of ICPC: celebrating the 21st birthday of the International Classification of Primary Care. Fam Pract. 2008;25(4):312-7. https://doi.org/10.1093/fampra/cmn028 DOI: https://doi.org/10.1093/fampra/cmn028

World Organization of National Colleges, Academies, and Academic Associations of General Practitioners/Family Physicians. Classificação Internacional de Atenção Primária (CIAP 2). 2ª ed. Florianópolis: Sociedade Brasileira de Medicina de Família e Comunidade; 2009.

Lamberts H, Wood M, Hofmans-Okkes IM. International primary care classifications: the effect of fifteen years of evolution. Fam Pract. 1992;9(3):330-9. https://doi.org/10.1093/fampra/9.3.330 DOI: https://doi.org/10.1093/fampra/9.3.330

Britt H, Angelis M, Harris E. The reliability and validity of doctor-recorded morbidity data in active data collection systems. Scand J Prim Health Care. 1998;16(1):50-5. https://doi.org/10.1080/028134398750003412 DOI: https://doi.org/10.1080/028134398750003412

Letrilliart L, Guiguet M, Flahault A. Reliability of report coding of hospital referrals in primary care versus practice-based coding. Eur J Epidemiol. 2000;16(7):653-9. https://doi.org/10.1023/A:1007609718223 DOI: https://doi.org/10.1023/A:1007609718223

Sampaio MM, Coeli CM, Miranda NN, Faerstein E, Werneck GL, Chor D, et al. Interobserver reliability of the International Classification of Primary Care. Rev Saúde Pública. 2008;42(3):536-41. https://doi.org/10.1590/S0034-89102008005000013 DOI: https://doi.org/10.1590/S0034-89102008005000013

Sampaio MMA, Coeli CM, Alves MG, Soares MF, de Camargo KR Jr, Moreno AB. Confiabilidade interobservador da classificação internacional de atenção primária em uma unidade de atenção básica à saúde. Rev Bras Epidemiol. 2012;15(2):355-62. https://doi.org/10.1590/S1415-790X2012000200013 DOI: https://doi.org/10.1590/S1415-790X2012000200013

Frese T, Herrmann K, Bungert-Kahl P, Sandholzer H. Inter-rater reliability of the ICPC-2 in a German general practice setting. Swiss Med Wkly. 2012;142:w13621. https://doi.org/10.4414/smw.2012.13621 DOI: https://doi.org/10.4414/smw.2012.13621

Basílio N, Ramos C, Figueira S, Pinto D. Worldwide Usage of International Classification of Primary Care. Rev Bras Med Fam Comunidade. 2016;11(38):1-9. https://doi.org/10.5712/rbmfc11(38)1225 DOI: https://doi.org/10.5712/rbmfc11(38)1225

Demarzo MMP, Almeida RCC de, Marins JJN, Trindade TG, Anderson MIP, Stein AT, et al. Diretrizes para o ensino na Atenção Primária à Saúde na graduação em Medicina. Rev Bras Med Fam Comunidade. 2011;6(19):145-50. https://doi.org/10.5712/rbmfc6(19)116 DOI: https://doi.org/10.5712/rbmfc6(19)116

Dalla MDB, de Moura GAG, Bergamaschi MS. Metodologias ativas: um relato de experiência de estudantes de graduação em medicina da Universidade Vila Velha na disciplina de Interação Comunitária. Rev Bras Med Fam Comunidade. 2015;10(34):1-6. https://doi.org/10.5712/rbmfc10(34)647 DOI: https://doi.org/10.5712/rbmfc10(34)647

Gusso GDF, Benseñor IM. A methodological proposal to research patients’ demands and pre-test probabilities using paper forms in primary care settings. Rev Bras Med Fam Comunidade. 2013;8(27):97-105. https://doi.org/10.5712/rbmfc8(27)692 DOI: https://doi.org/10.5712/rbmfc8(27)692

Gwet KL. Computing inter-rater reliability and its variance in the presence of high agreement. Br J Math Stat Psychol. 2008;61(1):29-48. https://doi.org/10.1348/000711006X126600 DOI: https://doi.org/10.1348/000711006X126600

Feinstein AR, Cicchetti DV. High agreement but low Kappa: I. The problems of two paradoxes. J Clin Epidemiol. 1990;43(6):543-9. https://doi.org/10.1016/0895-4356(90)90158-L DOI: https://doi.org/10.1016/0895-4356(90)90158-L

Efron B. Better Bootstrap Confidence Intervals. J Am Stat Assoc. 1987;82(397):171-85. https://doi.org/10.1080/01621459.1987.10478410 DOI: https://doi.org/10.1080/01621459.1987.10478410

Shrout PE. Measurement reliability and agreement in psychiatry. Stat Methods Med Res. 1998;7(3):301-17. https://doi.org/10.1177/096228029800700306 DOI: https://doi.org/10.1177/096228029800700306