key: cord-0740249-cjx6zirf authors: Manrique-Hernández, Edgar F.; Moreno-Montoya, José; Hurtado-Ortiz, Alexandra; Prieto-Alvarado, Franklyn E.; Idrovo, Álvaro J. title: Desempeño del sistema de vigilancia colombiano durante la pandemia de COVID-19: evaluación rápida de los primeros 50 días date: 2020-11-12 journal: Biomedica DOI: 10.7705/biomedica.5582 sha: 61b210181056be0bce03184a1b9929200728d82b doc_id: 740249 cord_uid: cjx6zirf INTRODUCTION: The COVID pandemic is a challenge for public health surveillance and an opportunity to assess its strengths and weaknesses to improve the response. OBJECTIVE: To evaluate the performance of the Colombian public health surveillance system during the first 50 days of the COVID-19 pandemic in the country. MATERIALS AND METHODS: We analyzed the data published between March 6 and April 24, 2020, by the Instituto Nacional de Salud and the World Health Organization (WHO). We evaluated: i) the quality of the data according to the fulfillment of Benford's law, and ii) the timeliness of the information measured as the difference in dates between the data generated by the Instituto Nacional de Salud and WHO's situational reports. We assessed the fulfillment of Benford's law using the p values of the log-likelihood ratio, the chi square or Moreno's exact tests. RESULTS: Until April 24 there were 4,881 cases of COVID-19 in Colombia. During most of the first 50 days of the pandemic, Benford's law was fulfilled except the first days of the epidemic. The difference between Instituto Nacional de Salud and WHO reports largely depends on the different reporting times. CONCLUSION: In general, the Colombian public health surveillance system fulfilled Benford's law suggesting that there was quality in the data. Future studies comparing the performance of the departments and districts will improve the diagnosis of the Colombian surveillance system. La vigilancia en salud pública es una herramienta útil para la monitorización de enfermedades, particularmente las infecciosas, y se originó en el puerto marítimo de Venecia, Italia, en 1348, cuando tres guardianes de salud pública tenían como función detectar e impedir el desembarco de personas con peste negra. Este tipo de iniciativas dieron origen a estrategias preventivas como la cuarentena, la detección temprana de casos y el aislamiento (1) . Con el paso de los años, dicha vigilancia se ha ido refinando hasta convertirse en un elemento esencial para el manejo sanitario y la seguridad en cualquier país, especialmente en cuanto a las enfermedades infecciosas con potencial pandémico (2, 3) . Según los Centers for Disease Control and Prevention (CDC) de los Estados Unidos, la vigilancia en salud pública consiste en la "recolección continua y sistemática, el análisis, la interpretación y la difusión de datos sobre un evento relacionado con la salud para su uso en acciones de salud pública encaminadas a reducir la morbilidad y la mortalidad y mejorar salud" (4) . Si bien existen otras definiciones, todas con elementos comunes, la vigilancia en salud pública es la herramienta fundamental para el control de las epidemias, especialmente en lo tocante a los tratamientos o las vacunas para su prevención (5, 6) , como en el caso de la pandemia de COVID-19. En Colombia, la vigilancia en salud pública no ha sido ajena a los desarrollos técnico-científicos y ha seguido fundamentalmente la estrategia de formación de epidemiólogos de campo del CDC (7) . Un hito en la historia de la epidemiología de campo en Colombia ocurrió en 1993, cuando se inició la consolidación del grupo del Instituto Nacional de Salud encargado del manejo y el estudio de epidemias bajo parámetros modernos. A partir de entonces, han sido innumerables los casos de manejo de conglomerados y epidemias que pueden considerarse como éxitos de la epidemiología de campo colombiana (8) . Es el caso del manejo de pandemias como la de la influenza A(H 1 N 1 ) en el 2009, que permitió hacer una evaluación de la percepción de las competencias de los epidemiólogos y profesionales de salud pública para manejar este tipo de emergencias sanitarias (9) y contrastarla con los análisis objetivos del desempeño de la vigilancia en salud pública de otros países (10) . En ese momento pudieron detectarse, asimismo, algunas deficiencias que han tenido diversos cursos de solución con el paso del tiempo. En ese sentido, el presente trabajo tuvo como objetivo evaluar el desempeño del sistema de vigilancia en salud pública colombiano durante los primeros 50 días de la pandemia de COVID-19 en el país. Se analizaron los datos oficiales del sistema colombiano disponibles en la página web del Instituto Nacional de Salud (https://www.ins.gov.co/Noticias/ Paginas/Coronavirus.aspx) y los informes situacionales de la Organización Mundial de la Salud (OMS) (https://www.who.int/emergencies/diseases/novelcoronavirus-2019/situation-reports/). Si bien el sistema de vigilancia en salud pública está activo todo el tiempo, se incluyeron en este análisis los datos a partir del día en que fue diagnosticado el primer caso de COVID-19, el cual se reportó en Bogotá el 6 de marzo de 2020. Se entiende que la evaluación cobija todos los procesos involucrados en las labores de los epidemiólogos de campo en los equipos de respuesta inmediata, así como el procesamiento de muestras en el laboratorio y la generación de los reportes situacionales que se divulgan a nivel nacional e internacional. Se consideraron dos indicadores: i) la calidad de los datos según el cumplimiento de la ley de Benford, y ii) la oportunidad de la información. Este último indicador se consideró en atención a las necesidades internacionales o fronterizas de vigilancia de los fenómenos migratorios en el curso de una pandemia. Esta ley matemática, también denominada "ley de los primeros dígitos" , "ley de Newcomb-Benford" o "ley de los números anómalos" (11), señala que en un conjunto de números, aquellos que empiezan con el número 1 son más frecuentes que los que empiezan con otros dígitos, siguiendo un orden decreciente que se puede expresar como P(d)=log [1+(1=d)] d=1, 2, . . . , 9, donde una serie de números P(d) corresponde a la probabilidad de que un dígito sea el número inicial (12, 13) . Este método matemático ha sido particularmente útil y exitoso en la detección de datos fraudulentos (14, 15) . En el campo de la vigilancia en salud pública, se usó por primera vez durante la pandemia de influenza A(H 1 N 1 ) y, después, en las epidemias de dengue en Paraguay (16), de Zika en América (17) y de COVID-19 en China (18) . La oportunidad de la información se evaluó calculando la diferencia entre el tiempo en que se informaba el número de casos y fallecidos de Colombia en el portal del Instituto Nacional de Salud y el tiempo en que aparecía dicha información en el portal de la OMS. Dada la importancia de contar con información integral y oportuna a nivel mundial para definir las acciones multinacionales, este indicador puede entenderse como una evaluación de la magnitud del "rezago temporal" . Para evaluar el nivel de cumplimiento de la distribución descrita por la ley de Benford en los datos observados (casos diarios acumulados), se usaron las pruebas de razón del logaritmo de la verosimilitud y de ji al cuadrado mediante la macro digdis desarrollada por Ben Jann (ETH, Zurich). Para verificar el cumplimiento de la ley de Benford en los datos de las muestras pequeñas durante los primeros días de reporte, se usó la prueba exacta de Moreno (19) , ya que resultó tener un mejor desempeño que la prueba de Kuiper (20) . Dichos análisis se hicieron con el programa estadístico Stata 14™ (Stata Corporation, USA) o el programa R. En el cuadro 1 se encuentran los resultados del análisis del cumplimiento de la ley de los primeros dígitos en el número de casos acumulados día a día desde el 6 de marzo hasta el 24 de abril de 2020. Dado que las pruebas estadísticas para evaluar el cumplimiento de la ley de Benford son pruebas de bondad de ajuste, los valores de p más pequeños sugieren que esta no se cumplió. Debido a que se contaba con pocas observaciones en los primeros días, para estos datos se usó exclusivamente la prueba exacta de Moreno, cuyos resultados sugieren un buen desempeño el primer día; después disminuyó la calidad de los datos hasta que entre los días 3 y 11 de la vigilancia (8 a 16 de marzo) no se cumplió la ley de Benford. Para los datos a partir del día 8 de la vigilancia (13 de marzo) la evaluación se hizo con las pruebas de razón del logaritmo de la verosimilitud y de ji al cuadrado, las cuales registraron una mejoría en el cumplimiento de la ley de Benford; los días de mejor desempeño fueron el 28 y el 29 de marzo (p>0,80). Con valores más bajos, aunque estadísticamente satisficieron la ley de Benford, aparecen los días 20, 23 y 24 de abril, con valores de p entre 0,15 y 0,20. En el cuadro 2 y la figura 1 se presentan en detalle los resultados del último día de vigilancia incluido en este análisis. En la figura 2 se observan los casos acumulados según lo reportado por el Instituto Nacional de Salud y la OMS para Colombia en las mismas fechas. Como se puede apreciar, la línea azul se encuentra siempre por debajo de la línea negra, lo que equivale a una igualdad en los reportes, por lo que se concluye que hay un claro rezago (de dos días usualmente) en la información publicada por la OMS. transmitidos por insectos vectores. Sin embargo, cabe destacar que el mejor desempeño del sistema se registró con los casos probables de Zika valorados a partir de criterios clínicos y epidemiológicos, y relacionado con un mayor reconocimiento de cuadros sindrómicos específicos, como el de Guillain-Barré, y el de los defectos congénitos relacionados (22) . En cuanto a la oportunidad de la información, se pudo observar un rezago temporal importante entre el Instituto Nacional de Salud y la OMS, que corresponde, en gran medida, a las diferentes horas de cierre de cada informe situacional. La OMS suele hacer su cierre de datos hacia las 03:00 hora de Colombia (10:00, hora de verano de Europa Central), en tanto que el Instituto Nacional de Salud ha variado las horas, siendo más frecuente en las tardes (14:00 a 18:00) de cada día. En este sentido, es interesante anotar que el Center for Systems Science and Engineering (CSSE) de la Johns Hopkins University organizó un tablero interactivo en internet (https://coronavirus.jhu.edu/) que disminuye notoriamente este rezago temporal, pues recibe directamente de cada país o territorio los datos y va actualizando la información, lo que permite tenerla casi en tiempo real (23) . Este tablero ha sido la fuente más confiable en tiempo real de la pandemia alrededor del mundo. Uno de los avances más importantes del sistema de vigilancia colombiano es la disponibilidad de datos abiertos (https://www.ins.gov.co/Noticias/ Paginas/Coronavirus.aspx), que permiten verificar la oportunidad del sistema en términos del reporte de los casos confirmados, casos que han sido investigados desde la condición probable en términos de la contención. Los hallazgos aquí descritos no corresponden a una evaluación completa de un sistema de vigilancia en salud pública. Otros elementos como la simplicidad, la flexibilidad, la aceptabilidad, la sensibilidad, la representatividad, la estabilidad y el valor predictivo positivo (24) deben contemplarse para tener una visión integral. Sin embargo, este análisis preliminar de la calidad de los datos y de su oportunidad en etapas iniciales de una epidemia resulta muy útil, pues permite realimentar rápidamente el sistema de vigilancia, con el fin de adoptar medidas correctivas si es el caso. Dado que en Colombia son muy diversas las capacidades en salud pública y epidemiología, en futuros análisis se podrán evaluar los sistemas de vigilancia en los departamentos y distritos para así determinar acciones a ese nivel que favorezcan el mejoramiento continuo de la vigilancia en salud pública. Public health surveillance: Historical origins, methods and evaluation Health security as a public health concept: a critical analysis Cumplimiento de la ley de Benford (valores de p en la prueba de razón del logaritmo de la verosimilitud) de la vigilancia en salud pública en Colombia durante las epidemias de influenza A(H1N1) * Incluye solamente los primeros 50 días a partir del diagnóstico del primer caso en Colombia Virus COVID-19 The geopolitics of global public health surveillance in the twenty-first century Guidelines for evaluating surveillance systems COVID-19: Towards controlling of a pandemic Investigation of three clusters of COVID-19 in Singapore: Implications for surveillance and response measures La otra transición epidemiológica: hitos en el desarrollo de la epidemiología de los factores de riesgo en Colombia Héroes de a pie: voces y memorias de los detectives de la salud y la epidemiología de campo en Colombia Percepción de competencias en epidemiología en México y Colombia durante la epidemia de influenza A(H 1 N 1 ) entre estudiantes de salud pública Performance of public health surveillance systems during the influenza A(H 1 N 1 ) pandemic in the Americas: Testing a new method based on Benford's law The law of anomalous numbers The first digit phenomenon The Newcomb-Benford law in its relation to some common distributions The effective use of Benford's law to assist in detecting fraud in accounting data Newcomb-Benford law helps customs officers to detect fraud in international trade Monitoring the Paraguayan epidemiological dengue surveillance system (2009-2011) using Benford's law Global performance of epidemiologic surveillance of Zika virus: Rapid assessment of an ongoing epidemic Data quality of Chinese surveillance of COVID-19: Objective analysis based on WHO´s situation reports Benford's law with small sample sizes: A new exact test useful in health sciences during epidemics Tests concerning random points on a circle Towards a genomics-informed, real-time, global pathogen surveillance system Zika virus disease in Colombia -Preliminary Report An interactive web-based dashboard to track COVID-19 in real time Updated guidelines for evaluating public health surveillance systems: Recommendations from the Guidelines Working Group