20 de abril de 2020

El impacto de la declaración de epidemia de COVID-19 en las consecuencias psicológicas: un estudio en usuarios activos de Weibo





 El impacto de la declaración de epidemia de COVID-19 en las consecuencias psicológicas: un estudio en usuarios activos de Weibo

 Sijia Li, Yilin Wang [...] y Tingshao Zhu

 Información adicional del artículo

 Resumen

 COVID-19 (Corona Virus Disease 2019) ha resultado significativamente en una gran cantidad de consecuencias psicológicas.  El objetivo de este estudio es explorar los impactos de COVID-19 en la salud mental de las personas, ayudar a los responsables políticos a desarrollar políticas viables y ayudar a los profesionales clínicos (por ejemplo, trabajadores sociales, psiquiatras y psicólogos) a proporcionar servicios oportunos a las poblaciones afectadas.  Muestramos y analizamos las publicaciones de Weibo de 17,865 usuarios activos de Weibo utilizando el enfoque de Reconocimiento Ecológico en línea (REA) basado en varios modelos predictivos de aprendizaje automático.  Calculamos la frecuencia de palabras, las puntuaciones de los indicadores emocionales (por ejemplo, ansiedad, depresión, indignación y felicidad de Oxford) e indicadores cognitivos (por ejemplo, juicio de riesgo social y satisfacción con la vida) a partir de los datos recopilados.  El análisis de sentimientos y la prueba t de muestra pareada se realizaron para examinar las diferencias en el mismo grupo antes y después de la declaración de COVID-19 el 20 de enero de 2020. Los resultados mostraron que las emociones negativas (por ejemplo, ansiedad, depresión e indignación)  y la sensibilidad a los riesgos sociales aumentó, mientras que las puntuaciones de las emociones positivas (por ejemplo, la felicidad de Oxford) y la satisfacción con la vida disminuyeron.  La gente estaba más preocupada por su salud y familia, mientras que menos por el ocio y los amigos.  Los resultados contribuyen a las brechas de conocimiento de los cambios individuales a corto plazo en las condiciones psicológicas después del brote.  Puede proporcionar referencias para que los responsables políticos planifiquen y luchen contra COVID-19 de manera efectiva al mejorar la estabilidad de los sentimientos populares y preparar con urgencia a los profesionales clínicos para proporcionar los fundamentos de terapia correspondientes para los grupos de riesgo y las personas afectadas.

 Palabras clave: emergencias de salud pública, análisis de frecuencia de palabras, salud mental, emoción, cognición.

 1. Introducción

 COVID-19 (Corona Virus Disease 2019) es una enfermedad altamente infecciosa con un largo período de incubación que fue causada por Sars-Cov-2 (Coronavirus Síndrome Respiratorio Agudo Severo 2) [1].  El número de pacientes con COVID-19 aumentó dramáticamente debido a cientos de millones de personas que viajaron durante el período del Festival de Primavera.  La gravedad de COVID-19 se había subestimado hasta que la Comisión Nacional de Salud lo clasificó oficialmente como una enfermedad infecciosa de tipo B y tomó medidas para luchar contra esta enfermedad el 20 de enero de 2020. Desde entonces, la prevención de epidemias se mejoró de manera integral y marcó el verdadero  principio de preocupación universal, lo que indica impactos generalizados.

 La incertidumbre y la baja previsibilidad de COVID-19 no solo amenazan la salud física de las personas, sino que también afectan la salud mental de las personas, especialmente en términos de emociones y cognición, como indican muchas teorías.  Según la teoría del sistema inmunitario conductual (BIS) [2], es probable que las personas desarrollen emociones negativas (por ejemplo, aversión, ansiedad, etc.) [3,4] y una evaluación cognitiva negativa [5,6] para la autoprotección.  Ante la posible amenaza de enfermedad, las personas tienden a desarrollar comportamientos de evitación (por ejemplo, evitar el contacto con personas que tienen síntomas similares a la neumonía) [7] y obedecer estrictamente las normas sociales (por ejemplo, conformidad) [8].  Según la teoría del estrés [9] y la teoría del riesgo percibido [10], las emergencias de salud pública desencadenan más emociones negativas y también afectan la evaluación cognitiva.  Estas emociones negativas mantienen a las personas alejadas de los posibles patógenos cuando se refiere a la enfermedad.  Sin embargo, las emociones negativas a largo plazo pueden reducir la función inmune de las personas y destruir el equilibrio de sus mecanismos fisiológicos normales [11].  Mientras tanto, los individuos pueden reaccionar de forma exagerada a cualquier enfermedad en caso de una orientación menos apropiada de las autoridades, lo que puede dar lugar a comportamientos excesivamente evitables y conformidad ciega [8].  Por lo tanto, es esencial comprender los posibles cambios psicológicos causados ​​por COVID-19 de manera oportuna.  Dado que los cambios psicológicos causados ​​por emergencias de salud pública pueden reflejarse directamente en las emociones y la cognición [3,4,5,6], podemos monitorear los cambios psicológicos en el tiempo a través de indicadores emocionales (p. Ej., Emociones negativas y positivas) e cognitivos (p. Ej.,  juicio de riesgo social y satisfacción con la vida).

 Las emociones y la cognición generalmente se miden mediante cuestionarios retrospectivos, como el Oxford Happiness Inventory (OHI) [12], Symptom Checklist 90 (SCL-90) [13], Satisfaction with Life Scale (SWLS) [14] y Likert Type Attitude  Escala [15,16].  Sin embargo, en el momento del brote de COVID-19 en China, era muy difícil realizar una encuesta tradicional en papel en las áreas afectadas;  Las encuestas en línea dependen de la cooperación de los participantes, y es difícil cumplir con los requisitos a tiempo, e incluso trae cargas adicionales para los participantes.  Como no sabíamos el momento de la declaración de COVID-19, era imposible medir las emociones y la cognición de las personas mediante una encuesta tradicional por adelantado.  Puede haber una cierta desviación cuando se requiere que las personas recuerden su estado mental hace una semana o más.  Los datos de Weibo están emergiendo como un medio en línea clave y una fuente de datos para que los investigadores entiendan este problema social de una manera no invasiva.  Sina Weibo es una de las principales redes sociales en línea (OSN) de China con más de 462 millones de usuarios activos diarios en 2019. Estos usuarios usan las funciones de Weibo (por ejemplo, responder, @función) para interactuar entre sí, formando datos de comportamiento de usuario enriquecidos.

 El objetivo de este estudio es explorar los impactos de la emergencia de salud pública COVID-19 en la salud mental de las personas, ayudar a los formuladores de políticas a desarrollar políticas viables y ayudar a los profesionales clínicos (por ejemplo, trabajadores sociales, psiquiatras y psicólogos) a brindar servicios a los afectados.  poblaciones en el tiempo.

 2. Materiales y métodos

 2.1.  Participantes y recopilación de datos

 Las muestras en este estudio fueron del grupo de datos original de Weibo [17].  El conjunto de datos contenía más de 1,16 millones de usuarios activos de Weibo.  Weibo es una plataforma popular para compartir y discutir información individual y actividades de la vida, así como noticias de celebridades en China [18].

 Los datos recuperados incluyeron (1) información de perfil del usuario, (2) comportamientos de red y (3) mensajes de Weibo.  La privacidad estuvo estrictamente protegida durante el procedimiento, en referencia a los principios éticos [19].  Hemos obtenido la aprobación del Comité de Ética y el código de ética es H15009.

 Los siguientes criterios de inclusión se emplearon para seleccionar usuarios activos de Weibo del grupo de datos.  Primero, habían publicado al menos 50 publicaciones originales de Weibo alrededor de un mes en total desde el 31 de diciembre de 2019 hasta el 26 de enero de 2020. Segundo, su tipo de autenticación es no institucional (por ejemplo, usuario individual, etc.).  Tercero, su autenticación regional es en China, no "en el extranjero" u "otro".

 Finalmente, adquirimos 17,865 usuarios activos de Weibo, luego obtuvimos todas sus publicaciones originales publicadas durante el 13 de enero de 2020 al 26 de enero de 2020 en el período de dos semanas para el análisis.

 2.2.  Medición de rasgos y procedimientos psicológicos

 En este estudio, utilizamos el reconocimiento ecológico en línea (REA) [20], que se refería al reconocimiento automático del perfil psicológico (p. Ej., Ansiedad, bienestar, etc.) mediante el uso de modelos predictivos [17,20,21] basados ​​en  datos de comportamiento ecológico de Weibo.

 Empleamos el sistema Text Mind desarrollado por el Laboratorio de Psicología Cibernética Computacional en el Instituto de Psicología, Academia de Ciencias de China para extraer características de contenido [22], incluida la herramienta de segmentación de palabras chinas [17] y el diccionario psicoanalítico [23].  Utilizamos la herramienta de segmentación de palabras en chino para dividir el contenido original de microblog de los usuarios en palabras / frases con anotaciones lingüísticas, como verbos, sustantivos, adverbiales y objetos [24], y luego extrajimos categorías psicológicamente significativas a través de la LIWC china simplificada (Consulta de idiomas  y Word Count) diccionario [23].  Estas características léxicas fueron fuentes de datos para el análisis de frecuencia de palabras.

 Después de la extracción de características, utilizamos el modelo de predicción psicológica [25] obtenido del entrenamiento preliminar para predecir el perfil psicológico de estos usuarios activos de Weibo.  Estos modelos predictivos son herramientas desarrolladas para la investigación de psicología en línea basada en big data y tecnologías de aprendizaje profundo, que incluyen indicadores emocionales (ansiedad, depresión, indignación y felicidad de Oxford), indicadores cognitivos (juicio de riesgo social y satisfacción con la vida), etc.  La Figura 1 retrata el procedimiento desde la extracción de características hasta la predicción del indicador psicológico.  Todos los modelos de predicción han alcanzado una correlación moderada con los puntajes del cuestionario.  La viabilidad de los modelos predictivos se ha demostrado en repetidas ocasiones [26, 27, 28].

 

 Figura 1

 Procedimientos de extracción de características de los datos en línea de Weibo e indicador psicológico predichos por características dinámicas.

 Calculamos la frecuencia de palabras, puntajes de indicadores emocionales negativos (es decir, ansiedad, depresión e indignación), indicadores emocionales positivos (es decir, felicidad de Oxford) e indicadores cognitivos (es decir, riesgo social y satisfacción con la vida) de los mensajes recopilados.  Luego comparamos las diferencias de las características psicológicas antes y después de la declaración del brote de COVID-19 el 20 de enero de 2020 a través de la prueba t de muestra pareada utilizando SPSS (Statistical Product and Service Solutions) 22, que publica IBM (International  Business Machines Corporation), Nueva York, Estados Unidos.

 3. Resultados

 3.1.  Demografía

 Entre los 17.865 usuarios activos de Weibo, el 25,23% eran hombres y el 77,95% eran del este de China, que se considera la región más rica de China.  Las edades de los usuarios que registraron su fecha de nacimiento en su perfil (n = 4156, 23.26%) oscilaron entre 8 y 56 años con una edad promedio de 33 años.  El perfil demográfico se representa en la Tabla 1.

 

 tabla 1

 Características demográficas de los participantes seleccionados.

 3.2.  Diferencia lingüística

 En este estudio, comparamos las categorías de LIWC entre la semana anterior (T-before) y después (T-after) 20 de enero, que se muestra en la Tabla 2. Contiene dos tipos de categorías de LIWC: palabras de emociones y palabras de inquietud.  Las palabras de emociones incluyen emoción positiva (p. Ej., Fe, satisfacción y bendición), emoción negativa (p. Ej., Preocupación, sospecha y celos), ansiedad (p. Ej., Malestar, nerviosismo y locura) y enojo (p. Ej., Queja).  Las palabras de preocupación incluyen salud (p. Ej., Insomnio, médico y ejercicio), ocio (p. Ej., Cocinar, conversar y ver películas), familia (p. Ej., Familia y casa), amigo (p. Ej., Acompañante e invitado), dinero (p. Ej.,  facturas, dinero en efectivo y préstamos), muerte (por ejemplo, entierro, asesinato y funeral) y religión (por ejemplo, iglesia, mezquita y templo), que pueden reflejar a lo que la gente está prestando atención.

 

 Tabla 2

 Análisis de frecuencia de palabras antes y después del 20 de enero.

 Después del 20 de enero, el número de palabras aumentó en emoción positiva (t (17,747) = −24,411, p <0 -="" 21.963="" 6.202="" 6.707="" a="" amigo="" ansiedad="" aument="" categor="" de="" disminuy="" el="" emoci="" en="" familia="" frecuencia="" incluida="" la="" libre="" muerte="" n="" nbsp="" negativa="" p="" palabras="" pero="" preocupaciones="" religi="" salud="" significativamente="" t="" tiempo="" y="">
 3.3.  Indicadores emocionales

 Los resultados indican diferencias significativas de los indicadores emocionales entre T-before (13-19 de enero de 2020) y T-after (20-26 de enero de 2020), como se muestra en la Tabla 3. Después del 20 de enero, los indicadores emocionales negativos de los rasgos psicológicos aumentaron en  ansiedad (t (17,747) = −35,962, p <0 3.120="" 5="" de="" depresi="" disminuyeron="" e="" emocionales="" en="" felicidad="" gicos="" indicadores="" indignaci="" la="" los="" mientras="" n="" nbsp="" oxford="" p="" positivos="" psicol="" que="" rasgos="" t="">
 

 Tabla 3

 Indicadores emocionales antes y después del 20 de enero.

 3.4.  Indicadores Cognitivos

 Encontramos diferencias significativas en los indicadores cognitivos entre T-before (13-19 de enero de 2020) y T-after (20-26 de enero de 2020), como se muestra en la Tabla 4. Después del 20 de enero, los indicadores cognitivos de los rasgos psicológicos aumentaron en la sociedad  juicio de riesgo (t (17,747) = 3.120, p <0 .01="" 5.500="" con="" disminuy="" en="" la="" n="" p="" pero="" satisfacci="" t="" vida="">
 

 Tabla 4

 Indicadores cognitivos antes y después del 20 de enero.

 4. Discusión

 Dado que la Comisión Nacional de Salud identificó a COVID-19 como una enfermedad infecciosa de tipo B oficialmente, COVID-19 influyó en los estados psicológicos de las personas en toda China.  Este estudio recolectó datos de usuarios activos de Weibo y realizó análisis de sentimientos durante el 13 y 26 de enero de 2020. Utilizamos REA para adquirir los estados psicológicos y descubrimos que las condiciones psicológicas de los usuarios de Weibo cambiaron significativamente bajo el brote de COVID-19.

 Los resultados mostraron que las preocupaciones de las personas por la expresión lingüística aumentaron después del 20 de enero. Observamos un aumento en la salud y la familia, mientras que una disminución en el ocio y la amistad.  La incertidumbre de la próxima situación causa disonancia cognitiva e inseguridad;  esto produce una sensación de incomodidad mental, lo que lleva a la actividad de Weibo orientada a la reducción de la disonancia y a mantener la seguridad en la salud y las relaciones familiares [29].  Según la teoría del BIS, las personas se comportan de una manera más reticente y conservadora cuando se sienten amenazadas por la enfermedad [30].  Por lo tanto, quedarse en casa con la familia y reducir las actividades recreativas parece ser una forma más segura de prevenir enfermedades.  También indicó que las personas comienzan a preocuparse más por su salud y eran más propensas a buscar el apoyo social de sus familias en lugar de reunirse con amigos, lo que sugería que los intereses y la atención de las personas estaban influenciados por la política de viajes restringida y las regulaciones de autoaislamiento.  de las autoridades sanitarias y del gobierno central.

 Afectados por COVID-19, los mensajes relacionados con la muerte y la religión se hicieron importantes después del 20 de enero.  Los informes mostraron la gravedad y la mortalidad potencial de COVID-19.  La investigación confirmó que las personas tendían a responder a emergencias como el estrés o la muerte en el camino de la religión, lo que puede consolar los estados de ánimo tensos y generar emociones más positivas [31].  Es por eso que las personas oraron por el condado a través de la religión u otras creencias, lo que llevó a la frase que apareció con mayor frecuencia en Internet en ese momento: Dios bendiga a China.

 Las personas mostraron más emociones negativas (ansiedad, depresión e indignación) y menos emociones positivas (felicidad de Oxford) después de la declaración de COVID-19, que fue respaldada por la teoría del BIS, es decir, las personas sí generaron más emociones negativas para la autoprotección.  [3,4].  Estos resultados también son consistentes con estudios previos, que encontraron que las emergencias de salud pública (por ejemplo, SARS) desencadenaron una serie de respuestas emocionales de estrés que contenían un mayor nivel de ansiedad y otras emociones negativas [32,33].  Mientras tanto, la confirmación de que COVID-19 podría transmitirse de persona a persona el 20 de enero, lo cual era inconsistente con los informes anteriores, llevó a que muchas personas no estuvieran satisfechas con la información errónea publicada por los gobiernos provinciales (por ejemplo, Hubei) y acciones regulatorias ineficaces  , causando un aumento en la indignación.  Sin embargo, vale la pena señalar que la frecuencia de palabras de las emociones positivas aumentó después del 20 de enero, lo que parecía ser inconsistente con la teoría del BPI.  De hecho, la emoción positiva incluye palabras como fe y bendición, que tienden más a reflejar la cohesión grupal que a las emociones personales puras (por ejemplo, felicidad).  Los investigadores descubrieron que las amenazas grupales (por ejemplo, desastres naturales y enfermedades epidémicas) convirtieron a los grupos en una comunidad de intereses, lo que resultó en comportamientos más beneficiosos y solidaridad social, lo que indicó una mayor cohesión grupal [34].  Por ejemplo, muchas provincias (por ejemplo, la provincia de Sichuan, la provincia de Shandong, etc.) formaron equipos médicos para ayudar a la provincia de Hubei, que era la zona más afectada.  Muchas personas donaron dinero y suministros a la Cruz Roja de Hubei para apoyar el control de COVID-19.

 Además, el juicio de riesgo social fue mayor y la satisfacción con la vida fue menor después de la declaración de COVID-19.  Es coherente con la teoría del BIS, que encontró que cuando aumentaba la incertidumbre social, como una etiología desconocida y una ruta de transmisión ambigua, las personas desarrollaban una evaluación cognitiva negativa (p. Ej., Una mayor sensibilidad de juicio o percepción de riesgo) para que pudieran descubrir  posibles fuentes de infección a tiempo y evitar la infección [2,35].  No solo eso, el temor de las personas al riesgo potencial y la falta de capacidad de control causada por COVID-19 provocó un juicio de mayor riesgo como lo afirmaba la teoría del riesgo percibido [10].  Además, algunas políticas y regulaciones preventivas en términos de restricción de viaje y autoaislamiento empeoraron la calidad de vida, reflejando una menor satisfacción con la vida.

 A continuación se destacan brevemente algunas de las implicaciones del estudio para los encargados de formular políticas y los profesionales clínicos (por ejemplo, trabajadores sociales, psiquiatras y psicólogos) que planifican y luchan contra COVID-19.  Para los formuladores de políticas: (1) desarrollen una política y un procedimiento consistentes para informar los últimos casos confirmados, el número de muertes recientes y otros datos sobre la situación epidémica.  Por ejemplo, el aumento de casos el 12 de febrero no significa que la situación haya estado fuera de control, sino debido a los nuevos criterios de diagnóstico introducidos.  Es importante dejar que las personas comprendan los datos correctamente para reducir las respuestas de estrés excesivo (por ejemplo, ansiedad, depresión, etc.) generadas por la percepción inapropiada.  (2) Ampliar la conciencia pública sobre el progreso continuo en las medidas de toma de decisiones.  Dado que la indignación puede provenir principalmente de errores y deficiencias en la prevención y el control de la epidemia, puede disminuir efectivamente la indignación si se brinda conciencia y participación pública.  (3) Asegurar el suministro del servicio de tratamiento médico.  Es fundamental establecer un servicio médico para tratar la enfermedad y hacer que las personas sepan cómo acceder a ella de manera conveniente.  Las personas pueden obtener ayuda a tiempo si están infectadas.  Puede mejorar el sentido de control de las personas sobre los riesgos, evitando así la percepción excesiva de riesgo social.  (4) Proporcionar más servicios de entretenimiento en la puerta para abordar la buena calidad de vida.  Las personas pueden estar más dispuestas a cooperar cuando se cumplan sus requisitos de vida y entretenimiento, como compras en línea, entretenimientos, etc. Para los profesionales clínicos: (1) ajuste la configuración del consultor racionalmente y coopere entre sí.  Los consultores psicológicos deben captar la información de la epidemia correctamente y llevar a cabo la divulgación científica durante el asesoramiento.  Los trabajadores sociales pueden ayudar a resolver problemas prácticos en la vida.  Estas acciones pueden mejorar la sensación de estabilidad y aliviar la ansiedad y la depresión.  (2) Entregue la terapia psicosocial necesaria de varias maneras.  Teniendo en cuenta la particularidad del autoaislamiento, se debe aplicar en la práctica el asesoramiento de línea directa relevante y la consultoría en línea.

 Se deben considerar varios otros puntos al generalizar los hallazgos de este estudio.  Primero, como los usuarios de Weibo son principalmente jóvenes, los resultados pueden estar sesgados hasta cierto punto.  Además, el análisis actual se basa semanalmente, con una granularidad relativamente grande, que tiene ciertas influencias para reflejar la tendencia cambiante de la mentalidad social de manera oportuna.  En estudios posteriores, intentaremos expandir el rango de sexo y edad y predecir los rasgos psicológicos en una granularidad más fina.  Estudios anteriores indicaron que las personas tendían a exagerar actitudes y prejuicios, especialmente cuando se sentían más vulnerables a la transmisión de enfermedades [36].  Nos inspira a tratar de construir un modelo de predicción que pueda predecir las actitudes y creencias de las personas contra el virus a través de los datos en línea de Weibo para comprender mejor los impactos psicológicos de las emergencias de salud pública.

 5. Conclusiones

 En este estudio, comparamos la diferencia antes y después del 20 de enero tanto en las categorías lingüísticas como en el perfil psicológico.  Encontramos un aumento en las emociones negativas (ansiedad, depresión e indignación) y sensibilidad a los riesgos sociales, así como una disminución en las emociones positivas (felicidad de Oxford) y la satisfacción con la vida después de la declaración de COVID-19 en China.  Además, las personas muestran más preocupación por la salud y la familia, y menos preocupación por el ocio y los amigos.  El uso de datos de redes sociales puede proporcionar una comprensión oportuna del impacto de las emergencias de salud pública en la salud mental del público durante el período epidémico.

 Contribuciones de autor

 S.L., N.Z. y T.Z.  concebido y planeado este artículo.  S.L.  y Y.W.  llevado a cabo la búsqueda y revisión de la literatura.  T.Z.  recopilado y proporcionado los datos.  S.L.  y Y.W.  analizó los datos.  S.L.  redactó el estudio.  J.X., N.Z. y T.Z.  revisado y editado el escrito.  Todos los autores (S.L., Y.W., J.X., N.Z. y T.Z.) revisaron el artículo críticamente en busca de contenido intelectual importante.  Todos los autores (S.L., Y.W., J.X., N.Z. y T.Z.) comentaron y aprobaron el manuscrito final y son responsables de todos los aspectos del trabajo.  Todos los autores han leído y aceptado la versión publicada del manuscrito.

 Fondos

 Esta investigación fue financiada por la Fundación Nacional de Ciencias Naturales de China, número de subvención 31700984.

 Conflictos de interés

 Los autores declaran no tener conflictos de intereses.

 Información del artículo

 Int J Environment Res Salud Pública.  2020 mar;  17 (6): 2032.

 Publicado en línea el 19 de marzo de 2020 doi: 10.3390 / ijerph17062032

 PMCID: PMC7143846

 PMID: 32204411

 Sijia Li, 1,2 Yilin Wang, 1,3 Jia Xue, 4 Nan Zhao, 1, * y Tingshao Zhu1, *

 1Instituto de Psicología, Academia de Ciencias de China, Beijing 100101, China;  nc.ca.hcysp@jsil (S.L.);  nc.ude.iaknan.liam@8113161 (Y.W.)

 2 Departamento de Psicología, Academia de Ciencias de la Universidad de China, Beijing 100049, China

 3Department of Psychology, Nankai University, Tianjin 300071, China

 4Factor Inwentash Facultad de Trabajo Social, Universidad de Toronto, Toronto M5S 1A1, Canadá;  ac.otnorotu@eux.aij

 * Correspondencia: nc.ca.hcysp@nanoahz (N.Z.);  nc.ca.hcysp@uhzst (T.Z.)

 Recibido el 28 de febrero de 2020;  Aceptado el 17 de marzo de 2020.

 Copyright © 2020 por los autores.

 Licenciatario MDPI, Basilea, Suiza.  Este artículo es un artículo de acceso abierto distribuido bajo los términos y condiciones de la licencia Creative Commons Attribution (CC BY) (http://creativecommons.org/licenses/by/4.0/).

 Los artículos de la Revista Internacional de Investigación Ambiental y Salud Pública se proporcionan aquí por cortesía del Instituto de Publicación Digital Multidisciplinario (MDPI)