Metodología y evaluación deprogramas de promoción de salud programas de promoción de salud en el ámbito comunitario

Dory Aviñó1

Carmen Fernández2Carmen Fernández

Joan J. Paredes i Carbonell1,2,3

1Centro Superior de Investigación en Salud Pública-FISABIO

2Centro de Salud Pública Alzira. 3Centro de Salud Pública València

e-mail: avinyo_ado@gva.es

Objetivos de la presentación

¿Qué es evaluar, por qué evaluar y qué evaluar?

Projecte RIU: un modelo de intervención en promoción de salud en Projecte RIU: un modelo de intervención en promoción de salud en entornos vulnerables

Metodología de evaluación RIU y algunos resultados

Dificultades encontradas en la evaluación y posibles soluciones

Experiencias de buena práctica. Fuentes para consultar

Conclusiones

¿Qué es evaluar?

Es medir y emitir un juicio acerca de algo. La forma de juzgar depende de nuestras experiencias, aspiraciones y de lo que consideramos más o menos importante

Es medir resultados y proceso comparándolos con los objetivos planteados y tomar decisiones para mejorar la intervención

Evaluar implica dos procesos:

� la observación y la medida� la comparación con criterios o normas que se consideran un buen � la comparación con criterios o normas que se consideran un buen

resultado

Antes de recoger los datos, se ha de definir el criterio en base al que se juzgarán los resultados

Tomado de Hawe, Degeling, Hall y Brierley (2003)

¿Por qué evaluar?

Conocer objetivamente si el programa implementado está siendo eficaz, si se están alcanzando los objetivos propuestos. Transparencia

Mejora continuada del programa, su rediseño o incluso su interrupción.Mejora continuada del programa, su rediseño o incluso su interrupción.Generar una mejor práctica

Pilar básico de la investigación: adecuada implementación y diseño de acciones dirigidas a incrementar la salud de la población

Buscar fuentes de financiación para la implementación y continuidad

Permite rendir cuentas. Auditoría. Ética de las intervenciones en salud

Transferencia del conocimiento a otros entornos

Tipos de evaluación

Dos tipos de evaluación:

EVALUACIÓN DEL PROCESO EVALUACIÓN DEL PROCESO

Mide si se están realizando las actividades previstas en el programa, si están alcanzando a la población diana y la calidad del programa.

EVALUACIÓN DE LOS EFECTOS

Si los objetivos establecidos se han alcanzadoSi los objetivos establecidos se han alcanzado

� Impacto: mide los efectos inmediatos del programa � Resultado: mide el efecto a medio y largo plazo del programa

¿Qué evaluar?

Necesidades. Diagnóstico Impacto = Eficacia (en condiciones ideales)

¿la intervención ha producido cambios en la salud de la población?¿se producirían igual sin la intervención? Grupo control¿se producirían igual sin la intervención? Grupo controlcomparación pre, post-intervención; con otra intervención

Efectividad: efecto de una acción de salud en condiciones reales Eficiencia: relación coste - efectividad Equidad ParticipaciónCalidad Sostenibilidad Interdependencia: si se consiguen otros objetivos más allá de la saludFines de la intervención: ¿grupos vulnerables? ¿gradiente? Monitorización y seguimiento

Los 7 pecados capitales de la evaluación del impacto*

1. No evaluar

2. Iniciar tardíamente la evaluación. Planificarla junto al diseño del programa:- identificar indicadores y recoger datos - grupo control - grupo control - línea base

3. Evaluar el impacto sin evaluar el proceso- conocer qué factores intervienen en el impacto- introducir mejoras en el programa

4. Usar una metodología inadecuada

5. No involucrar a los gestores. Responder a preguntas para tomar decisiones5. No involucrar a los gestores. Responder a preguntas para tomar decisiones

6. Ignorar el contexto

7. No evaluar las desigualdades: alcance a diferentes grupos sociales

*Victora C G, Santos I S. Los siete pecados capitales de la evaluación del impacto. Informe SESPAS 2008. GacSanit. 2008;22(1):1-7

Aspectos a considerar en la evaluación

Enfoque de Promoción de Salud

- Apoyo político y directivo. Sostenibilidad

- Intersectorialidad

- Intervenciones sobre los entornos

- Enfoque de reducir desigualdades socialesejes de desigualdad: género, clase social, cultura o etnia, territorio, edad,

discapacidaddiscapacidad

- Acción comunitaria: participación de la población + profesionales

- Empoderamiento de la población

Projecte RIU: “Un riu de cultures, un riu de salut”

Proyecto financiando por el Ministerio de Sanidad – Plan de Calidad del SNS en colaboración con Centre de Salut Pública d’Alzira, Ajuntament d’Algemesí,

Ajuntament d’Alzira y Ajuntament de Sueca

Promoción Salud Departamento de La Ribera

Facilitar el acceso a los servicios y programas de salud

RIU Algemesí2008-13

4 ediciones

RIU Alzira2011-13

2 edicionesRIU Sueca

programas de saluden poblaciones vulnerables

Algemesí 28.072 hab. El Raval 1.578 hab.

Alzira 44.742 hab. L’Alquerieta 4.500 hab.

Sueca 28.986 hab. Municipal 28.986 hab.

RIU Sueca2012-13

Utiliza ciclos continuados de formación-acción

Modelo RIU

Utiliza ciclos continuados de formación-acción de agentes de salud como estrategia para

desarrollar un proceso que…

EmpoderaUtiliza metodología

IAP

Desarrolla competenciasde educación entre iguales

Promoción de Salud:health assets

IntersectorialidadInterculturalidad

Parte “de” y llega“a” la comunidad

Proceso Impacto

Asistencia ASBC Cambios en el uso de servicios sanitarios de ASBC: estudio EPI-RIU (0 y 9 m)

Evaluación

Adquisición de conocimientos (exámenes, 4 y 9 m)

Análisis de conflictos: observación participante

Nº, tipo y características de las acciones:

Acciones individuales: registro

Acciones grupales: nº personas y

ASBC: estudio EPI-RIU (0 y 9 m)

Cambios percibidos por el grupo ASBC sobre salud y uso de servicios sanitarios (entrevista grupal, 0 y 9 m)

Cambios en autocuidados de ASBC (autorregistro 0 y 9 m)

Cambios en su red social y temas salud tratados (entrevista individual 0 y 9 m)Acciones grupales: nº personas y

opinión

Opinión ASBC: entrevista grupal

Red intersectorial profesionales: composición

Opinión Red: entrevista grupal

Cumplimiento del cronograma

tratados (entrevista individual 0 y 9 m)

Cambios percibidos por Red profesionales (entrevista grupal, 9 m)

EPI-RIU. ALGEMESIEPI-RIU. ALGEMESI

Desigualdades en salud enentornos vulnerables de la Riberaentornos vulnerables de la Ribera

EPI RIU forma parte del Projecte RIU: un riu de cultures, un riu de salut, financiado por el Ministerio deSanidad, Política Social e Igualdad, los ayuntamientos de Algemesí, Alzira y la Mancomunitat de LaRibera Alta, en colaboración con el Centro de Salud Pública de Alzira, el Centro Superior deInvestigación en Salud Pública (CSISP) y el Departamento de Salud de La Ribera

Objetivos

Primovacunación

Descripción del barrio como línea base para medirreducción de desigualdades a los 5 años de intervencióncomparando barrio con el resto del municipio:

� características sociodemográficas� estado de salud� determinantes de salud � uso de servicios y programas de salud � uso de servicios y programas de salud

Consultas en atención primaria

Primovacunación

Tipos de consulta:

� con cita � a demanda

Atenciones realizadas en:

� Medicina de familia� Medicina de familia� Pediatría (vacunación, programa del niño sano,

resto de consultas) � Enfermería� Matrona (seguimiento del embarazo)

Salud Sexual y Reproductiva

Primovacunación

Atenciones realizadas:

� número � frecuentación � motivo (diagnóstico) � consulta de Ginecología, Sexología

Citologías realizadas en Anatomía PatológicaCitologías realizadas en Anatomía Patológica

Interrupciones voluntarias de embarazo

Atención asistencial urgente

PrimovacunaciónHospital (pacientes distintos y frecuentación) Hospital (pacientes distintos y frecuentación)

� Medicina general � Traumatología � Ginecología� Pediatría

Centro de Salud (pacientes distintos y frecuentación) Centro de Salud (pacientes distintos y frecuentación)

� Medicina general � Traumatología � Ginecología � Pediatría

Ingresos hospitalarios

Primovacunación

Distribución por especialidad:

� Médicas� Quirúrgicas

Por partos

Evaluación cualitativa

Objetivo: Que las ASBC actúen de puente entre profesionales y servicios sanitarios y la población para reducir desigualdades

Resultados:

Metodología: Entrevista grupal con ASBC y profesionales

Resultados:ASBC son reconocidas como sujetos legítimos de transmisión de conocimientos yfacilitan la superación de barreras culturales de accesibilidad a los servicios.

““Es una informació que no se li transmet, que no se li pot transmetre des del’hospital, per molts esforços que faja a l’hora de fer la divulgació escrita, televisiva,per ràdio, a esta gent no arriba. Esta gent no arriba, esta gent ha de ser verbal, através de la gent. ...se forma a la pròpia gent del barri i eixa gent del barri és la quetransmiteix eixa informació. És la única forma d’arribar a esta gent i que tingainformació i que tinga la informació que necessita. I ademés, se la transmiteix gentdel meu nivell, entre cometes, cultural o educatiu, i utilitza el mateix vocabulari queell té, que necessita que li la diguen.” (GPA:4)ell té, que necessita que li la diguen.” (GPA:4)

“- La gente de aquí se siente… Nos ve como una representación de ellos.- Un apoyo, un apoyo. Nosotros somos parte de ellos.-Vivimos aquí y somos del barrio.” (GPAZ:34)

“Porque la gente empieza a preguntarte… por ejemplo de lo de las tarjetassanitarias, muchas cosas. Y te preguntan a ti y tú dices, ¿Quién soy yo para quevengan a preguntármelo? Agente de saluddddd!!!!”(GPAZ:2)

Análisis de Redes Sociales

Representación de la red de una agente de salud

hombre mujer barrio en otro lugar

Tipo de apoyo que los agentes reconocen en su red. Pretest

30%

40%

50%

60%

70%

80%

90%

100%

Acompañamiento

Inf_servicio

Consejo

0%

10%

20%

30%

1 3 4 6 7 8 10 11 12 TODOS

Tipo de apoyo que los agentes reconocen en su red.Alzira. Post-test

80%

100%

0%

20%

40%

60%

1 3 4 6 7 8 10 11 12 TOTAL

Acompañamiento

Inf_servicios

Consejo

Métodos cuantitativos

Características de los Sistemas de Información:

Dificultades

Características de los Sistemas de Información:

- no desagregación barrio – resto del municipio

- SIP / Abucasis: consultas atención primaria, salud sexual y reproductiva y atención al embarazo

Accesibilidad a los datos clínicos de atención primaria y hospitalaria. Otras prioridades de los servicios

Confidencialidad. Áreas pequeñas. Datos agregados: Confidencialidad. Áreas pequeñas. Datos agregados:

- situación laboral- mortalidad- consumo de sustancias de abuso - programas de prevención del cáncer

Falta de datos socioeconómicos en el Padrón Municipal

Métodos cualitativos

Los métodos cualitativos no son exclusivos de la evaluación de

Dificultades

Los métodos cualitativos no son exclusivos de la evaluación de proceso. Evalúan también los efectos de la intervención

Necesaria la capacitación en técnicas de investigación cualitativa

Análisis de redes sociales: posibilidades y dificultades en su uso

Experiencias de buena práctica

Denominación Descripción Institución

Llei de Barris. Programa Salut als Barris

Actuaciones intersectoriales e integrales en barrios de elevada

Subdirecció General de Promocióde Salut. D.G. Salut Pública. Programa Salut als Barris

Generalitat Catalunyaintegrales en barrios de elevada fragilidad. Promoción de salud en poblaciones vulnerables

de Salut. D.G. Salut Pública. Departament de Salut. Generalitat Catalunya

Evaluación del Impacto en Salud del Proyecto de Reforma Integral de Uretamendi, Betolaza y Circunvalación (Bilbao)

Evaluación del impacto en salud y las desigualdades sociales en salud en la población de este barrio y recomendaciones de mejora de la intervención

Departamento de Sanidad del Gobierno Vasco – Ayuntamiento de Bilbao

Promoción de la salud en la comunidad gitana. Navarra

Actuación de mediadores de la comunidad gitana en el ámbito

Instituto de Salud Pública Navarra- Federación de comunidad gitana. Navarra comunidad gitana en el ámbito

educativo, sanitario y socialNavarra- Federación de asociaciones Gazkalo

Proyecto de salud en población inmigrante iberoamericana MIHSALUD

Proyecto de mediación en salud e intervención comunitaria a través del trabajo con asociaciones y capacitación de agentes de salud

Centro de Salud Pública de Valencia. D.G. Salud Pública. Generalitat Valenciana

Fuentes para consultar

Sistema de Información en Salud Pública. D.G. Salud Pública. Generalitat Valencianahttp://www.sp.san.gva.es/Acceso limitado. Epidemiología

Fuentes para consultar

Indicadores clave del SNS

Fuentes para consultar

Indicadores en salud de la Comunidad Europea (ECHI)http://ec.europa.eu/health-eu/health_in_the_eu/ec_health_indicators/index_es.htm

Fuentes para consultar

Swiss model for Outcome Classification in Health Promotion and Preventionhttp://www.quint-essenz.ch/en/

Fuentes para consultar

Lista de comprobación de la mirada de equidad en salud en las fases del ciclo deplanificación.Borrell C, Díez E, Morrison J, Camprubí L. Las desigualdades en salud a nivel urbano y las medidas efectivas para reducirlas. Barcelona: Proyectos Medea e Ineqcities; 2012http://www.aspb.es/quefem/docs/equidad_salud_urbana.pdfhttp://www.aspb.es/quefem/docs/equidad_salud_urbana.pdf

Fuentes para consultar

THE COMMUNITY TOOL BOX University of Kansas http://ctb.ku.edu/en/TakingActionInTheCommunity.aspx

Conclusiones

1. No hay cultura de evaluación

2. Recursos para evaluar: 2. Recursos para evaluar:

- Se precisa la colaboración intersectorial - Específicos para evaluar el programa

3. Investigación sobre la práctica

4. Comenzar por la evaluación de proceso

5. Complejidad: crear y mantener redes de experiencias que permitan avanzar en la evaluación