Evaluación: Back to the Basics

22 set.

La cultura evaluativa de AQuAS viene de lejos y la compartimos en redes estatales como REDETS e internacionales como INAHTA, HTAi y EUnetHTA. Esta evaluación hace referencia a la evaluación de tecnologías sanitarias (esto incluye la evaluación de productos sanitarios, medicamentos, programas, modelos organizativos en el ámbito de la salud y un largo etcétera que puede a su vez incluir la evaluación de cribados, tests diagnósticos e eHealth, entro otros) y  también la evaluación de la calidad de la atención asistencial.

La metodología que se usa es robusta y genera debate aún actualmente y es positivo que sea así porque este debate implica un cuestionamiento constante sobre qué hacemos y cómo lo hacemos. Cuando aparecen nuevas tecnologías, nuevas necesidades, nuevas realidades, se requieren también nuevas metodologías evaluativas o su adaptación.

“Evaluar para mejorar” es la idea básica de la evaluación pero … ¿de qué hablamos exacatamente cuando hablamos de evaluación?

No existe una respuesta simple para esta cuestión.

En este post de Mireia Espallargues, Noemí Robles y Laia Domingo hay una buena definición sobre indicadores para la evaluación clínica y de la calidad asistencial.

“Un indicador es un instrumento de medida que se utiliza para evaluar o medir aspectos concretos de la calidad de la atención a través de diversas estrategias de análisis”

En este otro post de las mismas autoras hay un ejemplo de evaluación de programas de cronicidad.

“Los resultados obtenidos de la implementación de los indicadores permitirá a los profesionales disponer de unos criterios objetivos sobre la calidad de sus intervenciones, facilitando la identificación de las fortalezas de los programas de atención a la cronicidad, y también de las áreas de mejora”

En esta línea de evaluación de la cronicidad, puede ser muy útil la aplicación de herramientas para medir multimorbilidad, tal como se puede leer en este post de Emili Vela.

“La presencia multimorbilidad está asociada a una mayor utilización de recursos asistenciales (sanitarios y sociales) y a una peor calidad de vida. En este contexto, se hace necesario medir la multimorbilidad para poder de este modo determinar su impacto en el sistema sanitario”

Otra línea de trabajo muy relacionada con evaluación la encontramos en este post de Miquel Pons, Daniel Chaverri y Luis Lobo sobre prótesis de cadera. Se trata de un estudio que muestra de forma muy clara la utilidad de los registros para la evaluación de tecnologías sanitarias.

“En el contexto actual de innovaciones y avances tecnológicos contínuos y ante una gran presión por parte de los fabricantes, el abanico de prótesis a disposición de los cirujanos ortopédicos es cada vez más grande. Esta situación hace necesario que las prótesis que se utilicen presenten evidencia científica basada en estudios clínicos o bien en datos de registros de artroplastias”

Las iniciativas que estudian la variabilidad en la práctica médica tienen un fuerte componente evaluativo también. Para introducirnos en esta cuestión, Enrique Bernal Delgado y Sandra García Armesto publicaron un post sobre cómo se trata  y cómo ha evolucionado esta cuestión a nivel internacional.

“Las experiencias más significativas se han desarrollado en contextos con una profunda cultura evaluativa y en sistemas donde la elección de aseguradoras y competencia entre proveedores constituye una de sus características fundamentales”

Desde AQuAS, Laura Muñoz presentaba en este otro post dos líneas de trabajo muy potentes: el estudio de la variabilidad en el contexto catalán y la presentación dinámica de estos resultados, una novedad absoluta por lo que a visualización de datos se refiere.

Elementos tecnológicos nuevos implican -para la evaluación- un reto intelectual y un reto por el alcance o volumen de las intervenciones a evaluar. Es reciente la publicación de un marco conceptual de evaluación de mHealth publicado en una revista con un alto factor de impacto, situada en el primer cuartil del Journal Citation Reports.

Los conceptos de eficacia, efectividad, seguridad, eficiencia e impacto organizativo, ético y social son las grandes dimensiones del marco teórico de la evaluación de tecnologías sanitarias y aquí se añade la necesidad de incorporar metodologías de otros campos y el esfuerzo constante para adaptarse a una realidad siempre cambiante.

Para acabar, insistimos en la importancia de la metodología, no como algo estático sinó como un elemento al servicio de la investigación de mejor calidad.

Para seguir avanzando en la evaluación, back to the basics también.

Entrada elaborada por Marta Millaret (@MartaMillaret)

Avaluació: Back to the basics

22 set.

La cultura avaluativa d’AQuAS ve de lluny i la compartim en xarxes estatals com REDETS i internacionals com INAHTA, HTAi i EUnetHTA. Aquesta avaluació fa referència a l’avaluació de tecnologies sanitàries (això inclou l’avaluació de productes sanitaris, medicaments, programes, models organitzatius en l’àmbit de la salut i un llarg etcètera que pot incloure l’avaluació de cribratges, tests diagnòstics i eHealth, entre d’altres) i també l’avaluació de la qualitat de l’atenció assistencial.

La metodologia que s’usa és robusta i genera debat encara actualment i és positiu que sigui així perquè aquest debat implica un qüestionament constant sobre què fem i com ho fem. Quan apareixen noves tecnologies, noves necessitats, noves realitats, es requereixen també noves metodologies avaluatives o la seva adaptació.

“Avaluar per millorar” és la idea bàsica de l’avaluació però de què parlem exactament quan parlem d’avaluació?

No existeix cap resposta simple a aquesta qüestió.

En aquest post de Mireia Espallargues, Noemí Robles i Laia Domingo s’hi pot llegir una bona definició sobre indicadors per a l’avaluació clínica i de la qualitat assistencial.

“Un indicador és un instrument de mesura que s’utilitza per avaluar o mesurar aspectes concrets de la qualitat de l’atenció a través de diverses estratègies d’anàlisi”

En aquest altre post de les mateixes autores hi ha un exemple d’avaluació de programes de cronicitat.

“Els resultats obtinguts de la implementació dels indicadors permetrà als professionals comptar amb uns criteris objectius sobre la qualitat de les seves intervencions, facilitant la identificació de les fortaleses dels programes d’atenció a la cronicitat, així com les àrees de millora”

En aquesta línia de l’avaluació de la cronicitat, pot ser molt útil l’aplicació d’eines per mesurar la multimorbiditat, tal com es pot llegir en aquest post d’Emili Vela.

“La presència de multimorbiditat està associada a una major utilització de recursos assistencials (tant sanitaris com socials) i a una pitjor qualitat de vida. En aquest context, es fa necessari mesurar la multimorbiditat per tal de poder determinar el seu impacte en el sistema sanitari”

Una altra línia de treball molt lligada a l’avaluació, la podem trobar en aquest post de Miquel Pons, Daniel Chaverri i Luis Lobo sobre pròtesis de maluc. Es tracta d’un estudi que mostra d’una manera molt clara la utilitat dels registres per a l’avaluació de tecnologies sanitàries.

“En el context actual d’innovacions i avenços tecnològics continus i davant d’una gran pressió per part dels fabricants, el ventall de pròtesis a disposició dels cirurgians ortopèdics és cada vegada més gran. Aquesta situació fa necessari que les pròtesis que s’utilitzin presentin evidència científica basada en estudis clínics o bé en dades de registres d’artroplàsties”

Les iniciatives que estudien la variabilitat en la pràctica mèdica tenen un fort component avaluatiu també. Per introduir-nos en aquesta qüestió, Enrique Bernal Delgado i Sandra García Armesto van publicar un post sobre com es tracta i com ha evolucionat aquesta qüestió a nivell internacional.

“Les experiències més significatives s’han desenvolupat en contextos amb una profunda cultura avaluativa i en sistemes en què l’elecció d’asseguradors i competència entre proveïdors en constitueix una de les característiques fonamentals”

Des d’AQuAS, Laura Muñoz presentava en aquest altre post dues línies de treball molt potents: l’estudi de la variabilitat en el context català i la presentació dinàmica d’aquests resultats, tota una novetat pel que fa a visualització de dades.

Elements tecnològics nous impliquen -per a l’avaluació- un repte intel·lectual i un repte quant a l’abast o volum de les intervencions a avaluar. És recent la publicació d’un marc conceptual d’avaluació d’mHealth publicat en una revista amb alt factor d’impacte, situada en el primer quartil del Journal Citation Reports.

Els conceptes d’eficàcia, efectivitat, seguretat, eficiència i impacte organitzatiu, ètic i social són les grans dimensions del marc teòric de l’avaluació de tecnologies sanitàries i aquí s’hi afegeix la necessitat d’incorporar metodologies d’altres camps i l’esforç constant d’adaptar-se a una realitat sempre canviant.

Per acabar, insistim en la importància de la metodologia, no com a quelcom estàtic sinó com un element al servei de la recerca de millor qualitat.

Per continuar avançant en l’avaluació, back to the basics també.

Entrada elaborada per Marta Millaret (@MartaMillaret)

Indicators for assessing care for chronicity

10 nov.

In a previous post we discussed the advantages of using indicators in the assessment of health services. At AQuAS we have been applying indicators to assess different care processes and areas, with care for patients suffering from chronic conditions being one of the principal areas of interest in terms of new care models and programs assessment. Interventions in the field of care for chronicity are extremely complex given that by their very nature, they tend to involve multiple actors and many different levels of care concurrently, as well as different elements utilising therapeutic instruments and technology with very variable intensity. Moreover, their effectiveness is often linked to contextual factors, making it difficult to attribute an outcome to a particular component of the program. So, given this level of complexity, the question remains, why should we be using indicators in this area? The answer is that these indicators may provide us with several benefits compared to other assessment approaches, such as:

  • Incorporating professional opinion and consensus
  • The possibility of including structural and procedural indicators allows us to obtain an understanding of the environment and the reality in which the initiative is being implemented
  • Providing a type of assessment that is more accessible and understandable for professionals
  • Greater simplicity and speed in evaluation and obtaining results
  • Possibility of defining standards
  • Allowing comparisons to be established and objectifying trends
  • Identifying successful characteristics and factors that can define which models are most effective, for which groups of chronic patients, in what context and at what cost

The first project in which AQuAS began using quality of care indicators for assessing chronicity got underway in 2012 with the commission by the Program for Prevention and Care for Chronicity (PPAC) to define a set of indicators to assess the quality of integrated care programs for chronicity within the health sector, where an ‘integrated program’ is understood as those programs involving the coordinated participation of different levels of care. Following the methodology described in the previous post (review of literature, establishing a theoretical framework and expert opinions) a total of 18 indicators were obtained, mainly from intermediate and final results, which experts considered relevant and feasible for assess these types of programs and which are currently being implemented (see table 1 and web).

Table 1: Indicators assessed as relevant and feasible for evaluating integrated care programs for chronicity

indicadors-2-en-1

From this experience, AQuAS developed a proposal for indicators, published recently to, assess chronic care as part of the strategy for tackling chronicity within the National Health System. As a result of this work, a set of indicators considered to be crucial for evaluation emerged, which included several previously prioritized indicators which are repeated such as polymedication, avoidable readmissions and hospitalisations, but which incorporates new factors which are more closely associated with the patients’ experience, such as the assessment of the patients’ and carers’ quality of life, or patients’ lifestyles (see Table 2).

Table 2: Proposal for prioritized indicators for promoting more uniform measurement of the entire National Health System for evaluating of chronicity care strategies

indicadors-2-en-2

Later, from 2014 onwards, the Catalan Institute of Healthcare and Social Services (ICASS – Dpt. Social Welfare and Family) and the PPAC (Health Dept.), commissioned extensive work to be carried out in evaluating collaborative social and health care models in Catalonia. These models not only consider the different levels of care in the health system but also include social services, a crucial aspect in caring for patients in this category. The objectives of the project were to outline the organization and operations of these collaborative experiences, identify barriers and facilitators, propose a conceptual framework for assessment and define a set of well-founded indicators based on feedback from participants and the expertise acquired from previous assessment studies. The proposed indicators continue to take into account traditional indicators while consolidating assessment that includes the views of those involved, not just the patient, but also the caregivers and professionals, and placing special emphasis on the evaluation of the coordinated actions of healthcare and social services, for example considering the avoidance of duplicate processes or carrying out joint social and healthcare initiatives.

We must also highlight in this line of work the efforts undertaken by the ITES FORUM (Forum of innovation, transformation and excellence in health and social services) to define a joint health and social services evaluation framework with a proposal of indicators (line L6) and in which AQuAS is also involved jointly with professionals from different fields. The Forum is a tool to facilitate the necessary conceptual debate required for transforming existing social services and healthcare in favour of a new model of integrated care.

Finally, and to continue discussing the area of assessing the integration of health and social services, since 2015 AQuAS has been involved in the Horizon2020 SUSTAIN (Sustainable tailored integrated care for older people in Europe) project. This European project aims to compare, assess and implement strategies to improve integrated care experiences aimed at non-institutionalized elderly individuals, in other words, those living in their own homes. The project has an additional goal, which is to seek to ensure that the best integrated care initiatives in this area are applicable and adaptable to other European health systems and regions. The project involves seven European countries working simultaneously on the basis of the definition and implementation of a set of indicators pending definition, tailored to this type of population and integrative approach.

Indicators, therefore, are useful tools for assessing an area as large and as complex as chronicity and they can be applied from a broader or narrower perspective, in other words, taking into account not only the different levels of care in the health system, but also including social services. The results obtained from the implementation of these indicators will provide professionals with objective criteria regarding the quality of their interventions, by facilitating the identification of the strengths of chronic care programs, as well as areas with scope for improvement.

Post written by Noemí Robles, Laia Domingo i Mireia Espallargues. Àrea d’Avaluació, AQuAS.

Indicadores para la evaluación de la atención a la cronicidad

10 nov.

En un post anterior comentábamos las ventajas de utilizar indicadores en la evaluación de los servicios  sanitarios. Desde el AQuAS llevamos tiempo aplicando el uso de indicadores para evaluar diferentes procesos y ámbitos asistenciales, siendo la evaluación de nuevos modelos y programas de atención a los pacientes crónicos una de las principales áreas de interés. Las intervenciones en el campo de la atención a la cronicidad son extremadamente complejas ya que se caracterizan por la concurrencia de múltiples factores y niveles asistenciales y por diversos componentes con una intensidad muy variable en el uso de instrumentos terapéuticos y tecnológicos. Además, su efectividad está a menudo vinculada a aspectos contextuales, lo cual dificulta atribuir el efecto a un componente particular del programa. Por todo ello, y  teniendo en cuenta este nivel de complejidad, habría que preguntarse: ¿qué sentido tiene el uso de indicadores en este caso? La respuesta es que estos indicadores nos pueden aportar una serie de ventajas respecto de otras aproximaciones evaluativas como son:

  • Incorporar la opinión y el consenso de los profesionales
  • Posibilidad de incluir indicadores de estructura y proceso que permiten obtener un conocimiento del entorno y la realidad en la que se está llevando a cabo la iniciativa
  • Facilitar un  modo de evaluación más accesible y comprensible para los profesionales
  • Más simplicidad y rapidez en la evaluación y la obtención de resultados
  • Posibilidad de definir estándares
  • Permiten establecer comparaciones y objetivar tendencias
  • Identificar esas características o factores de éxito que nos puedan definir qué modelos son más efectivos, para qué grupos de pacientes crónicos, en qué contexto y a qué coste

El primer proyecto en que el AQuAS empezó a utilizar indicadores de calidad asistencial para la evaluación de la cronicidad se inició en 2012, con el encargo del Programa de Prevenció i Atenció a la Cronicitat (PPAC) de definir un conjunto de indicadores que permitiera evaluar la calidad de los programas integrados de atención a la cronicidad del ámbito sanitario, concibiendo como integrados aquellos programas en los que participan de forma coordinada distintos niveles asistenciales. Siguiendo la metodología descrita en el post anterior (revisión bibliográfica, establecimiento de un marco teórico  y opinión de los expertos) se obtuvieron un total de 18 indicadores, principalmente de resultados intermedios y finales, que los expertos consideraron relevantes y factibles para evaluar este tipo de programas y que actualmente están en fase de implementación (ver tabla 1 y link a web).

Tabla 1: Indicadores valorados como relevantes y factibles para la evaluación de los programas integrados de atención a la cronicidad

indicadors-2-paint-cast-1

A partir de esta experiencia, el AQuAS ha desarrollado una propuesta de indicadores para evaluar la atención a la cronicidad en el marco de la estrategia para el abordaje de la cronicidad del Sistema Nacional de Salud, publicado recientemente.  De este estudio surgieron un conjunto de indicadores considerados clave para la evaluación, entre los que se repetían algunos anteriormente priorizados como la polimedicación, los reingresos y las hospitalizaciones evitables, aunque también se incorporaron nuevos indicadores más relacionados con la vivencia de los pacientes, como la valoración de la calidad de vida de los pacientes y los cuidadores, o de los estilos de vida de los pacientes (ver Tabla 2).

Tabla 2: Propuesta de indicadores priorizados para la promoción de la medición de forma homogénea al conjunto del Sistema Nacional de Salud para la evaluación de las estrategias de atención a la cronicidad

indicadors-2-paint-sp-2
Posteriormente, a partir de 2014 y por encargo del Institut Català d’Assistència i Serveis Socials (ICASS – Dpt. Benestar Social i Família) y del PPAC (Dept.  Salut), se ha trabajado extensamente en la evaluación de modelos colaborativos de atención social y sanitaria en Cataluña. Estos modelos no solo toman en consideración los distintos niveles salariales del sistema sanitario sino que suman los servicios sociales, pieza clave en la asistencia a este tipo de enfermos. Los objetivos del proyecto eran describir la organización y el funcionamiento de estas experiencias colaborativas, identificar barreras y facilitadores, proponer un marco conceptual de evaluación y definir un conjunto de indicadores válidos en este contexto a partir de los discursos de los participantes y la experiencia en estudios previos de evaluación. Los indicadores propuestos siguen teniendo en cuenta los indicadores clásicos pero se consolida la evaluación que incluye el punto de vista de las personas, no solo del paciente, sino también de los cuidadores y de los profesionales, y pone énfasis en la evaluación de estas acciones coordinadas de los servicios sociales y sanitarios. Por ejemplo, considerando la evitación de procesos duplicados o la realización de intervenciones conjuntas de atención social y sanitaria.

También cabe destacar, en esta línea, el trabajo que está realizando el FORUM ITESS (Forum de la innovació, transformació i excel·lència en els serveis socials i de salut) para definir el marco de evaluación común social y sanitario con propuesta de indicadores (línea L6) y en que también participa el AQuAS junto con otros profesionales de diversos ámbitos. El FORUM es una herramienta que debe facilitar el debate conceptual necesario para la transformación de los modelos de atención social y sanitaria actuales en favor de un nuevo modelo de atención integrada.

Finalmente, dentro de este área de evaluación de la integración de los servicios sanitarios y sociales, el AQuAS participa desde 2015 en el proyecto del programa europeo Horizon2020 SUSTAIN (Sustainable tailored integrated care for older people in Europe). Este proyecto europeo pretende comparar, evaluar e implementar estrategias de mejora en distintas experiencias de atención integrada dirigida a gente mayor no institucionalizada, es decir, que residen en sus domicilios. Asimismo, se persigue el objetivo de asegurar que las mejores iniciativas de atención integrada en este ámbito sean aplicables y adaptables a otros sistemas sanitarios y otras regiones europeas. En este proyecto se trabajará de forma simultánea en 7 países europeos en base a la definición e implementación de un conjunto de indicadores pendientes de definir ajustado a este tipo de población y de enfoque integrador.

Así pues, los indicadores son herramientas útiles para evaluar un ámbito tan extenso y complejo como el de la cronicidad, y pueden aplicarse desde perspectivas más o menos amplias, es decir, teniendo en cuenta solo los distintos niveles asistenciales del sistema sanitario, o incluyendo también los servicios sociales. Los resultados obtenidos de la implementación de los indicadores permitirá que los profesionales cuenten con unos criterios objetivos sobre la calidad de sus intervenciones, facilitando la identificación de las fortalezas de los programas de atención a la cronicidad, así como las áreas de mejora.

Entrada elaborada por Noemí Robles, Laia Domingo y Mireia Espallargues. Àrea d’Avaluació, AQuAS.

Indicadors per a l’avaluació de l’atenció a la cronicitat

10 nov.

En un post anterior parlàvem dels avantatges d’utilitzar indicadors en l’avaluació dels serveis sanitaris. Des de l’AQuAS, ja fa temps que s’està aplicant l’ús d’indicadors per avaluar  diferents processos i àmbits assistencials, sent una de les àrees principals d’interès l’avaluació de nous models i programes d’atenció als pacients crònics. Les intervencions en el camp de l’atenció a la cronicitat són extremadament complexes ja que es caracteritzen per la concurrència de múltiples actors i nivells assistencials i per diversos components amb una intensitat molt variable en l’ús dels instruments terapèutics i tecnològics. A més, la seva efectivitat està sovint vinculada a aspectes contextuals, la qual cosa dificulta atribuir l’efecte a un component particular del programa. Llavors, tenint en compte aquest nivell de complexitat, caldria preguntar-nos: per a què l’ús d’indicadors en aquest cas? La resposta és que aquests indicadors ens poden aportar una sèrie de beneficis respecte a altres aproximacions avaluatives, com són:

  • Incorporar l’opinió i el consens dels professionals
  • La possibilitat d’incloure indicadors d’estructura i procés permetent obtenir un coneixement de l’entorn i la realitat en què s’està duent a terme la iniciativa
  • Facilitar un tipus d’avaluació més accessible i comprensible per als professionals
  • Més simplicitat i rapidesa en l’avaluació i obtenció de resultats
  • Possibilitat de definir estàndards
  • Permetre establir comparacions i objectivar tendències
  • Identificar aquelles característiques o factors d’èxit que ens puguin definir quins models són més efectius, per a quins grups de pacients crònics, en quin context i amb quin cost

El primer projecte en què l’AQuAS va començar a utilitzar els indicadors de qualitat assistencial per a l’avaluació de la cronicitat es va iniciar el 2012 amb l’encàrrec del Programa de Prevenció i Atenció a la Cronicitat (PPAC) de definir un conjunt d’indicadors que permetessin avaluar la qualitat dels programes integrats d’atenció a la cronicitat de l’àmbit sanitari, entenent per integrats aquells programes en què participen de forma coordinada diferents nivells assistencials.  Seguint la metodologia descrita en el post anterior (revisió bibliogràfica, establiment d’un marc teòric i opinió dels experts) es van obtenir un total de 18 indicadors, principalment de resultats intermedis i finals, que els experts van considerar com a rellevants i factibles per avaluar aquest tipus de programes i que actualment estan en fase d’implementació (veure taula 1 i web).

Taula 1: Indicadors valorats com a rellevats i factibles per a  l’avaluació dels programes integrats d’atenció a la cronicitat

indicadors-2-paint

A partir d’aquesta experiència, l’AQuAS ha desenvolupat una proposta d’indicadors per avaluar l’atenció a la cronicitat en el marc de l’estratègia per a l’abordatge de la cronicitat del Sistema Nacional de Salud, publicat recentment. Fruit d’aquest treball van sorgir un conjunt d’indicadors considerats clau per a l’avaluació entre els quals es repetien alguns anteriorment prioritzats com ara la polimedicació, els reingressos i les hospitalitzacions evitables, però se n’incorporen de nous més relacionats amb la vivència dels pacients, com la valoració de la qualitat de vida dels pacients i cuidadors, o dels estils de vida dels pacients (veure Taula 2).

Taula 2: Proposta d’indicadors prioritzats per a la promoció de la medició de forma homogènia al conjunt del Sistema Nacional de Salud per a l’avaluació de les estratègies d’atenció a la cronicitatindicadors-2-paint-2

Posteriorment, a partir de 2014 com a encàrrec de l’Institut Català d’Assistència i Serveis Socials (ICASS – Dpt. Benestar Social i Família) i del PPAC (Dept.  Salut), s’ha treballat extensament en l’avaluació de models col·laboratius d’atenció social i sanitària a Catalunya. Aquests models no només consideren els diferents nivells assistencials del sistema sanitari sinó que afegeixen els serveis socials, peça clau en l’assistència a aquest tipus de malalts. Els objectius del projecte eren descriure l’organització i funcionament d’aquestes experiències col·laboratives, identificar barreres i facilitadors, proposar un marc conceptual d’avaluació i definir un conjunt d’indicadors vàlids en aquest context a partir dels discursos dels participants i l’experiència en estudis previs d’avaluació. Els indicadors proposats continuen tenint en compte els indicadors clàssics però es consolida l’avaluació que inclou el punt de vista de les persones, no només del pacient, sinó també dels cuidadors i dels professionals, i fent èmfasi en l’avaluació d’aquestes accions coordinades dels serveis socials i sanitaris, per exemple considerant l’evitació de processos duplicats o la realització d’intervencions conjuntes d’atenció social i sanitària.

Destacar també en aquesta línia el treball que s’està fent en el FORUM ITESS (Forum de la innovació, transformació, i excel·lència en els serveis socials i de salut) per definir un marc d’avaluació comú social i sanitari amb proposta d’indicadors (línia L6) i en què l’AQuAS també participa conjuntament amb altres professionals de diversos àmbits. El Fòrum és una eina que ha de facilitar el debat conceptual necessari per a la transformació dels models d’atenció social i sanitària actuals en favor d’un nou model d’atenció integrada.

Finalment, seguint amb aquesta àrea d’avaluació de la integració dels serveis sanitaris i socials, l’AQuAS participa des de 2015 en el projecte del programa europeu Horizon2020 SUSTAIN (Sustainable tailored integrated care for older people in Europe). Aquest projecte europeu pretén comparar, avaluar i implementar estratègies de millora en diferents experiències d’atenció integrada adreçades a gent gran no institucionalitzada, és a dir, que resideixen als seus domicilis. Així mateix, es busca l’objectiu d’assegurar que les millors iniciatives d’atenció integrada en aquest àmbit siguin aplicables i adaptables a d’altres sistemes sanitaris i regions europees. En aquest projecte es treballarà de forma simultània en 7 països europeus en base a la definició i implementació d’un conjunt d’indicadors pendents de definir ajustat a aquest tipus de població i d’enfocament integrador.

Així doncs, els indicadors són eines útils per avaluar un àmbit tan extens i complex com el de la cronicitat, i poden ser aplicats des de perspectives més o menys àmplies, és a dir, tenint en compte només els diferents nivells assistencials del sistema sanitari, o incloent també els serveis socials. Els resultats obtinguts de la implementació dels indicadors permetrà als professionals comptar amb uns criteris objectius sobre la qualitat de les seves intervencions, facilitant la identificació de les fortaleses dels programes d’atenció a la cronicitat, així com les àrees de millora.

Entrada elaborada per Noemí Robles, Laia Domingo i Mireia Espallargues. Àrea d’Avaluació, AQuAS.

Alrededor de la cronicidad

2 set.

Si pensamos en los retos de la medicina actual es fácil que pensemos en la forma como los sistemas de salud y la sociedad en general deben adaptarse a un nuevo tipo de enfermo de edad avanzada, con varias enfermedades, alguna enfermedad mental o algun trastorno degenerativo, más o menos apoyo familiar y muchos medicamentos prescritos. Si este tema nos interesa, recomendamos mucho este recorrido vital y conceptual escrito por el economista Lluís Bohígas para entender dónde estamos y hacia dónde vamos y, sobretodo, el lugar que ocupa y que ocupará la atención a la cronicidad dentro del sistema de salud.

Un reto importante en esta línea (y que entre muchos otros elementos tambien puede integrar aspectos de cronicidad) es la atención integrada, espacio donde se trata de facilitar la relación de un individuo con los diferentes sistemas de atención considerando no sólo el punto de vista de la salud sinó tambien el punto de vista social. Aprovechando los temas desarrollados en la conferencia internacional sobre atención integrada en su XVI edición que tuvo lugar en Barcelona el pasado mes de mayo, se pone encima de la mesa la idea que la atención integrada puede representar el camino para afrontar los retos del envejecimiento de nuestras poblaciones.

Normalmente identificamos cronicidad y envejecimiento pero las patologías crónicas tambien pueden afectar a la infancia. El Hospital Sant Joan de Déu de Barcelona puso en funcionamiento en el 2012 un programa innovador de cronicidad infantil conocido como el proyecto PRINCEP (Plataforma de Respuesta Integral a los Niños con Enfermedades Crónicas y Elevada Dependencia, por sus siglas en catalán Plataforma de Resposta Integral als Nens amb Malalties Cròniques i Elevada Dependència). Este programa ha estado premiado recientemente por el Observatorio de Innovación en Gestión de la Sanidad en Catalunya.

Los ámbitos de atención a la cronicidad y de atención integrada conviene evaluarlos para comprovar que están bien dirigidos, es decir, que sus programas son efectivos, eficaces y adecuados. El uso de indicadores es una herramienta de evaluación. Un indicador es un instrumento de medida que se utiliza para evaluar o medir aspectos concretos de calidad. En el ámbito de la evaluación de la calidad asistencial es habitual hablar de indicadores de salud y éste es el tema del post metodológico sobre la construcción y el desarrollo de indicadores para la evaluación de la calidad de los servicios sanitarios.

Metodología Construcción Indicadores

Un valor añadido en la definición de indicadores es contar con una fuerte participación de expertos. La identificación de indicadores favoreciendo la participación a través de una metodología de consenso online es lo que facilita la aplicación tecnológica Health Consensus, usada justamente en el contexto de cronicidad.

El uso de indicadores de salud con el acento puesto en la atención a enfermedades crónicas y en la atención integrada es una de las líneas de trabajo de la Agència de Agència de Qualitat i Avaluació Sanitàries de Catalunya (AQuAS) que próximamente trataremos con más profundidad desde el blog AQUAS.

Al voltant de la cronicitat

2 set.

Si pensem en quins són els reptes de la medicina actual és fàcil que pensem en com els sistemes de salut i la societat en general han d’adaptar-se a un nou tipus de malalt d’edat avançada, amb diverses malalties, alguna malaltia mental o algun trastorn degeneratiu, més o menys suport familiar i molts medicaments prescrits. Si aquest tema ens interessa, recomanem molt aquest recorregut vital i conceptual escrit per l’economista Lluís Bohígas per entendre on som i cap a on anem i, sobretot, el lloc que ocupa i que ocuparà l’atenció a la cronicitat dins del sistema de salut.

Un repte important en aquesta línia (i que entre molts altres elements també pot integrar aspectes de cronicitat) és l’atenció integrada on es tracta de facilitar la relació d’un individu amb els diferentes sistemes d’atenció tenint en compte no només el punt de vista de la salut sinó també el social. Aprofitant els temes desenvolupats en la conferència internacional sobre atenció integrada en la seva XVI edició que va tenir lloc a Barcelona el passat mes de maig, es posa damunt de la taula la idea que l’atenció integrada pot representar el camí per afrontar els reptes de l’envelliment de les nostres poblacions.

Normalment identifiquem cronicitat i envelliment però les patologies cròniques també poden afectar la infància. L’Hospital Sant Joan de Déu van posar en marxa el 2012 un programa innovador de cronicitat infantil anomenat projecte PRINCEP (Plataforma de Resposta Integral als Nens amb Malalties Cròniques i Elevada Dependència). Aquest programa ha estat premiat recentment per l’Observatori d’Innovació en Gestió de la Sanitat a Catalunya.

Els àmbits d’atenció a la cronicitat i d’atenció integrada convé avaluar-los per comprovar que estan ben adreçats, és a dir que els seus programes són efectius, eficaços i adequats. L’ús d’indicadors és una eina d’avaluació. Un indicador és un instrument de mesura que s’utilitza per avaluar o mesurar aspectes concrets de qualitat. En l’àmbit de l’avaluació de la qualitat assistencial sovint es parla d’indicadors de salut i aquest és el tema d’aquest post metodològic sobre la construcció i el desenvolupament d’indicadors per a l’avaluació de la qualitat de serveis sanitaris.

Metodologia Construcció Indicadors

Un valor afegit en la definició d’indicadors és comptar amb una forta participació d’experts. La identificació d’indicadors afavorint la participació mitjançant una metodologia de consens online és el que facilita l’aplicació tecnològica Health Consensus, usada justament en el context de cronicitat.

L’ús d’indicadors de salut amb l’accent posat en l’atenció a malalties cròniques i en l’atenció integrada és una de les línies de treball de l’Agència de Agència de Qualitat i Avaluació Sanitàries de Catalunya (AQuAS) que properament tractarem amb més profunditat.

Indicators for the health services assessment

4 febr.

What are indicators and how to set them?

In the clinical evaluation field, specifically for health care, an indicator in an instrument used to measure or assess specifici aspects of quality of care, and ultimately, the improvement of quality: assessment to improve.

The methodology used for creating or developing health indicators is distinct in that it combines different methodologies. In the first place, when elaborating indicators, the standard and most recommended procedure is to begin with a conceptual framework of reference, as this provides the premise for reflecting aspects of assessment, dimension, attributes, key areas of care specific to the field of study, as well as the target population. Moreover, the process of defining indicators takes into consideration two sources: scientific evidence experience and expert opinion.

A literature review enables authors to take into consideration scientific evidence and experience in the use of the indicator. A review of the scientific evidence ensures the validity of both the construct, (the indicator measures the intended target), as well as the guidelines (there is close correlation between an indicator and the outcome or another measure considered the gold standard). In addition, previous experience in the application of an indicator provides some basis as to its acceptability or use thereof. Generally, users find an indicator helpful if variations in the values it presents are ​​due to changes in the quality of care, and vice versa.

As far as expert opinion is concerned, it is important to highlight the advantages to using consensus methods during the process of identification and selection of indicators, a highly participative course of action. In general, the process is based on a consensus-centred approach (i.e., a group of professional experts which may, in addition, incorporate opinions from a group of patients and users), which is subsequently extended to a larger body of associated groups. Thus, the involvement of a significant number of participants in reaching a consensus on indicators reinforces the embeddedness of the assessment strategy and collective responsibility, furthering the eventual adoption and implementation of the indicators.

Figure 1. Combination of methodologies for developing indicators

Methodologies Developing Indicators

How to implement indicators?

Once the indicators have been defined, there are several different approaches to their implementation. These include performance analysis and comparison between units of analysis, or benchmarking, whether this refers to organizations, centres, services, teams or professionals. The first approach seeks to analyse the relationship between health outcomes (in quantity and quality) and the resources utilized, in other words, the value of health care. The objective is to identify the gap between what might be achieved using existing technology and resources (efficiency, the maximum achievable potential), and what is actually being achieved (effectiveness), adjusted due to the available resources and other variables which impact the outcome.

Figure 2. An example of mapping indicators used to analyse performance. In this case, the graph maps the ratio of observed/expected cases for the indicator subject to the study for Basic Healthcare Areas (ABS, as per the Catalan acronym).

Mapping

Source: Metodologia dels atles de variacions en la pràctica mèdica del SISCAT. Atles de variacions del SISCAT, número 0. Barcelona: Agència de Qualitat i Avaluació Sanitàries de Catalunya. Departament de Salut. Generalitat de Catalunya; 2014.

Finally, if the process is taken to the next level, we find ourselves in the realms of benchmarking, which allows us to make a comparative assessment. Basically, this involves using any product, service or work process within an organisation and which manifest best practises in the area of interest and using it as “comparator” or benchmark. The objective of this process is to transmit information regarding best practices and their implementation.

Figure 3. Sample mapping of an indicator used to make comparisons between units of analysis (benchmarking)

Comparisons

Source: Metodologia dels atles de variacions en la pràctica mèdica del SISCAT. Atles de variacions del SISCAT, número 0. Barcelona: Agència de Qualitat i Avaluació Sanitàries de Catalunya. Departament de Salut. Generalitat de Catalunya; 2014.

Post written by Mireia Espallargues, Noemí Robles and Laia Domingo.

 

Indicadores para la evaluación de los servicios sanitarios

4 febr.

¿Qué son y como se definen los indicadores?

En el ámbito de la evaluación clínica y, concretamente de la calidad asistencial, un indicador es un instrumento de medida que se utiliza para evaluar o medir aspectos concretos de la calidad de la atención y, a partir de diversas estrategias de análisis, lo que se busca en última instancia es la mejora de la calidad: evaluar para mejorar.

La metodología que se utiliza para la construcción o el desarrollo de indicadores de salud destaca por la combinación de diferentes metodologías. Para empezar, en el momento de elaborar los indicadores, es habitual y recomendable partir de un marco conceptual de referencia, de modo que puedan quedar reflejados aspectos sobre el enfoque de la evaluación, las dimensiones, atributos, áreas y aspectos clave de la atención propios del ámbito de estudio, así como la población diana. Por otra parte, en el proceso de definición de los indicadores se pueden tener en cuenta dos fuentes: la evidencia científica y la opinión de los expertos.

La revisión de la bibliografía permite tener en cuenta la evidencia científica disponible y la experiencia previa en el uso del indicador. La revisión de la evidencia científica asegura la validez, tanto de constructo (el indicador mide lo que tiene por objetivo medir) como de criterio (el indicador se correlaciona fuertemente con un resultado final o con otra medida que se considera el método de referencia –gold standard). Además, la experiencia previa en el uso de ese indicador en concreto aporta conocimiento sobre su aceptabilidad o utilidad. En general, a los usuarios les parece útil el indicador si las variaciones en sus valores son debidas a cambios en la calidad asistencial y viceversa.

Respecto a la opinión del expertos, cabe destacar las ventajas que aporta el uso de técnicas de consenso durante el proceso de identificación y selección de los indicadores, una metodología de trabajo altamente participativa. Habitualmente se parte de un consenso más focalizado (por ejemplo, un grupo de profesionales expertos que se puede acompañar también de la opinión de un grupo pacientes y usuarios) para extenderse posteriormente a un grupo más amplio de colectivos relacionados. Así, la implicación de un número importante de participantes en el consenso de los indicadores refuerza la incrustación (embededness) de la estrategia evaluativa y la corresponsabilización, facilitando la adopción y la utilización final de los indicadores.

Figura 1. Combinación de metodologías para la construcción de indicadores

Metodología Construcción Indicadores

¿Cómo se implementan?

Una vez definidos los indicadores contamos con diferentes abordajes para su implementación. Entre ellos encontramos el análisis del desempeño (performance en inglés) y la comparación entre unidades de análisis (benchmarking en inglés), ya se trate de organizaciones, centros, servicios, equipos o profesionales. En el primer caso se busca analizar la relación entre las ganancias en salud (en cantidad y calidad, los outcomes) y los recursos empleados, es decir, el valor de la atención sanitaria. La idea es conocer la distancia (o el gap) que hay entre lo que se puede conseguir con la tecnología y los recursos actuales (eficacia, el máximo potencial) y lo que realmente se está consiguiendo (efectividad), ajustado por los recursos disponibles y otras variables que influyen sobre el resultado.

Figura 2. Ejemplo de representación gráfica de indicadores utilizados para hacer análisis de desempeño (performance). En este caso se trataría de un mapeado por áreas básicas de salud (ABS) de las razones de casos observados/esperados del indicador objeto de estudio.

Mapeado

Fuente: Metodologia dels atles de variacions en la pràctica mèdica del SISCAT. Atles de variacions del SISCAT, número 0. Barcelona: Agència de Qualitat i Avaluació Sanitàries de Catalunya. Departament de Salut. Generalitat de Catalunya; 2014.

Finalmente, si damos un paso más allá encontraríamos el benchmarking, que nos sirve para hacer evaluaciones comparativas. Básicamente, consiste en utilizar como “comparadores” o benchmarks aquellos productos, servicios o procesos de trabajo que pertenecen a organizaciones y que evidencien las mejores prácticas sobre el área de interés, con el propósito de transferir el conocimiento de las mejores prácticas y su aplicación.

Figura 3. Ejemplo de representación gráfica de un indicador utilizado para hacer comparaciones entre unidades de análisis (benchmarking).

Comparacions entre unitats d'anàlisi

Fuente: Metodologia dels atles de variacions en la pràctica mèdica del SISCAT. Atles de variacions del SISCAT, número 0. Barcelona: Agència de Qualitat i Avaluació Sanitàries de Catalunya. Departament de Salut. Generalitat de Catalunya; 2014.

Entrada elaborada por Mireia Espallargues, Noemí Robles y Laia Domingo.

 

 

Indicadors per a l’avaluació dels serveis sanitaris

4 febr.

Què són i com es defineixen els indicadors?

En l’àmbit de l’avaluació clínica, i concretament de la qualitat assistencial, un indicador és un instrument de mesura que s’utilitza per avaluar o mesurar aspectes concrets de la qualitat de l’atenció, i, a través de diverses estratègies d’anàlisi, que el que es busca en darrera instància és la millora de la qualitat: avaluar per a millorar.

La metodologia que s’utilitza per a la construcció o desenvolupament d’indicadors per l’avaluació de la qualitat dels serveis destaca per la combinació de diferents metodologies. Per començar, a l’hora d’elaborar els indicadors, és habitual i recomanable partir d’un marc conceptual de referència, de forma que en aquest hi puguin quedar reflectits aspectes sobre l’enfocament de l’avaluació, les dimensions, atributs, àrees i aspectes clau de l’atenció propis de l’àmbit d’estudi, així com la població diana. Per altra banda, en el procés de definició dels indicadors es poden tenir en compte dues fonts: l’evidència científica i l’opinió dels experts.

La revisió de la bibliografia permet tenir en compte l’evidència científica disponible i l’experiència prèvia en l´ús de l’indicador. La revisió de l’evidència científica assegura la validesa, tant de constructe (l’indicador mesura el que té per objectiu mesurar), com de criteri (l’indicador es correlaciona fortament amb un resultat final o una altra mesura que es considera el mètode de referència –gold standard). A més, l’experiència prèvia en l’ús d’un indicador en concret aporta coneixement sobre l’acceptabilitat o utilitat del mateix. En general, als usuaris els sembla útil l’indicador si variacions en els seus valors són deguts a canvis en la qualitat assistencial i a l’inversa.

Respecte a l’opinió del experts, cal destacar els avantatges que aporta l’ús de tècniques de consens durant el procés d’identificació i selecció dels indicadors, una metodologia de treball altament participativa. Habitualment es parteix d’un consens més focalitzat (per exemple, un grup de professionals experts que es pot acompanyar de l’opinió també d’un grup pacients i usuaris) per estendre’s posteriorment a un grup més ampli de col·lectius relacionats. Així, la implicació d’un nombre important de participants en el consens dels indicadors reforça la incrustació (embededness) de l’estratègia avaluativa i la corresponsabilització, facilitant l’adopció i la utilització final dels mateixos.

Figura 1. Combinació de metodologies per a la construcció d’indicadors

Metodologia Construcció Indicadors

Com s’implementen?

Un cop definits els indicadors comptem amb diferents abordatges per a la seva implementació. Entre ells trobem l’anàlisi de l’acompliment (desempeño en castellà i performance en anglès) i la comparació entre unitats d’anàlisi (benchmarking en anglès) ja siguin aquestes organitzacions, centres, serveis, equips o professionals. En el primer cas es busca analitzar la relació entre els guanys en salut (en quantitat i qualitat, els outcomes) i els recursos emprats, és a dir, el valor de l’atenció sanitària. La idea és conèixer la distància (o el gap) que hi ha entre el que es pot aconseguir amb la tecnologia i els recursos actuals (eficàcia, el màxim potencial) i el que realment s’està aconseguint (efectivitat), ajustat pels recursos disponibles i altres variables que influeixen sobre el resultat.

Figura 2. Exemple de representació gràfica d’indicadors utilitzats per fer anàlisi d’acompliment (performance). En aquest cas es tractaria d’un mapejat per àrees bàsiques de salut (ABS) de les raons de casos observats/esperats de l’indicador objecte d’estudi.

MapejatFont: Metodologia dels atles de variacions en la pràctica mèdica del SISCAT. Atles de variacions del SISCAT, número 0. Barcelona: Agència de Qualitat i Avaluació Sanitàries de Catalunya. Departament de Salut. Generalitat de Catalunya; 2014.

Finalment, si fem un pas més enllà trobaríem en el benchmarking, que ens serveix per fer avaluacions comparatives. Bàsicament, consisteix en utilitzar com a “comparadors” o benchmarks aquells productes, serveis o processos de treball que pertanyen a organitzacions i que evidenciïn les millors pràctiques sobre l’àrea d’interès, amb el propòsit de transferir el coneixement de les millors pràctiques i la seva aplicació.

Figura 3.Exemple de representació gràfica d’un indicador utilitzat per fer comparacions entre unitats d’anàlisi (benchmarking)

Comparacions entre unitats d'anàlisi

Font: Metodologia dels atles de variacions en la pràctica mèdica del SISCAT. Atles de variacions del SISCAT, número 0. Barcelona: Agència de Qualitat i Avaluació Sanitàries de Catalunya. Departament de Salut. Generalitat de Catalunya; 2014.

Entrada elaborada per Mireia Espallargues, Noemí Robles i Laia Domingo.