Tesis:
A holistic approach to assess the feasability of telehealth for Parkinson's disease management
- Autor: CANCELA GONZÁLEZ, Jorge
- Título: A holistic approach to assess the feasability of telehealth for Parkinson's disease management
- Fecha: 2016
- Materia: Sin materia definida
- Escuela: E.T.S. DE INGENIEROS DE TELECOMUNICACION
- Departamentos: TECNOLOGIA FOTONICA Y BIOINGENIERIA
- Acceso electrónico: http://oa.upm.es/43010/
- Director/a 1º: ARREDONDO WALDMEYER, María Teresa
- Director/a 2º: HURTADO MORENO, Olivia
- Resumen: This work of thesis has been entitled “A holistic approach to assess the feasibility of telehealth for Parkinson’s disease management” since it is aimed at exploring the feasibility of telehealth, understanding it as the use of technology and related services to deliver a disease management at distance, to provide a tool for the management of Parkinson’s disease (PD). The term holistic has been incorporated in the title since it tried to cover not only the feasibility of developing the appropriate technology for the continuous monitoring and assessment of the disease remotely and in unsupervised environment, i.e. at patients’ homes, but also because it covers the feasibility study from a wider perspective by incorporating the analysis of human factors and Health Technology Assessment (HTA). These two topics are aimed at incorporating the perspective and views of the patients and health experts and provide data for policy-makers, health care managers but also to the developers and researchers about the potential uptake of telehealth for Parkinson’s disease in the current clinical practice. This work was framed within the European project PERFORM, on this research project a Body Area Network (BAN) of wearable sensors was designed and developed for the automatic detection and quantification of the motor symptoms of PD which was then transmitted to a hospital platform also developed within the project. There, the motor assessment was analysed together with other sources of information also collected with the PERFORM system at patients’ homes such as food and drug intakes. Finally, all this information provided clinicians with suggestions about treatment modification when needed. On this context, the research work presented on this thesis is divided into three independent parts. The first part covers the use of the raw data collected with the BAN for the automatic assessment of the bradykinesia and the gait disturbances. On this regards, two different methodologies that have been previously explored on supervised environments were explored to be translated in the context of a home telehealth platform. In the gait case, the inverted pendulum model was used to estimate different gait features such as velocity, step frequency and step length. Other metrics like arm swing and entropy were also extracted. The feasibility study tried to explore whether the proposed BAN was feasible for the implementation of such algorithms. For the bradykinesia case, a different non-linear approach was followed, specifically machine learning has been used, exploring diverse configurations in order to find about the best setup for bradykinesia assessment, then a meta-analysis methodology was proposed to improve the outcomes of the machine learning algorithms. The results presented for the bradykinesia assessment showed the best outcomes taking the signals coming from wrist sensor as input while the subject was performing some hand movement, on this case the accuracy of the classifier achieved up to 86.48% of correct classified instances. The accuracy in the bradykinesia severity detection while the subjects were walking was slightly lower (ranging from 70.83% to 75%). In all the cases, the combination of the rms+range features showed the better performance. Using the proposed meta-analysis method an average of 74.4% of agreement between the clinical examination and the system outcomes was achieved, ranging from 91.9% to a 48.8%. To study the gait performance, SampEn was evaluated as a metric to characterize the degradation of the gait performance confronting PD patients and healthy subjects, the values of SampEn were significantly different and provide useful information especially in the waist sensor (p<0.01) and the left arm (p<0.01), right arm (p=0.05). Regarding the estimation of the gait features for PD, the mean error of Step frequency, Stride Length and Speed, calculated on 30 trials and 10 subjects are respectively: 3.36%±2.57, 7.31%±4.69, and 7.77%±5.34. The average data loss satisfied that in all cases more than 95% of the data is successfully transmitted. Nevertheless, analysing the average burst length and the standard deviation of these values we found burst of up to 143.04±240.10ms. A burst of these characteristics in the middle of the transmission would compromise seriously the performance and accuracy of the system. Nevertheless, adding the most frequent burst length as an extra measure and observing the raw data we can easily identify that 64ms is the most common burst in all the cases, moreover the longest bursts are always at the beginning of the session i.e. during the start-up process. That means that waiting for all the sensors to be properly connected before start computing the gait features will remove the longest burst errors. The second part of this thesis addresses the human factors related to the use of a telehealth platform for PD. Particularly, the work encompassed on this thesis describes a methodological approach to extract and analyse the PD patients feedback regarding the wearability of the PERFORM system. A combination of several methodologies already validated have been emplaced, specifically the REBA, Borg and CRS scales have been used in combination with a body map when needed. A total of 32 PD patients have been involved in this study showing an excellent acceptance of the PERFORM system in wearability terms. The overall result of the evaluation can be broken down in the subsequent marks: average perceived exertion score (0.71 on the Borg CR-10 scale), average posture score (0 based on the REBA scale), average localized pain/discomfort score (0.11 on the Borg CR-10 scale), average emotion score (1.4 on the CRS scale), average attachment score (2.5 on the CRS scale), average harm score (0.15 on the CRS scale), average perceived change score (0.67 on the CRS scale), average movement score (0.59 on the CRS scale) and average anxiety score (1.63 on the CRS scale). Each individual component of the wearability assessment can be labelled as low level of effect according to the guidelines provided by each of the methodologies. Finally, the last part of the thesis is aimed at identifying tools available and viable to carry out an early HTA on telehealth systems for Parkinson’s disease (PD) management and apply such methodologies to assess the PERFORM system as a case of study. The whole chapter is divided in two parts addressing two complementary works which try to provide two complementary points of view. The first part is aimed at identifying the elements that a telehealth system for PD management should satisfy to be effective and aligned with the users’ needs as well as to understand if clinicians and technicians share a common opinion when evaluating these systems. Instead, the second part provides a methodology to estimate the potential economic impact, in terms of cost-effectiveness, of a real implementation of telehealth systems for PD management. After the exploration of the available tools for early HTA two methodologies were selected. The first one, called Analytic Hierarchy Process (AHP), allows the elicitation of the user needs and the definition of a framework for the evaluation of telehealth solutions for Parkinson’s disease patients. 16 experts in the domain both with clinical and technical background were involved in the study. The second part of the chapter explores how the use of Markov models with a minimal number of states were used to perform “what-if” and finally, to simulate and estimate potential scenarios for the economic impact, in terms of cost-effectiveness, of a telehealth platform. Then, this approach was used to estimate the potential cost-effectiveness of the PERFORM project. Finally, a sensitivity analysis will be carried out. According to the results of the responders, the three most important user needs are Increase the wearability acceptance (0.102), Increase the self-management support (0.093) and On/Off fluctuations detection (0.085), based on the values from the Global Weights (GW). In a second level of importance were found Increase patient & carers knowledge (0.080), Assist care givers (0.070), User-friendly interfaces (0.068), Motor symptoms assessment (0.064) and Increase patient Quality of Life (0.063). The agreements between the responders of the technical and clinical groups showed a significant correlation between both, ρ = 0.590 (p=0.012). Regarding the use of Markov modelling, six general “what-if” scenarios were simulated providing a general overview of how inputs variations could impact the ICER values. These scenarios provide a quantitative reference framework for any health technology related to Parkinson’s disease and could be useful to understand and to orientate the research, particularly in early stages of development, towards an efficient cost-effectiveness path. Then, the PERFORM system was used as case of study with the Markov analysis. It was confronted with the base case and the cumulative costs and QALYs were calculated for each one and the ICER was calculated at year 5. The ICER values estimated by the model are 6397.36 for the societal perspective and 8977.20 for the third party perspective. These values suggest that PERFORM will not be a cost-saving technology (positive ICER) but these values are below most of the ICER thresholds commonly accepted worldwide (10,000€/QALY). Finally, by placing the PERFORM innovation from the societal and third party perspective in the ΔQALY-ΔC plane it was possible to see the margin in incremental cost to the different ICER thresholds. Taking the 30,000€/QALY as reference, the PERFORM system has a margin of 20855.28€ incremental cost in the societal perspective and 18575.73€ incremental cost in the third party perspective. A sensitivity analysis was also performed to explore the robustness of the results and the limitations of this approach were properly identified. Resumen Este trabajo de tesis ha sido titulado “A holistic approach to assess the feasibility of telehealth for Parkinson’s disease management” ya que pretende abordar la viabilidad de utilizar una plataforma de telesalud, definiendo esta como el uso de la tecnología y los servicios asociados a ella para la gestión de una enfermedad de forma remota, con el fin de proveer una herramienta que permita la gestión de la Enfermedad de Parkinson (EP). El término holístico ha sido incorporado en el título ya que este trabajo pretende cubrir no solo la viabilidad del desarrollo de la tecnología apropiada para la continua monitorización y evaluación de la enfermedad de forma remota y en un entorno no supervisado, esto es, en la propia casa de los pacientes, sino que también pretende estudiar la viabilidad desde una perspectiva más amplia incorporando un análisis de factores humanos y Health Technology Assessment (HTA). Estos dos temas pretenden incorporar el punto de vista de los pacientes y los expertos y proporcionar la información necesaria a los responsables de la elaboración de políticas y regulaciones, así como a los gestores, desarrolladores e investigadores sobre el potencial de dicha tecnología para ser realmente incorporada a la práctica clínica. Este trabajo está enmarcado dentro del proyecto europeo PERFORM. En dicho proyecto, una Body Area Network (BAN) de sensores vestibles fue diseñada y desarrollada para la detección automática y cuantificación de los síntomas motores de la EP, que después eran enviados a un módulo instalado en el hospital y también desarrollado dentro de dicho proyecto. Allí, la evaluación motora era combinada con otras fuentes de información también recogidas con el sistema PERFORM en la casa de los pacientes como, por ejemplo, información sobre las comidas y los medicamentos. Finalmente, la plataforma para los neurólogos proporcionaba sugerencias acerca de posibles cambios en el tratamiento utilizando un motor de reglas y en función de la información recogida. Basado en esto, el trabajo contenido en esta tesis se puede dividir en tres partes. La primera parte cubre el uso de las señales recogidas con la BAN para la evaluación automática de la bradiquinesia y alteraciones en la marcha. Dos metodologías, previamente validadas en entornos supervisados, fueron empleadas y la viabilidad para trasladarlas a entornos no supervisados fue estudiada. En el caso del estudio de la marcha, se utilizó el modelo del péndulo invertido para estimar diferentes características de la marcha como, por ejemplo, la velocidad, frecuencia de paso y la longitud de paso. Otras métricas como la frecuencia de braceo y la entropía de la señal también fueron calculadas. El estudio de viabilidad se centró en analizar si la BAN propuesta podía calcular dichas características de forma correcta. En el caso de la bradiquinesia, el procesado fue diferente, empleando una aproximación no lineal basada en algoritmos de aprendizaje automático. Después, una meta análisis fue propuesta de cara a mejorar los resultados de los clasificadores. Los resultados muestran que para la evaluación de la bradiquinesia las señales provenientes de los sensores en las muñecas ofrecían los mejores resultados. Concretamente, los clasificadores lograron hasta un 86.4% de instancias correctamente clasificadas. Analizando las señales cuando los sujetos está caminando la precisión es un poco inferior, fluctuando desde un 70.83% hasta un 75%. En ambos casos la combinación de rms+rango fue la que mostró mejores resultados. El meta análisis propuesto logró un 74.4% de acierto tomando como referencia la examinación clínica llevada a cabo por un neurólogo, fluctuando este valor desde un 91.9% hasta un 48.8%. En el estudio de la marcha, la entropía muestreada (SampEn) fue evaluada como una métrica que permitiese caracterizar la degradación de las señales de movimiento. Para ello se compararon muestras recogidas en sujetos sanos y pacientes de la EP, los valores de SampEn mostraron ser significativamente diferentes, especialmente en el caso de las señales provenientes del sensor situado en el cinturón (p<0.01) y en los brazos (p<0.01) y (p=0.05). Sobre la extracción de los parámetros de la marcha, los errores medios para caracterizar la frecuencia de paso, la longitud del paso y la velocidad fueron 3.36%±2.57, 7.31%±4.69 y 7.77%±5.34 respectivamente calculados en 30 muestras de 10 pacientes. Analizando la pérdida de paquetes se encontró que en todos los casos más del 95% de los paquetes fue correctamente transmitido. Un análisis más detallado sobre los errores de transmisión de ráfaga mostró errores de este tipo con una media de 143.04±240.10ms. Este tipo de errores de ráfaga podría comprometer significativamente el buen funcionamiento del sistema. Sin embargo, analizando más en detalle este tipo de errores se observó que el error de ráfaga que con más frecuencia aparecía era de 64ms en todos los casos y los que los errores de ráfaga más largos se encontraban al principio de la sesión, es decir durante la fase de conexión de los sensores. Esto quiere decir que esperar a que todos los sensores están correctamente conectados antes de comenzar con el análisis de los datos elimina los errores de ráfaga más críticos del sistema. La segunda parte de esta tesis se centra en el estudio de los factores humanos en relación con el uso de un sistema de telesalud con pacientes de la EP. Particularmente, el trabajo incluido en esta tesis presenta una metodología para la extracción y análisis del feedback proporcionado por los pacientes en relación con el grado de vestibilidad y aceptación del sistema PERFORM. Una combinación de diferentes metodologías validadas fue utilizada, en concreto las escalas REBA, Borg y CRS fueron empleadas en combinación con un mapa corporal. Un total de 32 pacientes fue involucrado en este estudio. El resultado global de la evaluación fue muy positivo y se puede descomponer en las siguiente valoraciones: esfuerzo percibido medio (0.71 en la escala Borg CR-10), puntuación de postura media (0 basado en la escala REBA), dolor localizado medio (0.11 en la escala Borg CR-10), puntuación media de emoción (1.4 en la escala CRS), puntuación media de atracción (2.5 en la escala CRS), puntuación media de daño (0.15 en la escala CRS), puntuación media de cambio percibido (0.67 en la escala CRS), puntuación media de movimiento (0.59 en la escala CRS) y puntuación media en ansiedad (1.63 en la escala CRS). Cada una de estas puntuaciones individuales fue categorizada como nivel bajo según las guías y trabajos previos. Finalmente, la última parte de la tesis se centra en la identificación de herramientas para llevar cabo una HTA en la fase temprana de desarrollo de un sistema de telesalud para EP y aplicar dichas herramientas para llevar a cabo un estudio utilizando el sistema PERFORM como caso de estudio. Dos herramientas complementarias fueron seleccionadas y empleadas: la primera de ellas trata de identificar de forma metodológica los requisitos que un sistema de telesalud para la gestión de la EP debe presentar para ser efectivo y alineado con las necesidades o requisitos de los usuarios. Este estudio también tenía como objetivo analizar si expertos con un perfil clínico y técnico tienen una visión común sobre cuáles son los requisitos clave de este tipo de tecnología. La segunda parte está centrada en el análisis del potencial económico, en término de coste-efectividad, de este tipo de sistemas. Después de un análisis de las herramientas disponibles, para el primer caso se seleccionó el Analytic Hierarchy Process (AHP) que permitió la extracción de las necesidades de usuario y la definición de un marco de evaluación en función de dichas necesidades. 16 expertos en el campo, tanto con perfil técnico como clínico, participaron en el estudio. Para la segunda parte se empleó un modelo basado en cadenas de Markov para explorar diferentes escenarios y finalmente simular y estimar el potencial impacto económico en cada uno de estos escenarios, en términos de coste-efectividad, para los sistemas de telesalud para EP. Por último, esta herramienta fue empleada para estimar el potencial impacto económico del proyecto PERFORM. Dichos análisis fueron completados con un análisis de sensibilidad. De acuerdo con los resultados de los participantes, los tres requisitos de usuario más importantes son Incrementar la aceptación de los sensores vestibles (0.102), Incrementar el apoyo a la auto-gestión (0.093) y Detección de las fluctuaciones On/Off (0.085), basándonos en los valores de los Global Weights (GW). En un segundo escalón de importancia encontramos Incrementar la educación de pacientes y cuidadores (0.080), Apoyo a los cuidadores (0.070), Interfaces amigables (0.068), Evaluación de los síntomas motores (0.064) e Incremento en la calidad de vida (0.063). Además, las repuestas de los grupos clínicos y técnicos mostraron un alto grado de similitud, ρ = 0.590 (p=0.012). En cuanto al uso de los modelos de Markov, 6 “what-if” escenarios fueron simulados, generando una visión general de cómo las fluctuaciones de los diferentes parámetros de entrada afectan a la salida, esto es, al ICER obtenido gracias a la implementación de una nueva tecnología. Esta información define un marco de referencia que puede ser empleado por cualquier tecnología relacionada con la EP para explorar de forma preliminar los efectos que la adopción de dicha tecnología puede tener en términos de coste-efectividad. A continuación, el sistema PERFORM fue utilizado como caso de estudio empleando el modelo de Markov. Los valores de ICER estimados en el año 5 por el modelo fueron 6397.36 desde la perspectiva social y 8977.20 desde la perspectiva de un tercero. Estos valores sugieren que la adopción del sistema PERFORM no ahorraría dinero (ICER positivo) pero estos valores están por debajo de los umbrales comúnmente aceptados para la adopción de una nueva tecnología (10,000€/QALY). Por último, colocando la innovación propuesta por el sistema PERFORM en un plano ΔQALY-ΔC, es posible calcular el margen del coste incremental que hay con cada uno de los umbrales ICER. Tomando por ejemplo el umbral 30,000€/QALY como referencia, el sistema PERFORM muestra un margen de 20855.28€ de coste incremental desde la perspectiva social y 18575.73€ desde la perspectiva de un tercero. El análisis de sensibilidad fue utilizado para explorar la robustez de los modelos y sus limitaciones.