Disability after encephalitis: development and validation of a new outcome score

Bull World Health Organ. 2010 Aug 1;88(8):584-92. doi: 10.2471/BLT.09.071357. Epub 2010 Apr 19.

Abstract

Objective: To develop a simple tool for assessing the severity of disability resulting from Japanese encephalitis and whether, as a result, a child is likely to be dependent.

Methods: A new outcome score based on a 15-item questionnaire was developed after a literature review, examination of current assessment tools, discussion with experts and a pilot study. The score was used to evaluate 100 children in Malaysia (56 Japanese encephalitis patients, 2 patients with encephalitis of unknown etiology and 42 controls) and 95 in India (36 Japanese encephalitis patients, 41 patients with encephalitis of unknown etiology and 18 controls). Inter- and intra-observer variability in the outcome score was determined and the score was compared with full clinical assessment.

Findings: There was good inter-observer agreement on using the new score to identify likely dependency (Kappa = 0.942 for Malaysian children; Kappa = 0.786 for Indian children) and good intra-observer agreement (Kappa = 1.000 and 0.902, respectively). In addition, agreement between the new score and clinical assessment was also good (Kappa = 0.906 and 0.762, respectively). The sensitivity and specificity of the new score for identifying children likely to be dependent were 100% and 98.4% in Malaysia and 100% and 93.8% in India. Positive and negative predictive values were 84.2% and 100% in Malaysia and 65.6% and 100% in India.

Conclusion: The new tool for assessing disability in children after Japanese encephalitis was simple to use and scores correlated well with clinical assessment.

الغرض: إعداد أداة بسيطة لتقييم شدة الإعاقة الناتجة عن الالتهاب الدماغي الياباني واحتمال أن يصير الطفل نتيجة لذلك عالة على غيره

الطريقة: أُعد حرز جديد للنتائج استناداً إلى استبيان مكوّن من 15 بنداً بعد مراجعة المؤلفات الطبية، وفحص أدوات القياس الحالية، ومناقشة الخبراء، وإجراء دراسة ارتيادية. واستخدم الحرز لتقييم 100 طفل في ماليزيا (56 مريضاً بالالتهاب الدماغي الياباني، و مريضين بالتهاب دماغي غير معروف، و 42 طفلاً من الشواهد) و 95 طفلاً في الهند (36 مريضاً بالالتهاب الدماغي الياباني، و 41 مريضاً بالتهاب دماغي غير معروف، و 18 طفلاً من الشواهد). وجرى تحديد الاختلافات بين المراقبين ولدى كل مراقب في تسجيل حرز النتائج، وقورن الحرز بالتقييم السريري الشامل.

الموجودات: كان هناك توافق جيد بين المراقبين على استخدام الحرز الجديد لتحديد احتمال حاجة الأطفال للإعالة (Κ= 0.942 للأطفال الماليزيين؛ Κ= 0.786 للأطفال الهنود) وكان هناك توافق جيد بالنسبة للمراقب الواحد (Κ= 1.000 و 0.902 على التوالي). بالإضافة إلى أن التوافق بين الحرز الجديد والتقييم الإكلينيكي كان جيداً أيضاً (Κ= 0.906 و 0.762 على التوالي). وكانتا حساسية ونوعية الحرز الجديد في تحديد الأطفال المرجح حاجتهم للإعالة هما 100% و 98.4% في ماليزيا، و 100% و 93.8% في الهند. وكانت القيّم التكهنية الإيجابية والسلبية هي 84.2% و 100% في ماليزيا، و 65.6% و 100% في الهند.

الاستنتاج: الأداة الجديدة لتقييم الإعاقة بين الأطفال بعد الإصابة بالالتهاب الدماغي الياباني كانت يسيرة الاستخدام وارتبط الحرز ارتباطاً جيداً مع التقييم السريري .

Objectif: Développer un outil simple pour évaluer la gravité de l’invalidité résultant de l’encéphalite japonaise et, en conséquence, la probabilité de dépendance de l’enfant.

Méthodes: Une nouvelle échelle d’évaluation basée sur un questionnaire de 15 questions a été développée après une analyse de la littérature, l’examen des outils d’évaluation actuels, une discussion avec les experts et une étude pilote. L’échelle a été utilisée pour évaluer 100 enfants en Malaisie (56 patients atteints d’encéphalite japonaise, 2 patients atteints d’encéphalite d’étiologie inconnue et 42 contrôles) et 95 en Inde (36 patients atteints d’encéphalite, 41 patients atteints d’encéphalite d’étiologie inconnue et 18 contrôles). La variabilité inter et intra-observateurs dans l’échelle d’évaluation a été déterminée et l’échelle a été comparée avec une évaluation clinique complète.

Résultats: Il a été observé une bonne correspondance inter-observateurs dans l’utilisation de la nouvelle échelle pour identifier la dépendance probable (Κ=0,942 pour les enfants malais; Κ=0,786 pour les enfants indiens), ainsi qu’une bonne correspondance intra-observateurs (Κ=1,000 et 0,902, respectivement). De plus, la correspondance entre la nouvelle échelle et l’évaluation clinique a été bonne (Κ=0,906 et 0,762, respectivement). La sensibilité et la spécificité de la nouvelle échelle d’évaluation de la probabilité de dépendance des enfants ont été de 100 % et de 98,4 % en Malaisie et de 100 % et de 93,8 % en Inde. Les valeurs prédictives positives et négatives ont été de 84,2 % et de 100 % en Malaisie et de 65,6 % et de 100 % en Inde.

Conclusion: Le nouvel outil pour l’évaluation de l’invalidité des enfants après encéphalite japonaise a été simple à utiliser et les résultats présentent une bonne corrélation avec l’évaluation clinique.

Objetivos: Diseñar una herramienta sencilla para valorar la gravedad de la incapacidad causada por la encefalitis japonesa y la posibilidad de que un niño sea dependiente como consecuencia de la misma.

Métodos: Se ha elaborado una nueva escala de resultados, basada en un cuestionario de 15 puntos, realizado tras una revisión bibliográfica, en el estudio de las herramientas de valoración actuales, en el debate con expertos y en un estudio preliminar. La escala se empleó para evaluar a 100 niños en Malasia (56 pacientes con encefalitis japonesa, 2 pacientes con encefalitis de etiología desconocida y 42 controles) y 95 en India (36 pacientes con encefalitis japonesa, 41 pacientes con encefalitis de etiología desconocida y 18 controles). Se determinó la variabilidad interobservador e intraobservador en la escala de resultados y se comparó la escala con una valoración clínica completa.

Resultados: Hubo un consenso interobservador favorable respecto a la utilización de la nueva escala para identificar la posible dependencia (Κ = 0,942 en el caso de los niños malasios; Κ = 0,786 para los niños indios) y un consenso intraobservador favorable ( Κ = 1,000 y 0,902, respectivamente). Además, el consenso entre la nueva escala y la valoración clínica también fue bueno (Κ = 0,906 y 0,762, respectivamente). La sensibilidad y la especificidad de la nueva escala para identificar a los niños que pueden ser dependientes fue del 100% y del 98,4% en Malasia, y del 100% y del 93,8% en India. Los valores predictivos positivos y negativos fueron del 84,2% y del 100% en Malasia, y del 65,6% y del 100% en India.

Conclusiones: La nueva herramienta de valoración de la incapacidad infantil tras la encefalitis japonesa fue fácil de usar y los resultados estaban relacionados con la valoración clínica.

Publication types

  • Research Support, Non-U.S. Gov't
  • Validation Study

MeSH terms

  • Adolescent
  • Child
  • Child, Preschool
  • Disability Evaluation*
  • Disabled Persons*
  • Encephalitis / physiopathology*
  • Female
  • Humans
  • India
  • Malaysia
  • Male
  • Pilot Projects
  • Severity of Illness Index
  • Surveys and Questionnaires / standards*