Published May 15, 2023 | Version v1
Publication Open

External validation of the parental attitude about childhood vaccination scale

Creators

  • 1. Alexandria University
  • 2. Menoufia University
  • 3. Cairo University
  • 4. Princess Nourah bint Abdulrahman University
  • 5. Ministry of Health
  • 6. Heidelberg University
  • 7. Post Graduate Institute of Medical Education and Research

Description

Internal validation techniques alone do not guarantee the value of a model. This study aims to investigate the external validity of the Parental Attitude toward Childhood Vaccination (PACV) scale for assessing parents' attitude toward seasonal influenza vaccination.Using a snowball sampling approach, an anonymous online questionnaire was distributed in two languages (English and Arabic) across seven countries. To assess the internal validity of the model, the machine learning technique of "resampling methods" was used to repeatedly select various samples collected from Egypt and refit the model for each sample. The binary logistic regression model was used to identify the main determinants of parental intention to vaccinate their children against seasonal influenza. We adopted the original model developed and used its predictors to determine parents' intention to vaccinate their children in Libya, Lebanon, Syria, Iraq, Palestine, and Sudan. The area under the curve (AUC) indicated the model's ability to distinguish events from non-events. We visually compared the observed and predicted probabilities of parents' intention to vaccinate their children using a calibration plot.A total of 430 parents were recruited from Egypt to internally validate the model, and responses from 2095 parents in the other six countries were used to externally validate the model. Multivariate regression analysis showed that the PACV score, child age (adolescence), and Coronavirus disease 2019 (COVID-19) vaccination in children were significantly associated with the intention to receive the vaccination. The AUC of the developed model was 0.845. Most of the predicted points were close to the diagonal line, demonstrating better calibration (the prediction error was 16.82%). The sensitivity and specificity of the externally validated model were 89.64 and 37.89%, respectively (AUC = 0.769).The PACV showed similar calibration and discrimination across the six countries. It is transportable and can be used to assess attitudes towards influenza vaccination among parents in different countries using either the Arabic or English version of the scale.

⚠️ This is an automatic machine translation with an accuracy of 90-95%

Translated Description (Arabic)

لا تضمن تقنيات التحقق الداخلي وحدها قيمة النموذج. تهدف هذه الدراسة إلى التحقق من الصلاحية الخارجية لمقياس موقف الوالدين تجاه تطعيم الطفولة (PACV) لتقييم موقف الوالدين تجاه التطعيم ضد الأنفلونزا الموسمية. باستخدام نهج أخذ عينات كرة الثلج، تم توزيع استبيان مجهول المصدر عبر الإنترنت بلغتين (الإنجليزية والعربية) في سبعة بلدان. لتقييم الصلاحية الداخلية للنموذج، تم استخدام تقنية التعلم الآلي لـ "طرق إعادة أخذ العينات" لاختيار عينات مختلفة تم جمعها من مصر بشكل متكرر وتجديد النموذج لكل عينة. تم استخدام نموذج الانحدار اللوجستي الثنائي لتحديد المحددات الرئيسية لنية الوالدين لتطعيم أطفالهم ضد الأنفلونزا الموسمية. اعتمدنا النموذج الأصلي الذي تم تطويره واستخدمنا تنبؤاته لتحديد نية الآباء لتطعيم أطفالهم في ليبيا ولبنان وسوريا والعراق وفلسطين والسودان. تشير المنطقة الواقعة تحت المنحنى (AUC) إلى قدرة النموذج على تمييز الأحداث عن غير الأحداث. قارنا بصريًا الاحتمالات المرصودة والمتوقعة لعزم الآباء على تطعيم أطفالهم باستخدام مخطط المعايرة. تم تعيين ما مجموعه 430 من الآباء والأمهات من مصر للتحقق من صحة النموذج داخليًا، واستخدمت استجابات 2095 من الآباء والأمهات في البلدان الستة الأخرى للتحقق من صحة النموذج خارجيًا. أظهر تحليل الانحدار متعدد المتغيرات أن درجة اللقاح المضاد للفيروسات العكوسة (PACV)، وعمر الطفل (المراهقة)، والتطعيم ضد فيروس كورونا 2019 (COVID -19) لدى الأطفال كانت مرتبطة بشكل كبير بنية تلقي التطعيم. كانت المساحة تحت المنحنى للنموذج المطور 0.845. كانت معظم النقاط المتوقعة قريبة من الخط القطري، مما يدل على معايرة أفضل (كان خطأ التنبؤ 16.82 ٪). كانت حساسية وخصوصية النموذج الذي تم التحقق من صحته خارجيًا 89.64 و 37.89 ٪ على التوالي (AUC = 0.769). أظهر PACV معايرة وتمييزًا متشابهين عبر البلدان الستة. وهو قابل للنقل ويمكن استخدامه لتقييم المواقف تجاه التطعيم ضد الأنفلونزا بين الآباء في مختلف البلدان باستخدام النسخة العربية أو الإنجليزية من المقياس.

Translated Description (French)

Les techniques de validation interne à elles seules ne garantissent pas la valeur d'un modèle. Cette étude vise à étudier la validité externe de l'échelle d'attitude parentale à l'égard de la vaccination infantile (PACV) pour évaluer l'attitude des parents à l'égard de la vaccination contre la grippe saisonnière. En utilisant une approche d'échantillonnage en boule de neige, un questionnaire en ligne anonyme a été distribué en deux langues (anglais et arabe) dans sept pays. Pour évaluer la validité interne du modèle, la technique d'apprentissage automatique des « méthodes de rééchantillonnage » a été utilisée pour sélectionner à plusieurs reprises divers échantillons prélevés en Égypte et réajuster le modèle pour chaque échantillon. Le modèle de régression logistique binaire a été utilisé pour identifier les principaux déterminants de l'intention parentale de vacciner leurs enfants contre la grippe saisonnière. Nous avons adopté le modèle original développé et utilisé ses prédicteurs pour déterminer l'intention des parents de vacciner leurs enfants en Libye, au Liban, en Syrie, en Irak, en Palestine et au Soudan. L'aire sous la courbe (ASC) indiquait la capacité du modèle à distinguer les événements des non-événements. Nous avons comparé visuellement les probabilités observées et prédites de l'intention des parents de vacciner leurs enfants à l'aide d'un graphique d'étalonnage. Un total de 430 parents ont été recrutés en Égypte pour valider le modèle en interne, et les réponses de 2095 parents dans les six autres pays ont été utilisées pour valider le modèle en externe. L'analyse de régression multivariée a montré que le score PACV, l'âge de l'enfant (adolescence) et la vaccination contre la maladie à coronavirus 2019 (COVID-19) chez les enfants étaient significativement associés à l'intention de recevoir la vaccination. L'ASC du modèle développé était de 0,845. La plupart des points prédits étaient proches de la diagonale, démontrant un meilleur étalonnage (l'erreur de prédiction était de 16,82 %). La sensibilité et la spécificité du modèle validé en externe étaient respectivement de 89,64 et 37,89 % (ASC = 0,769). Le PACV a montré un étalonnage et une discrimination similaires dans les six pays. Il est transportable et peut être utilisé pour évaluer les attitudes à l'égard de la vaccination antigrippale chez les parents de différents pays en utilisant la version arabe ou anglaise de l'échelle.

Translated Description (Spanish)

Las técnicas de validación interna por sí solas no garantizan el valor de un modelo. Este estudio tiene como objetivo investigar la validez externa de la escala de Actitud de los padres hacia la vacunación infantil (PACV) para evaluar la actitud de los padres hacia la vacunación contra la gripe estacional. Utilizando un enfoque de muestreo de bola de nieve, se distribuyó un cuestionario anónimo en línea en dos idiomas (inglés y árabe) en siete países. Para evaluar la validez interna del modelo, se utilizó la técnica de aprendizaje automático de "métodos de remuestreo" para seleccionar repetidamente varias muestras recolectadas de Egipto y volver a ajustar el modelo para cada muestra. El modelo de regresión logística binaria se utilizó para identificar los principales determinantes de la intención de los padres de vacunar a sus hijos contra la gripe estacional. Adoptamos el modelo original desarrollado y utilizamos sus predictores para determinar la intención de los padres de vacunar a sus hijos en Libia, Líbano, Siria, Irak, Palestina y Sudán. El área bajo la curva (AUC) indicó la capacidad del modelo para distinguir los eventos de los no eventos. Comparamos visualmente las probabilidades observadas y pronosticadas de la intención de los padres de vacunar a sus hijos utilizando un gráfico de calibración. Se reclutaron un total de 430 padres de Egipto para validar internamente el modelo, y se utilizaron las respuestas de 2095 padres en los otros seis países para validar externamente el modelo. El análisis de regresión multivariante mostró que la puntuación PACV, la edad infantil (adolescencia) y la vacunación contra la enfermedad por coronavirus 2019 (COVID-19) en niños se asociaron significativamente con la intención de recibir la vacuna. El AUC del modelo desarrollado fue de 0,845. La mayoría de los puntos predichos estaban cerca de la línea diagonal, lo que demuestra una mejor calibración (el error de predicción fue del 16,82%). La sensibilidad y especificidad del modelo validado externamente fueron 89.64 y 37.89%, respectivamente (AUC = 0.769). El PACV mostró una calibración y discriminación similares en los seis países. Es transportable y se puede utilizar para evaluar las actitudes hacia la vacunación contra la gripe entre los padres en diferentes países utilizando la versión árabe o inglesa de la escala.

Files

pdf.pdf

Files (4.2 MB)

⚠️ Please wait a few minutes before your translated files are ready ⚠️ Note: Some files might be protected thus translations might not work.
Name Size Download all
md5:00b792ebee4f225e5305faacfbbb8dc8
4.2 MB
Preview Download

Additional details

Additional titles

Translated title (Arabic)
التحقق الخارجي من موقف الوالدين حول مقياس التطعيم في مرحلة الطفولة
Translated title (French)
Validation externe de l'attitude parentale à l'égard de l'échelle de vaccination infantile
Translated title (Spanish)
Validación externa de la actitud de los padres sobre la escala de vacunación infantil

Identifiers

Other
https://openalex.org/W4376609610
DOI
10.3389/fpubh.2023.1146792

Is supplement to
https://openalex.org/W822637737 (Other)
https://openalex.org/W4238037531 (Other)
https://openalex.org/W3165743284 (Other)
https://openalex.org/W3154657052 (Other)
https://openalex.org/W2888229558 (Other)
https://openalex.org/W2599462159 (Other)
https://openalex.org/W2338457415 (Other)
https://openalex.org/W2052685685 (Other)
https://openalex.org/W2002048622 (Other)
https://openalex.org/W1934945143 (Other)

GreSIS Basics Section

Is Global South Knowledge
Yes
Country
India

References

  • https://openalex.org/W1545623267
  • https://openalex.org/W1997192661
  • https://openalex.org/W2006205184
  • https://openalex.org/W2042080283
  • https://openalex.org/W2071084551
  • https://openalex.org/W2084518431
  • https://openalex.org/W2088624599
  • https://openalex.org/W2122892545
  • https://openalex.org/W2124808906
  • https://openalex.org/W2145883190
  • https://openalex.org/W2151056789
  • https://openalex.org/W2225109326
  • https://openalex.org/W2231037286
  • https://openalex.org/W2297716127
  • https://openalex.org/W2774380382
  • https://openalex.org/W2977934530
  • https://openalex.org/W3109609494
  • https://openalex.org/W3187581061
  • https://openalex.org/W3204438512
  • https://openalex.org/W3213376633
  • https://openalex.org/W4229036772
  • https://openalex.org/W4237886667
  • https://openalex.org/W4281258747
  • https://openalex.org/W4296142043
  • https://openalex.org/W4312195852
  • https://openalex.org/W4361205485