Published March 30, 2023
| Version v1
Publication
Open
Assessing the Quality of a Newly Designed Vocabulary Test for Vietnamese EFL Learners: A Rasch-based Analysis
- 1. Hanoi University of Science and Technology
- 2. Vietnam National University Ho Chi Minh City
Description
Test development involves many required stages, including examining the psychometric characteristics of the test and each test item. This study describes the development of an English vocabulary test designed for EFL learners in Vietnam and provides an analysis using the Rasch model to evaluate the test quality and test items. The data was collected from 202 students from a Vietnamese university and analysed with the use of the Conquest computer program. The results show that the test had high reliability. Four out of 50 items were removed from the test as not fitting the Rasch model. 36 items were ranked very good, and 10 items require some revision efforts for better distractors. The paper is expected to contribute to the wide application of the Rasch model in the practices of test development and suggest the development of more reliable instruments for EFL learners to assess their vocabulary.
Translated Descriptions
⚠️
This is an automatic machine translation with an accuracy of 90-95%
Translated Description (Arabic)
يتضمن تطوير الاختبار العديد من المراحل المطلوبة، بما في ذلك فحص الخصائص النفسية للاختبار وكل عنصر اختبار. تصف هذه الدراسة تطوير اختبار مفردات اللغة الإنجليزية المصمم لمتعلمي اللغة الإنجليزية كلغة أجنبية في فيتنام وتقدم تحليلاً باستخدام نموذج Rasch لتقييم جودة الاختبار وعناصر الاختبار. تم جمع البيانات من 202 طالب من جامعة فيتنامية وتحليلها باستخدام برنامج الكمبيوتر Conquest. أظهرت النتائج أن الاختبار يتمتع بموثوقية عالية. تمت إزالة أربعة عناصر من أصل 50 عنصرًا من الاختبار لعدم ملاءمتها لنموذج Rasch. تم تصنيف 36 عنصرًا جيدًا جدًا، و 10 عناصر تتطلب بعض جهود المراجعة للحصول على مشتتات أفضل. من المتوقع أن تساهم الورقة في التطبيق الواسع لنموذج Rasch في ممارسات تطوير الاختبار واقتراح تطوير أدوات أكثر موثوقية لمتعلمي اللغة الإنجليزية كلغة أجنبية لتقييم مفرداتهم.Translated Description (French)
Le développement du test implique de nombreuses étapes requises, y compris l'examen des caractéristiques psychométriques du test et de chaque élément du test. Cette étude décrit le développement d'un test de vocabulaire anglais conçu pour les apprenants EFL au Vietnam et fournit une analyse utilisant le modèle de Rasch pour évaluer la qualité du test et les éléments du test. Les données ont été recueillies auprès de 202 étudiants d'une université vietnamienne et analysées à l'aide du programme informatique Conquest. Les résultats montrent que le test était très fiable. Quatre articles sur 50 ont été retirés du test parce qu'ils ne correspondaient pas au modèle de Rasch. 36 articles ont été classés très bien et 10 articles nécessitent des efforts de révision pour de meilleurs distracteurs. L'article devrait contribuer à la large application du modèle de Rasch dans les pratiques de développement de tests et suggérer le développement d'instruments plus fiables permettant aux apprenants EFL d'évaluer leur vocabulaire.Translated Description (Spanish)
El desarrollo de la prueba implica muchas etapas requeridas, incluido el examen de las características psicométricas de la prueba y de cada elemento de la prueba. Este estudio describe el desarrollo de una prueba de vocabulario en inglés diseñada para estudiantes de EFL en Vietnam y proporciona un análisis utilizando el modelo Rasch para evaluar la calidad de la prueba y los elementos de la prueba. Los datos se recogieron de 202 estudiantes de una universidad vietnamita y se analizaron con el uso del programa informático Conquest. Los resultados muestran que la prueba tuvo una alta fiabilidad. Se eliminaron cuatro de los 50 elementos de la prueba por no ajustarse al modelo Rasch. Se clasificaron 36 elementos como muy buenos y 10 elementos requieren algunos esfuerzos de revisión para obtener mejores distractores. Se espera que el documento contribuya a la amplia aplicación del modelo Rasch en las prácticas de desarrollo de pruebas y sugiera el desarrollo de instrumentos más confiables para que los estudiantes de EFL evalúen su vocabulario.Files
123.pdf
Files
(428.7 kB)
| Name | Size | Download all |
|---|---|---|
|
md5:ea92b1d6bdbbbc990bfb5e90fdf34374
|
428.7 kB | Preview Download |
Additional details
Additional titles
- Translated title (Arabic)
- تقييم جودة اختبار المفردات المصمم حديثًا لمتعلمي اللغة الإنجليزية كلغة أجنبية الفيتناميين: تحليل قائم على Rasch
- Translated title (French)
- Évaluation de la qualité d'un test de vocabulaire nouvellement conçu pour les apprenants vietnamiens EFL : une analyse basée sur Rasch
- Translated title (Spanish)
- Evaluación de la calidad de una prueba de vocabulario de nuevo diseño para estudiantes vietnamitas de EFL: un análisis basado en Rasch
Identifiers
- Other
- https://openalex.org/W4362511264
- DOI
- 10.52296/vje.2023.270