Published January 21, 2022 | Version v1
Publication Open

An experimental study on a conversational agent in software testing lessons

Creators

  • 1. Universidade Federal da Grande Dourados
  • 2. Universidade Federal Fluminense
  • 3. Universidade Federal do Amazonas

Description

Nowadays, few professionals understand the techniques and testing criteria to systematize the software testing activity in the software industry. Towards shedding some light on such problems and promoting software testing, professors in the area have established Massive Open Online Courses as educational initiatives. However, the main limitation is the professor's lack of supervision of students. A conversation agent called TOB-STT has been defined in trying to avoid the problem. A previous study introduced TOB-STT; however, it did not analyze its efficacy. This article addresses a controlled experiment that analyzed its efficacy and revealed it was not expressive in its current version. Therefore, we conducted an in-depth analysis to find what caused this result and provided a detailed discussion. The findings contribute to the TOB-STT since the experimental results show that improvements need to be made in the conversational agent before we use it in Massive Open Online Courses.

⚠️ This is an automatic machine translation with an accuracy of 90-95%

Translated Description (Arabic)

في الوقت الحاضر، يفهم عدد قليل من المهنيين التقنيات ومعايير الاختبار لتنظيم نشاط اختبار البرمجيات في صناعة البرمجيات. من أجل تسليط بعض الضوء على مثل هذه المشاكل وتعزيز اختبار البرمجيات، أنشأ الأساتذة في المنطقة دورات تدريبية ضخمة مفتوحة عبر الإنترنت كمبادرات تعليمية. ومع ذلك، فإن القيد الرئيسي هو عدم إشراف الأستاذ على الطلاب. تم تحديد وكيل محادثة يسمى TOB - STT في محاولة لتجنب المشكلة. قدمت دراسة سابقة اختبار TOB - STT ؛ ومع ذلك، لم تحلل فعاليته. تتناول هذه المقالة تجربة مضبوطة حللت فعاليتها وكشفت أنها لم تكن معبرة في نسختها الحالية. لذلك، أجرينا تحليلًا متعمقًا لمعرفة سبب هذه النتيجة وقدمنا مناقشة مفصلة. تساهم النتائج في اختبار TOB - STT لأن النتائج التجريبية تظهر أنه يجب إجراء تحسينات في وكيل المحادثة قبل استخدامه في الدورات التدريبية الضخمة المفتوحة عبر الإنترنت.

Translated Description (French)

De nos jours, peu de professionnels comprennent les techniques et les critères de test pour systématiser l'activité de test logiciel dans l'industrie du logiciel. Afin de faire la lumière sur ces problèmes et de promouvoir les tests de logiciels, les professeurs de la région ont mis en place des cours en ligne ouverts et massifs en tant qu'initiatives éducatives. Cependant, la principale limitation est le manque de supervision des étudiants par le professeur. Un agent de conversation appelé TOB-STT a été défini pour essayer d'éviter le problème. Une étude antérieure a introduit TOB-STT ; cependant, elle n'a pas analysé son efficacité. Cet article aborde une expérience contrôlée qui a analysé son efficacité et révélé qu'elle n'était pas expressive dans sa version actuelle. Par conséquent, nous avons effectué une analyse approfondie pour trouver ce qui a causé ce résultat et avons fourni une discussion détaillée. Les résultats contribuent au TOB-STT puisque les résultats expérimentaux montrent que des améliorations doivent être apportées à l'agent conversationnel avant de l'utiliser dans les cours en ligne ouverts à tous.

Translated Description (Spanish)

Hoy en día, pocos profesionales entienden las técnicas y los criterios de prueba para sistematizar la actividad de prueba de software en la industria del software. Con el objetivo de arrojar algo de luz sobre tales problemas y promover las pruebas de software, los profesores del área han establecido Cursos Masivos Abiertos en Línea como iniciativas educativas. Sin embargo, la principal limitación es la falta de supervisión de los estudiantes por parte del profesor. Se ha definido un agente de conversación llamado TOB-STT para tratar de evitar el problema. Un estudio previo introdujo TOB-STT; sin embargo, no analizó su eficacia. Este artículo aborda un experimento controlado que analizó su eficacia y reveló que no era expresivo en su versión actual. Por lo tanto, realizamos un análisis en profundidad para encontrar qué causó este resultado y proporcionamos una discusión detallada. Los hallazgos contribuyen al TOB-STT ya que los resultados experimentales muestran que es necesario realizar mejoras en el agente conversacional antes de usarlo en Cursos Masivos Abiertos en Línea.

Files

pdf.pdf

Files (1.1 MB)

⚠️ Please wait a few minutes before your translated files are ready ⚠️ Note: Some files might be protected thus translations might not work.
Name Size Download all
md5:371d1b3016a4e7e20a4cda2755742e56
1.1 MB
Preview Download

Additional details

Additional titles

Translated title (Arabic)
دراسة تجريبية على وكيل محادثة في دروس اختبار البرمجيات
Translated title (French)
Une étude expérimentale sur un agent conversationnel dans les cours de test logiciel
Translated title (Spanish)
Un estudio experimental sobre un agente conversacional en lecciones de pruebas de software

Identifiers

Other
https://openalex.org/W4206673929
DOI
10.15388/infedu.2023.01

Is supplement to
https://openalex.org/W4243211268 (Other)
https://openalex.org/W3176274227 (Other)
https://openalex.org/W3089971865 (Other)
https://openalex.org/W3010281314 (Other)
https://openalex.org/W2914660298 (Other)
https://openalex.org/W2913502950 (Other)
https://openalex.org/W2090301720 (Other)
https://openalex.org/W2008194781 (Other)
https://openalex.org/W1916954724 (Other)
https://openalex.org/W1592877999 (Other)

GreSIS Basics Section

Is Global South Knowledge
Yes
Country
Brazil

References

  • https://openalex.org/W2899586196
  • https://openalex.org/W3083762786