مطالعات اندازه گیری و ارزشیابی آموزشی

مطالعات اندازه گیری و ارزشیابی آموزشی

کاربست رویکرد تصمیم‌گیری چندملاکی دیمتل در شناسایی و رتبه‌بندی روابط علّی و معلولی ملاک‌های ارزشیابی عملکرد مربیان در محیط یادگیری الکترونیکی

نوع مقاله : مقاله پژوهشی

نویسندگان
1 دانشجوی کارشناسی ارشد ارزشیابی آموزشی، دانشکده روان شناسی و علوم تربیتی دانشگاه تهران، تهران، ایران.
2 دانشیار سنجش آموزش، دانشکده روان شناسی و علوم‌تربیتی؛ دانشگاه تهران، تهران، ایران
3 دانشیار برنامه ریزی درسی، گروه برنامه ریزی آموزشی و درسی، دانشکده روان شناسی و علوم تربیتی، دانشگاه تهران ، تهران ، ایران
10.22034/emes.2026.1995976.2464
چکیده
هدف: درک ناکافی از پویایی‌های علّی و شبکه‌ای میان ملاک‌های ارزیابی، به‌ویژه در حوزه عملکرد معلمان در بستر یادگیری الکترونیکی، چالشی بنیادی و مانعی جدی در دستیابی به ارزیابی‌های روا، عادلانه، دقیق و توسعه‌ای است. پژوهش حاضر با هدف شناسایی و تحلیل روابط علّی میان ملاک‌های ارزیابی عملکرد معلمان در محیط‌های یادگیری الکترونیکی و همچنین زمینه‌سازی برای ارتقای دقت ارزیابی و توسعه چارچوب تصمیم‌گیری مبتنی بر روابط میان ملاک‌ها انجام شد.
روش پژوهش: این پژوهش با طرح روش‌های آمیخته (کیفی و کمّی) اجرا گردید. در بخش‌ کیفی، با بهره‌گیری از روش نظریه داده‌ها، مصاحبه‌های نیمه‌ساختاریافته با کارشناسان آکادمی برنامه‌نویسی یاسان انجام شد. تحلیل داده‌ها در سطح نظم‌دهی مفهومی به شناسایی ۱۱۶ نشانگر و دسته‌بندی آنها در قالب ۱۹ ملاک‌ و ۵ عامل منجر گردید. در بخش‌ کمّی، مبتنی بر روش همبستگی‌، داده‌های پرسشنامه مقایسات زوجی از پنج کارشناس با روش چندملاکی دیمتل تحلیل شد تا روابط میان ملاک‌ها بررسی گردد.
یافته‌ها: تحلیل دیمتل نشان می‌دهد ملاک‌های «دیدگاه متعهدانه به آموزش»، «اشتیاق به تدریس-یادگیری» و «کشف و ارتقای قابلیت‌های یادگیرندگان» تأثیرگذارترین و ملاک‌های «روش تدریس»، «مدیریت کلاس» و «تعامل» بیشترین تأثیرپذیری و بالاترین سطح تعامل با سایر ملاک‌ها را داشتند.
نتیجه‌گیری: تمرکز بر ملاک‌های تأثیرگذار و دارای تعامل بالا با سایر عوامل، امکان طراحی نظام‌های ارزیابی دقیق، پویا و مؤثر عملکرد معلمان در یادگیری الکترونیکی را فراهم می‌کند. این رویکرد، مبنایی ساختاریافته برای تصمیم‌گیری‌ به‌موقع و مبتنی بر شواهد در اختیار مدیران آموزشی قرار می‌دهد.
کلیدواژه‌ها

موضوعات


عنوان مقاله English

The Application of the DEMATEL Multi-Criteria Decision-Making Approach in Identifying and Ranking the Cause-and-Effect Relationships of the Performanc

نویسندگان English

Zohreh Zare 1
Keyvan Salehi 2
Mohammad Javadipour 3
1 MA Student in Educational Evaluation, Faculty of Psychology and Education, University of Tehran, Tehran, Iran.
2 Associate professor of Educational Assessment,, Faculty of Psychology and Education, University of Tehran, Tehran, Iran
3 Associate Professor of Curriculum Studies, Department of Methods, Educational Planning and Curriculum, Faculty of Psychology and Education, University of Tehran, Tehran, Iran.
چکیده English

Objective: A limited understanding of the causal and network dynamics among evaluation criteria particularly regarding teacher performance in e-learning environments poses a fundamental challenge, significantly hindering the achievement of valid, fair, accurate, and developmental assessments. This study was conducted to identify and analyze the causal relationships among teacher performance evaluation criteria in e-learning environments, with the aim of enhancing assessment accuracy and developing a decision-making framework based on the interrelationships among these criteria.
Methods: A mixed-methods approach was used. In the qualitative phase, semi-structured interviews were conducted with programming experts at Yasan Academy, following the grounded theory method. Conceptual-level analysis of the data led to the identification of 116 indicators, which were subsequently categorized into 19 criteria and 5 overarching factors. In the quantitative phase, based on a correlational method, data from a pairwise comparison questionnaire administered to five experts were analyzed using the multi-criteria DEMATEL technique to investigate the interrelationships among the criteria.
Results: DEMATEL showed "committed perspective on education," "enthusiasm for teaching-learning," and "discovering and enhancing learners’ capabilities" as most influential, while "teaching method," "classroom management," and "interaction" were most affected with highest interactions.
Conclusion: Prioritizing influential and highly interactive criteria enables precise, dynamic evaluation systems for e-learning teacher performance, supporting evidence-based managerial decision-making.

کلیدواژه‌ها English

Keywords: criteria prioritization
cause and effect relationships
DEMATEL technique
multi-criteria decision making
mixed-methods research

References

Abdulhi, B., Dadjovi Tawakli, A., & Youslian, G. A. (2019). Identification and validation of professional competencies of effective teachers. Educational Innovations Quarterly, 13(49), 25–48.
Bagheri Moghaddam, N., Sahafzadeh, M., Shafiei Alavijeh, A., Yousefdehi, H., & Hosseini, S. H. (2010). Strategic environment analysis using DEMATEL method through systematic approach. Manage. Sci. Eng, 11(2–3), 95–105.
Chiu, Y. J., Chen, H. C., Shyu, J. Z., & Tzeng, G. H. (2006). Marketing strategy based on customer behavior for the LCD-TV. International Journal of Management & Decision Making, 7(2–3), 143–165.
Corbin, J., & Strauss, A. (2008). Basics of Qualitative Research: Techniques and Procedures for Developing Grounded Theory. Thousand Oaks, CA: Sage.
Doraid, D., Mohammed, H., & Farhan, B. (2011). A fuzzy multi-criteria decision making model for supplier selection. Exp. Syst. Appl., 38, 8384–8391.
Falatoonitoosi, E., Leman, Z., Sorooshian, S., & Salimi, M. (2013). Decision-Making Trial & Evaluation Laboratory. Research Journal of Applied Sciences, Engineering & Technology, 5(13), 3476–3480. e-issn: 2040-7467
Fardinpour, A. P. (2014). Intelligent Learning Management Systems: Definition, Features and Measurement of Intelligence. International Journal of Distance Education Technologies, 12(4), 19–31.
Ghorbankhani, M., & Salehi, K. (2017). Representation of the characteristics of successful teachers of virtual education in Iran’s higher education system from the point of view of teachers and students: a study with phenomenological method. Education Technology, 11(4), 327–347. [In Persian]
Ghorbankhani, M., Salehi, K., Khodaie, I., Moghadamzadeh, A., & Dehghani, M. (2022). A system of indicators to measure teacher preparation in elementary school: a systematic review. Scientific Quarterly Research in School & Virtual Learning, 10(1), 109–125. doi: 10.30473/etl.2022.61342.3646. [In Persian]
Hori, S., & Shimizu, Y. (1999). Designingmethods of human interface for supervisory control systems. Control Eng. Pract, 7(11), 1413–1419.
Huang, J. J., & Yoon, K. (2011). Multiple attribute decision making: methods & applications. Chapman & Hall/CRC.
Lin, C.-J., & Wu, W.-W. (2008). A causal analytical method for group decision-making under fuzzy environment. Expert Systems with Applications, 34(1), 205–213. https://doi.org/https://doi.org/10.1016/j.eswa.2006.08.012
Liou, J. J. H., Tzeng, G. H., & Chang, H. C. (2007). Airline safety measurement using a hybrid model. J. Air Transp. Manag, 13(4), 243-249.
Mehrmanesh, H., & Talebizadeh, A. (2019). Identifying and measuring the cause-and-effect relationships of factors affecting organizational agility using the theme and dimethod analysis method: the case study of metal products industries in Kaveh Industrial Town. Industrial Management Quarterly, Faculty of Humanities, Islamic Azad University, Sanandaj Branch, 11(52), 1–14. [In Persian]
Mehta, P., & Saroha, K. (2016). Analysis and evaluation of learning management system using data mining techniques,. Fifth International Conference on Recent Trends in Information Technology. Chennai, India, 1–5.
Muhammad, M. N., & Cavus, N. (2017). Fuzzy DEMATEL method for identifying LMS evaluation criteria. Procedia Computer Science, 120, 742–749. https://doi.org/https://doi.org/10.1016/j.procs.2017.11.304
Qian, J., Zhou, G., He, W., Cui, Y., & Deng, H. (2024). Optimization of teacher evaluation indicator system based on fuzzy-DEMATEL-BP. Heliyon, 10(13), e34034. https://doi.org/https://doi.org/10.1016/j.heliyon.2024.e34034
Salehi, K., & Golafshani, N. (2010). Commentary: Using mixed methods in research studies: An opportunity with its challenges. International Journal of Multiple Research Approaches4(3), 186-191. https://doi.org/10.5172/mra.2010.4.3.186
Sutoyo, M. N., & Paliling, A. (2025). The Integration of DEMATEL and SAW Methods for Developing a Research Performance Assessment Model for Lecturers. Journal of Applied Data Sciences; Vol 6, No 2: MAY 2025. https://doi.org/10.47738/jads.v6i2.550
Talebi, D., & Arashpour, A. (2013). Educational Performance Evaluation with the Comparative Approach of ANP and DEMATEL. Journal of Industrial Management Perspective, 3(2), 85–100. https://jimp.sbu.ac.ir/?lang=en [In Persian]
Trivedi, A. (2018). A multi-criteria decision approach based on DEMATEL to assess determinants of shelter site selection in disaster response. International Journal of Disaster Risk Reduction, 31, 722–728. https://doi.org/https://doi.org/10.1016/j.ijdrr.2018.07.019
Udisubakti, C., Mohamad Imron, M., Putu Dana, K., Dewanti, A., & A., S. S. (2022). A new multi-criteria method based on DEMATEL, ANP and grey clustering for quality sorting of incoming cores in remanufacturing systems under epistemic uncertainty: a case study of heavy-duty equipment. Cogent Engineering, 9:1(2099056). doi: 10.1080/23311916.2022.2099056
Wu, W. W., & Lee, Y. T. (2007). Developing global managers’ competencies using the fuzzy DEMATEL method. Exp. Syst. Appl., 32(2), 499–507.
Yuzbashi, A. R., & Research, S. (2017). Identifying the professional competencies of professors in electronic education environments (Delphi technique). Information & Communication Technology Quarterly in Educational Sciences, 9(2), 5–26. [In Persian]
Zare, Z., Salehi, K., & Javadipour, M. (2023). Designing a system of indicators for measuring the performance of instructors in e-learning environments. Teaching & Learning Research, 20(1), 64–78.  https://doi.org/10.22070/tlr.2023.16838.1338 [In Persian]