ارائه مدل مطلوب برای پیوند زدن نمره‌های سوابق تحصیلی با نمره‌های آزمون سراسری ورود به دانشگاه

نوع مقاله : مقاله پژوهشی

نویسندگان

1 دانشجوی دکتری تخصصی سنجش و اندازه‌گیری، دانشکده روان‌شناسی و علوم تربیتی، دانشگاه تهران

2 دانشیار گروه روش‌ها و برنامه‌های آموزشی و درسی، دانشکده روان‌شناسی و علوم تربیتی، دانشگاه تهران

3 استادیار گروه روان‌شناسی تربیتی و آموزش استثنایی، دانشگاه ساسکاچوان، کانادا

4 استادیار گروه روش‌ها و برنامه‌های آموزشی و درسی، دانشکده روان‌شناسی و علوم تربیتی، دانشگاه تهران

5 دانشیار گروه سنجش و اندازه‌گیری، دانشکده روان‌شناسی و علوم تربیتی، دانشگاه علامه طباطبایی

10.22034/emes.2020.38188

چکیده

هدف از نگارش این مقاله، انتخاب روشی مناسب برای مرتبط ‌کردن نمره‌های سوابق تحصیلی به نمره‌های آزمون‌ سراسری ورود به دانشگاه به جای استفاده از روش نرمال‌سازی بود. سپس دو روش مورد اشاره بر اساس خطای استاندارد اندازه‌گیری شرطی مقایسه شدند. برای دستیابی به این هدف، نمونه‌ای 5000 نفری از جامعه دانش‌آموزان دانش‌آموختۀ سال 1393 رشته ریاضی فیزیک انتخاب شد که در آزمون سراسری ورود به دانشگاه سال 1394 شرکت کرده بودند. پس از بررسی عامل‌های معرفی‌شده توسط «دوران» روی نمره‌ها و نیز نظر پمریچ و همکاران (2004)، تطابق برای مرتبط کردن نمره‌ها در نظر گرفته شد. سپس روش‌های میانگین، خطی و همصدک‌سازی برای تبدیل نمره‌های آزمون‌های پیشرفت تحصیلی به آزمون سراسری ورود به دانشگاه استفاده شد. نتایج نشان داد که روش همصدک‌سازی کمتر به گروه وابسته است؛ بدین‌سان، با استفاده از این روش، نمره‌های این آزمون‌ها برای تصمیم‌گیری‌ها با یکدیگر قابل مقایسه هستند. همچنین، در این پژوهش نشان داده شد که خطای استاندارد اندازه‌گیری شرطی برای روش ارائه شده بسیار کمتر از روش مورد استفاده توسط سازمان سنجش آموزش کشور است.

کلیدواژه‌ها


عنوان مقاله [English]

Selecting an Appropriate Method for Linking the Scores of Academic Achievement with those of the National University Entrance Examination

نویسندگان [English]

  • Somyaeh Kaveh 1
  • Ebrahim Khodaie 2
  • seyed Amin Mousavi 3
  • Ali Moghadamzadeh 4
  • Jalil Younesi 5
چکیده [English]

The purpose of this study was to find an appropriate method for linking the academic achievement scores to the National University Entrance Examination scores in Iran in comparison to the current practice (normalized method) based on Conditional Standard Error for Measurement. For this purpose, the scores of randomly selected of 5,000 high school graduates of the Mathematics and Physics in 2014 who had participated in National University Entrance Examination of 2015 were analyzed. Based on the criteria introduced by Dorans (2004) and the viewpoints of Pommerich et al. (2004), the concordance was chosen for linking the scores. Accordingly, linear, mean, and equipercentile methods were used to link scores on academic achievement and National University Entrance Examination tests. Results indicated that the equipercentile method were less sample dependent, so test scores linked using this method were more valid for making admissions decisions. Finally, the results showed that the conditional standard error of measurement of the linked scores using the equipercentile method is much lower than the method which is currently being used by the National Organization of Educational Testing in Iran.

کلیدواژه‌ها [English]

  • Linking
  • Concordance
  • Normalized
  • Conditional standard error of measurement
جهانی‌فر، مجتبی؛ خدایی، ابراهیم؛ یونسی، جلیل و موسوی، امین (1396). نقش هموارسازی در تبدیل غیرخطی نمره‌های خام به نمره‌های مقیاس نرمال. فصلنامه مطالعات اندازه‌گیری و ارزشیابی آموزشی، 7 (20)، 103-132.
رضوانی‌فر، شیرین (1391). همترازسازی نمرات دروس ریاضی و فیزیک رشتۀ علوم تجربی آزمون کنکور سراسری سال‌های 1388 و 1389 بر اساس نظریه کلاسیک و جدید اندازه‌گیری. پایان‌نامه کارشناسی ارشد، دانشگاه علامه طباطبایی.
سازمان سنجش آموزش کشور (1394). آشنایی با روش نمره کل‌سازی در آزمون سراسری سال 1394. هفته‌نامه خبری و اطلاع‌رسانی سازمان سنجش آموزش کشور (ویژه‌نامه پیک سنجش)، 19-27.
سلیمی جهرمی، محمدحسین (1377). بررسی روش‌های همترازسازی آزمون‌ها در نظریه کلاسیک و IRT و کاربرد آنها در همترازسازی آزمون‌های ورودی دانشگاه‌های کشور. پایان‌نامه کارشناسی ارشد، دانشگاه علامه طباطبایی.
فرجی، حیدر (1389). همترازسازی نمره‌های فرم A و B آزمون هوش کتل (مقیاس 3) در دانش‌آموزان پیش‌دانشگاهی شهر سقز با استفاده از مدل‌های کلاسیک و IRT. پایان‌نامه کارشناسی ارشد، دانشگاه علامه طباطبایی.
مقدم‌زاده، علی (1392). روش بهینه همترازسازی با توجه به ویژگی‌های بومی آزمون‌های ملی ایران: مورد مطالعه آزمون تولیمو و آزمون‌های جامع کنکورهای آزمایشی سازمان سنجش آموزش کشور. رساله دکتری، دانشگاه علامه طباطبایی.
Albano, D. A. (2016). Equate: Observed-Score Linking and Equating. R package version 2.0.6. Retrieved from https://CRAN.R-project.org/package=equate
Angoff, W. H. (1971). Scales, norms, and equivalent scores. In R. L. Thorndike (Ed.),
Educational Measurement (2nd ed., pp. 508-600). Washington, DC: American Council Education.
Brennan, R. L. & Lee, W. C. (1999). Conditional scale­-score standard errors of measurement under binomial and compound binomial assumptions. Educational & Psychological Measurement, 59 (1), 5-24.
Dorans, N. J. (2004). Equating, concordance and expectation. Applied Psychological Measurement, 28 (4), 227–246.
Dorans, N. J. & Holland, P. W. (2000). Population invariance and the Equatability of Tests: Basic Theory and the Linear Case. Journal of Educational Measurement, 37 (4), 281-306.
Dorans, N. J.; Lyu, C. F.; Pommerich, M. & Houston, W. M. (1997). Concordance between ACT Assessment and Recentered SAT I sum scores. College & University, 73 (2), 24–34.
Dorans, J. N. & Walker, M. E. (2007). Sizing Up Linkages. In N. J. Dorans, M. Pommerich, & P. W. Holland (Eds.), Linking and Aligning Scores and Scales (pp. 191-198). New York: Springer.
Holland, P. & Dorans, N. J. (2006). Linking and Equating. In R. L. Brennan (Ed.), Educational Measurement (4th e., pp. 187–220). Westport, CT: Praeger Publishers.
Huggins-Manley, A. C. & Whitaker, D. (2015). SEAsic: Score Equity Assessment- summary index computation. R package version 0.1. Retrieved from https://cran.r-project.org/web/packages/SEAsic/index.html
Kolen, M. J.; Hanson, B. A. & Brennan, R. L. (1992). Conditional standard errors of measurement for scale scores. Journal of Educational Measurement, 29 (4), 285-307.
Kolen, M. J.­­ (2004). Linking Assessment: Concept and History. Journal of Applied Measurement, 28 (4), 219-226.
Kolen, M. J. & Brennan, R. L. (2004). Test Equating, Scaling, and Linking: Methods and Practices (3th Ed.). New York: Springer.
Linn, R. L. (1993). Linking results of distinct assessments. Applied Measurement in Education, 6 (1), 83-102.
Marco, G. L.; Abdel-fattah, A. A. & Baron, P. A. (1992). Methods used to establish score comparability on the enhanced ACT assessment and the SAT (College Board Rep. No. 92-3). New York: The College Board.
Mislevy, R. J. (1992). Linking educational assessments: Concepts, issues, methods, and prospects. Princeton, NJ: ETS Policy Information Center.
Petersen, N. S.; Kolen, M. J. & Hoover, H. D. (1989). Scaling, norming, and equating. In R. L. Linn (Ed.), Educational measurement (3rd ed. pp.221-262). New York: Macmillan.
Pommerich, M.; Hanson, D. J.; Harris, D. J. & Sconning, J. A. (2004). Issues in Conducting Linkages between Distinct tests. Applied Psychological Measurement, 28 (4), 247-273.
R Core Team (2016). R: A Language and Environment for Statistical Computing. R Foundation for Statistical Computing, Vienna, Austria. Retrieved from https://www.R-project.org
Yin, P.; Brennan, R. L. & Kolen, M. J. (2004). Concordance between ACT and ITED scores from different populations. Applied Psychological Measurement, 28 (4), 274–289.