Sifat, haqiqiylik va tizim arxitekturasi | Deutschtest.digital

Qaror qabul qiluvchilar uchun ma'lumot: Deutschtest.digital ning tasdiqlash argumenti – Zamonaviy til diagnostikasi orqali dalillarga asoslangan qarorlarga ishonch

Til testini Umumiy Yevropa Tillar Malumotnomasi Jadvaliga (CEFR) tayinlash murakkab tasdiqlash jarayonini ifodalaydi. Testning ma'lum bir CEFR darajasiga mos kelishi haqidagi da'vo to'g'ridan-to'g'ri kuzatiladigan fakt emas, balki nazariy va empirik dalillar bilan tasdiqlanishi kerak. Ushbu dalillarni to'plash va baholash tegishli da'voning haqiqiyligini tasdiqlash doirasida amalga oshiriladi.

(Yevropa Kengashiga qarang, 2009, 7-bet)

Til sertifikati o'lchangan qiymatlarni hujjatlashtiradi. To'g'ri talqin qilish juda muhim!

Agar qaror qabul qiluvchi sifatida siz abituriyentdan ma'lum bir maqsad uchun til bilish darajasini tasdiqlovchi hujjatni talab qilsangiz, sizga odatda til sertifikati yoki tegishli test natijasi taqdim etiladi. Bunday hujjat asosan ma'lum metodologik va imtihon bilan bog'liq sharoitlarda aniqlangan o'lchov natijasini o'z ichiga oladi. Agar siz buni, masalan, til bilish darajasini baholash uchun rasmiy protsedurada ishlatsangiz, u dalil bo'lib xizmat qilishi mumkin (Germaniya Ma'muriy Protsessual Qonunining 26-bo'limi 1-bandi 1-jumlasi va 2-jumla 3-jumlasiga qarang). Biroq, bunday o'lchov natijasi faqat professional jihatdan asosli va dalillarga asoslangan talqin orqali o'z ahamiyatini oshiradi. Shuning uchun muhim savol nafaqat qanday natija qog'ozga yozilganligi, balki bu o'lchov natijasi qanday ilmiy asosda ishonchli baholanishi mumkinligidir.

Bunday talqinning to'g'riligi ko'p jihatdan asosiy sinov jarayonlari ilmiy jihatdan asoslangan, texnik jihatdan ishonchli va tashkiliy jihatdan nazorat qilinganligiga bog'liq. Shuning uchun, muhim bo'lgan narsa shunchaki o'lchov qiymati emas, balki uni yaratadigan butun tizimning sifati.

Sinov natijalarining daliliy qiymati va ularning tegishli maqsad uchun qabul qilinishi ilmiy sifat va ularning to'g'ri talqinining mantiqiy natijasidir, ularning institutsional kelib chiqishi emas (qarang: AERA, APA & NCME, 2014; Chapelle, 2021; Cronbach, 1988; Kane, 2013; Messick, 1989).

Shuning uchun til sertifikatining ishonchliligini baholash uchun test ma'lumotlari qanday sharoitlarda to'planishi, qayta ishlanishi va talqin qilinishini o'rganish kerak. Ushbu boshqariladigan jarayonlar test sifatini ilmiy baholash imkonini beruvchi zarur dalillarni yaratadi.

Biroq, bu alohida dalillar hali test natijasini talqin qilish uchun yakuniy asos bo'la olmaydi. Faqatgina ularning validatsiya argumentiga tizimli integratsiyasi orqali shaxsning til kompetensiyasi haqidagi aniq bayonotni aniq test natijasidan olish mumkinligi haqida ilmiy jihatdan tushunarli asos paydo bo'ladi.

Quyidagi bo'limlarda avval dalillarni yaratish infratuzilmasi, ya'ni ishonchli dalillar ishlab chiqariladigan standartlar, jarayonlar va nazorat mexanizmlari tushuntiriladi. Keyinchalik, ular ushbu dalillar bizning validatsiya yondashuvimizga qanday qilib tizimli ravishda integratsiya qilinganligi va test natijalarimizning talqini qanday ilmiy asosga asoslanganligi tasvirlangan.

1. Ishonchli dalillarni yaratish uchun infratuzilma

Sertifikatning bo'sh va'da emasligini ob'ektiv ravishda namoyish etish uchun sinov tashkiloti ishonchli empirik dalillarga (psixometrik ma'lumotlar, ishonchlilik tahlillari, tasdiqlash hujjatlari) muhtoj. Zamonaviy test tadqiqotlari markaziy asosni ta'kidlaydi: hech qanday "haqiqiy testlar" yoki "haqiqiy test natijalari" mavjud emas - haqiqiylikka faqat ushbu natijalarni ma'lum bir maqsad uchun talqin qilish va ulardan foydalanish orqali erishish mumkin.

Faqat metodik jihatdan keng qamrovli sifat menejmenti tizimi test provayderining doimiy ravishda toza, xolis xom ma'lumotlarni yaratishini kafolatlay oladi, bu esa tilni bilish darajasini bunday to'g'ri talqin qilishni asoslash uchun juda muhimdir. Bunday dalillar faqat o'zboshimchalik bilan yaratilmagan taqdirdagina ishonchli bo'lganligi sababli, qat'iy, mustaqil tizim arxitekturasi talab qilinadi. Ushbu arxitektura beshta ustunga asoslangan:

Ustun a) Standart

Axborot qutisi / Ta'rif: Standart nima?

Standart - bu muayyan jarayonlar, protseduralar yoki xizmatlar uchun talablar, mezonlar yoki tavsiyalarni tavsiflovchi hujjatlashtirilgan qoidalar to'plami. U sifat, taqqoslash, shaffoflik va kuzatilishini muntazam ravishda ta'minlash uchun umumiy asos yaratadi. Standartlar turli manfaatdor tomonlar tomonidan ishlab chiqilishi va nashr etilishi mumkin hamda eng yaxshi amaliyotlar, texnik talablar va sifat mezonlarini shaffof va tushunarli tarzda belgilashga xizmat qiladi.

Deutschtest.digital qaysi standartdan foydalanadi?

Deutschtest.digital oʻzining til testlarini ishlab chiqish, boshqarish, baholash va uzluksiz sifatni taʼminlashni DIN ISO 29992 talablariga asoslaydi. ISO 29992 (“Oʻquv xizmatlari natijalarini baholash”) bilan xalqaro standartlar qoʻmitasi ISO/TC 232 (“Taʼlim va oʻquv xizmatlari”) oʻquv xizmatlarini koʻrsatuvchi va baholashlarni ishlab chiqadigan, tanlaydigan yoki qoʻllaydigan tashkilotlarga qaratilgan maxsus standartni nashr etdi. ISO 29992 xalqaro standarti Germaniya standartlashtirish instituti (DIN) tomonidan milliy standartlar tizimiga DIN ISO 29992 sifatida qabul qilingan.

Standart baholashlarni rejalashtirish, ishlab chiqish, boshqarish va baholash uchun aniq sifat talablarini shakllantiradi va tillarni bilish darajasini umumiy Yevropa tillar bo'yicha ma'lumotnoma doirasiga (CEFR) muvofiq o'lchashni aniq o'z ichiga oladi. Faqat test-nazariy ko'rsatmalardan farqli o'laroq, ISO 29992 asosan sifat kafolatlangan xizmatni boshqarish mantig'idan kelib chiqadi. Deutschtest.digital uchun u sifatni ta'minlash uchun markaziy tashkiliy va metodologik asosni tashkil qiladi. U bizga ishonchli dalillarni yaratishda, test jarayonlarini shaffof hujjatlashtirishda va tekshirilishi mumkin bo'lgan va kuzatilishi mumkin bo'lgan standartlarga muvofiq til testlarimizning izchil sifatini ta'minlashda yordam beradi. Shu bilan birga, u qaror qabul qiluvchilarga keng qamrovli huquqiy, institutsional va metodologik aniqlikni beradi.

ISO 29992 nimani o'z ichiga oladi?

ISO 29992 talablari quyidagi asosiy boblarga bo'lingan:

  • bob 1 Standartning qo'llanilish doirasi ko'rsatilgan. Ikkita asosiy qo'llanilish qayd etilgan: (1) individual o'quvchi natijalarini o'lchash va (2) o'rganish jarayonini aniqlash.
  • bob 2 boshqa standartlarga havolalarni anglatadi (ular ISO 29992:2021 standarti holatida mavjud emas).
  • bob 3 diagnostika/ishlash samaradorligini o'lchash bilan bog'liq bir qator texnik atamalarni belgilaydi.
  • bob 4 Ushbu standart diagnostika vositalarini rejalashtirish bo'yicha aniq tavsiyalar beradi (matnda doimiy ravishda "baholash" deb ataladi). DIN ISO 29992:2021-04 ga muvofiq, rejalashtirish bosqichi ehtiyojlarni tahlil qilish, resurslarni rejalashtirish hujjatlari va diagnostika vositasining qo'llanilish doirasi haqida ma'lumotni o'z ichiga olgan asos hujjatini; asbob asosida qabul qilingan qarorlarni; uning natijalarini talqin qilishni; diagnostika vositasidan foydalanishning mo'ljallangan oqibatlarini; asbobning maqsadlari va qo'llanilgan baholash metodologiyasi o'rtasidagi bog'liqlikni; natijalar, ularni talqin qilish, qo'llash va oqibatlar o'rtasidagi bog'liqlikni; test natijalarini yetkazishni; foydalanish shartlari, jadval tuzish va xarajatlarni; baholash protseduralarini; baholash muhitini (masalan, binolarni); baholashda ishtirok etish uchun zarur shartlar va o'quv natijalarini baholashda qo'llaniladigan asboblar va usullar uchun amaldagi standartlarni; sifatni ta'minlash protseduralarini; baholashni ishlab chiqish va/yoki amalga oshirishda ishtirok etuvchi manfaatdor tomonlarni; diagnostika vositasi uchun operatsion rejani; va protsedura qoidalarini, shuningdek, diagnostika vositasining mavjudligi va test spetsifikatsiyalari talablarini qamrab olish darajasini o'z ichiga olishi kerak.
  • bob 5 Unda diagnostika vositasini ishlab chiqish bo'yicha bir qator tavsiyalar mavjud. Bularga asbobdan foydalanish vaqti (o'quv jarayonidan oldin, davomida yoki keyin), test ishlab chiquvchilarining malakasi, test topshiriqlari/imtihon savollari formati va diagnostika vositasini qo'llashning fazoviy, vaqt, tashkiliy va texnik xususiyatlari kabi jihatlar kiradi. Bundan tashqari, u test sifati mezonlari bo'yicha ob'ektivlik, ishonchlilik va validlik bo'yicha ko'rsatmalar beradi; test topshiriqlari/imtihon savollarini ishlab chiqish jarayoni; diagnostika vositasi natijalarini aniqlash tartiblari; natijalarni qanday va qachon yetkazish asoslari; natijalarga e'tiroz bildirish tartiblari; va texnik hujjatlarga qo'yiladigan talablar.
  • bob 6 Bu diagnostika vositasining ma'muriy jihatlariga qaratilgan. Buning jihatlari quyidagilarni o'z ichiga oladi: qo'llash bo'yicha ko'rsatmalar; test xavfsizligini ta'minlash rejasi; diagnostika vositasini boshqarishni nazorat qiluvchi shaxslarning malakasi va majburiyatlari; va baholovchilarning malakasi.
  • bob 7 Bu diagnostika vositasidan operatsion foydalanishga taalluqlidir. Operatsion foydalanishga tegishli hujjatlar, masalan, ishonchlilik va haqiqiylik dalillari; diagnostika vositasini qo'llash qoidalari; va sinov-metodologik sifatni boshqarish va tegishli jarayonlar uchun statistik protseduralar talab qilinadi. Bundan tashqari, 7-bobda mavjud diagnostika protsedurasi qanday qilib doimiy ravishda qayta ko'rib chiqilishi va yanada rivojlantirilishi bo'yicha batafsil reja talab qilinadi.
  • bob 8 Ushbu bo'lim adolat masalasini ko'rib chiqadi. Shu nuqtai nazardan, unda diagnostika vositasini yetkazib beruvchi va test nomzodlari o'rtasida tuzilishi kerak bo'lgan rasmiy kelishuv kabi xususiyatlar bayon etilgan. Ushbu kelishuv, masalan, test to'lovlari, ishtirok etuvchi tomonlarning huquq va majburiyatlari, ishtirok etish talablari, diagnostika vositasining tavsifi, ma'lumotlarni himoya qilish to'g'risidagi ma'lumotlar va vaqt jadvaliga oid tafsilotlarni o'z ichiga olishi kerak. 8-bobda kamsitishni taqiqlash; test nomzodlarining huquqlari; diagnostika vositasining betarafligi; diagnostika vositasi bilan bog'liq shaxslarning xulq-atvor qoidalari; va test nomzodlariga taqdim etiladigan ma'lumotlar ham ko'rib chiqiladi.
  • bob 9 DIN ISO 29992:2021-04 diagnostika vositalaridan foydalanishga oid qo'shimcha axloqiy mulohazalarni ko'rib chiqadi. Shu nuqtai nazardan, u barcha ishtirok etuvchi tomonlarning majburiyatlarini aniq belgilashni talab qiladi. Bundan tashqari, u diagnostika vositasi haqida haqqoniy va aniq ma'lumot talab qiladi. Va nihoyat, diagnostika vositasi axborot xavfsizligining turli jihatlarini, masalan, to'plangan ma'lumotlarning maxfiyligini, ma'lumotlarni himoya qilish va xavfsizligini hamda aloqa kanallarining xavfsizligini kafolatlashi kerak. Oxir-oqibat, aloqa boshqaruv tizimi ham rejalashtirilishi va hujjatlashtirilishi kerak.
  • Anhang A Diagnostika protsedurasi uchun texnik hujjatlarda tizimli ravishda to'planishi kerak bo'lgan ma'lumotlarni belgilaydi. Bunga diagnostika vositasining butun hayot aylanishiga, asbobni rejalashtirish va ishlab chiqishdan tortib, operatsion qo'llanilishigacha bo'lgan barcha hujjatlar kiradi. Tegishli hujjatlar ehtiyojlarni tahlil qilishni; diagnostika vositasidan foydalanish asoslarini; ballarni baholash xususiyatlarini; diagnostika vositasini boshqarish bo'yicha qo'llanmani; ishtirokchilar uchun o'quv qo'llanmasini; baholovchilar uchun shakllarni; imtihon oluvchilar/baholovchilar, nazoratchilar va boshqalarning malakasi va o'qitish xususiyatlarini; test elementlarini ishlab chiqish protseduralari to'g'risidagi hujjatlarni; diagnostika vositasining test auditlari va validatsiya tadqiqotlarini hujjatlashtirishni; muntazam sifatni ta'minlash dalillarini; individual test elementlarining psixometrik sifatini tasdiqlovchi dalillarni; yaroqsiz test elementlarini yo'q qilishga qaratilgan protseduralar dalillarini; natijalarni qo'lda baholash uchun tekshirish va protseduralar dalillarini; va jonli baholashning test xususiyatlariga muvofiqligini tasdiqlovchi dalillarni. Mashinaga asoslangan baholashlarning ishonchliligi dalillarini; arbitraj va apellyatsiya protseduralarining dalillarini; va qayta baholash holatlarida protsedura dalillarini. Ushbu juda keng dalillar diagnostika vositasidan foydalanuvchilarni uni qo'llashda qanday qo'llab-quvvatlash kerakligi haqidagi texnik hujjatlarga qo'yiladigan talablar bilan qo'shimcha ravishda to'ldiriladi. Texnik ma'lumotlar va hujjatlarni saqlashga oid tafsilotlar standartning asosiy qismini yakunlaydi.
DIN ISO 29992 ning asosiy afzalliklari nimada?

DIN ISO 29992 Deutschtest.digital ni nafaqat rasmiy sifat tizimi bilan ta'minlaydi, balki til testlarimizni ishlab chiqish, boshqarish va doimiy ravishda ko'rib chiqish uchun tizimli asos yaratadi. Ushbu standartni qo'llashning asosiy afzalliklari, xususan, quyidagi sohalarda yotadi:

Majburiy xavfsizlik arxitekturasini ta'minlash: Standart tuzilgan xavfsizlik rejasi uchun talablarni belgilaydi. DIN ISO 29992 ni qo'llaydigan tashkilotlar manipulyatsiyaga (firibgarlikning oldini olish) qarshi profilaktika choralarini muntazam ravishda amalga oshirishi va vazifalarning yaxlitligini, shuningdek, belgilangan jarayonlar orqali axborot va identifikatsiya xavfsizligini ta'minlashi kerak.

Hayotiy tsiklni boshqarish orqali barqaror sifatni ta'minlash: ISO 29992 doimiy texnik xizmat ko'rsatish va monitoring jarayonini (texnik xizmat ko'rsatish rejasi) talab qilish orqali sinov sifatining uzoq muddatli kafolatini qo'llab-quvvatlaydi. Bir martalik ko'rib chiqish o'rniga, standart sinov protseduralarini doimiy baholash va takomillashtirishni sifatni ta'minlashning muhim komponenti sifatida ko'rib chiqadi. Bu sinov sifatidagi o'zgarishlarni erta aniqlash va empirik jihatdan qo'llab-quvvatlanadigan choralar orqali tuzatish imkonini beradi.

Umumiy Yevropa Malumotnomalar Jadvali (CEFR) bilan texnik bog'liqlik: Standartning tuzilishi til diagnostikasiga umumiy sifat talablarini tizimli ravishda o'tkazish imkonini beradi. Bu ISO 29992 talablarini Umumiy Yevropa Tillar Malumotnomalari Jadvali (CEFR) ning nazariy asoslangan kompetensiya tavsiflari bilan bog'lash imkonini beradi va test natijalarini til darajalariga belgilashni tushunarli asoslash imkonini beradi.

Natijalarni talqin qilish va ulardan foydalanishning shaffof asoslanishi: ISO 29992 baholash natijalari va ularni talqin qilish o'rtasidagi bog'liqlikni aniq taqdim etishni talab qiladi. Bu sinov natijasidan qanday xulosalar chiqarish mumkinligi va sertifikat qanday maqsadlarda ishlatilishi mumkinligi haqida ilmiy jihatdan tushunarli tavsif uchun asos yaratadi.

Ilmiy asoslangan tasdiqlash argumenti uchun asos: ISO 29992 ning asosiy afzalligi shundaki, u tegishli dalillarni tizimli ravishda yaratish va hujjatlashtirishni qo'llab-quvvatlaydi. Psixometrik usullar bilan birgalikda bu ilmiy asoslangan tasdiqlash argumentini ishlab chiqish mumkin bo'lgan mustahkam dalillar bazasini yaratadi. Ushbu argument test natijalarini talqin qilish va ulardan foydalanishni shaffof, tushunarli va ishonchli professional dalillar bilan asoslash imkonini beradi.

Ustun b) Mustaqil sertifikatlash organi

Ma'lumot qutisi / Ta'rif: Mustaqil sertifikatlashtirish organi nima?

Mustaqil sertifikatlash organi - bu tashkilotning belgilangan sifat talablari yoki standartlariga javob berishini tekshiradigan va tasdiqlaydigan tashqi, xolis tashkilot. U sertifikatlangan tashkilotning o'z faoliyatini baholamaydi, balki uning hujjatlashtirilgan jarayonlari, tuzilmalari va dalillarining mustaqil auditini o'tkazadi. Ushbu tashqi baholash qo'shimcha ishonch qatlamini yaratadi, chunki sifatni ta'minlash faqat tashkilotning o'zi javobgar emas.

Mustaqil sertifikatlashning asosiy xususiyati baholash va sertifikatlash qarori o'rtasidagi farqdir. Jarayonlar va dalillarni ko'rib chiqish ekspert auditorlar tomonidan amalga oshiriladi, sertifikatlash bo'yicha yakuniy qaror esa mustaqil organ tomonidan qabul qilinadi. Bu o'z-o'zini baholash va manfaatlar to'qnashuvining oldini oladi, sertifikatlashning xolisligi va ishonchliligini ta'minlaydi.

Deutschtest.digital qaysi mustaqil organ bilan hamkorlik qiladi?

Tashqi sifatni ta'minlash uchun biz mustaqil sertifikatlash organi DeuZert bilan hamkorlik qilamiz . DeuZert sertifikatlash bo'yicha qarorlarining to'liq yaxlitligi, ishonchliligi va qabul qilinishini kafolatlaydi. Yigirma yildan ortiq tajribaga ega DeuZert ta'lim va sertifikatlash sohasida keng qamrovli mutaxassislik bilimlariga ega.

DeuZert tomonidan mustaqil sertifikatlashning afzalliklari nimada?

DeuZert tomonidan mustaqil sertifikatlashning asosiy qo'shimcha qiymati shundaki, amalga oshirilayotgan jarayonlarning sifati nafaqat tashkilotning o'zi tomonidan baholanadi, balki tashqi ekspertlar tomonidan ko'rib chiqiladi. Bu qaror qabul qiluvchilar uchun qo'shimcha ishonch darajasini yaratadi. Quyidagi jihatlar ayniqsa muhimdir:

  • Institutsional mustaqillik va ob'ektiv baholash: DeuZert mustaqil sertifikatlash organi sifatida faoliyat yuritadi va shaffof sinov protseduralari yordamida belgilangan talablarning bajarilishini baholaydi. Audit qilingan tashkilot va tashqi baholash organi o'rtasidagi ajralish o'z-o'zini baholashning oldini oladi va sertifikatlash qarorining xolisligini mustahkamlaydi.
  • Kuzatuv auditlari orqali doimiy sifatni ta'minlash: Amalga oshirilgan protseduralarning sifati bir marta baholanmaydi, balki muntazam ko'rib chiqishlar orqali doimiy ravishda kuzatib boriladi. Ushbu tashqi nazorat uslubiy va tashkiliy talablarning izchil bajarilishini va keyingi ishlanmalar tizimli ravishda ko'rib chiqilishini ta'minlaydi.
Deutschtest.digital DIN ISO 29992 standartiga mos kelishini qanday rasmiy dalil tasdiqlaydi?

Audit jarayoni muvaffaqiyatli yakunlanganidan so'ng, DeuZert bizga DIN ISO 29992 standartiga muvofiqlik sertifikatini berdi . Ushbu hujjat Deutschtest.digital saytida nemis tili ko'nikmalari sohasidagi baholashlarni rejalashtirish, ishlab chiqish, o'tkazish va baholash uchun joriy etilgan protseduralar standart talablariga javob berishini va mustaqil tashqi auditning bir qismi sifatida baholanganligini tasdiqlaydi.

Shunday qilib, muvofiqlik sertifikati Deutschtest.digital o'zining sinov jarayonlarini o'quv natijalarini baholash uchun xalqaro miqyosda tan olingan standartga muvofiqlashtirishining rasmiy isboti bo'lib xizmat qiladi. Bu test natijalarining shaffofligi, taqqoslanishi va sifatini ta'minlash uchun standartlarga mos keladigan protseduralarning tizimli ravishda amalga oshirilishini tasdiqlaydi.

Sertifikatni ko'rish

Ustun c) Mustaqil ekspertlar va auditorlar

Axborot qutisi / Ta'rif: Auditorlarning roli

Xalqaro standartlar baholash va sertifikatlashtirish bo'yicha qarorlar qabul qilish o'rtasida qat'iy ajratishni belgilaydi. Sinov tashkilotining haqiqiy tekshiruvi (audit) mustaqil, yuqori malakali auditorlar tomonidan amalga oshiriladi. Ular empirik dalillarni tekshiradilar, tizim arxitekturasini amalda baholaydilar va o'z natijalarini audit hisobotida hujjatlashtiradilar, bu esa sertifikatlashtirish organining keyingi qarori uchun neytral faktik asos bo'lib xizmat qiladi.

Deutschtest.digital’da auditlarni kim o‘tkazadi?

Kuzatuv auditlari DeuZert nomidan ish olib boruvchi tajribali ta'lim mutaxassislari, imtihon oluvchilar, auditorlar va baholovchilar tarmog'i tomonidan o'tkaziladi. Ushbu yuqori malakali jamoadan foydalanish jarayonlarimiz va dalillarimizni baholash nafaqat ma'muriy, balki mazmun va til testlari nazariyasi bo'yicha eng yuqori darajadagi tajriba bilan amalga oshirilishini ta'minlaydi.

Ustun d) Audit protsedurasi to'g'risidagi nizom

Axborot qutisi / Ta'rif: Audit jarayonini tartibga soluvchi qoidalar qanday?

Audit qoidalari sertifikatlashtirish organi auditni qanday o'tkazishi kerakligini aniq belgilaydigan majburiy protsedura qoidalaridir. Ular o'zboshimchalikning oldini olish va takrorlanadigan audit sifatini kafolatlash uchun hujjatlarni ko'rib chiqish, namunalar olish, suhbatlar va joyida yoki tizimda auditlar jarayonini tartibga soladi.

ISO 29992 ga muvofiq sertifikatlashtirishga qaysi audit qoidalari qo'llaniladi?

ISO 29992 uchun audit protsedurasi DIN EN ISO/IEC 17065 umumiy standarti talablariga bo'ysunadi. Ushbu standart sinovning o'zini emas, balki sertifikatlashtirish organining ish usullari, mustaqilligi va vakolatlarini tartibga soladi. Bu tashqi auditning tijorat yoki ichki manfaatlar to'qnashuvidan xoli bo'lishini ta'minlaydi. Natijada shaffof hujjatlashtirilgan professional va metodologik asosga asoslangan sinov va baholash jarayonlarining standartga muvofiq amalga oshirilishining mustaqil tashqi tasdiqlanishi yuzaga keladi.

Ustun e) Dalillar

Til ko'nikmalarini to'g'ri baholash ishonchli ma'lumotlar bazasini talab qiladi. Test sifatining dalillari asosan quyidagi asosiy dalillar toifalariga asoslanadi:

1. Rejalashtirish va konsepsiya hujjatlari

Ushbu hujjatlar haqiqiy sinovni ishlab chiqish boshlanishidan oldin strategik va shartnomaviy asosni yaratadi. Ular maqsadli guruhning tizimli ehtiyojlarini tahlil qilishni, shuningdek, sinovning aniq maqsadi bo'yicha majburiy kelishuvlarni hujjatlashtiradi.

2. Spetsifikatsiya va vazifalarni ko'rib chiqish hujjatlari

Ushbu toifaga kontent sifatini ta'minlash uchun batafsil chizmalar va sinov protokollari kiradi. Ular har bir alohida sinov elementi texnik xususiyatlarga va maqsadli CEFR darajasiga javob berishini ko'rsatadi.

3. Ma'muriyat va xavfsizlik hujjatlari

Ular barcha test o'tkazish joylarida mutlaqo yagona, standartlashtirilgan va buzib kirishga qarshi imtihon jarayonini kafolatlaydi. Bunga nazoratchilar uchun qo'llanmalar, nomzodlarning shaxsini qat'iy tekshirish va batafsil IT xavfsizligi rejalari kiradi.

4. Baholash va ball berish protokollari

Ushbu hujjatlar ballarni xolis, xatosiz va xolis berishni tartibga soladi. Ularda javob kalitlari, imtihon oluvchilar uchun baholash ko'rsatmalari va avtomatlashtirilgan baholash protseduralarining to'g'riligi dalillari mavjud.

5. Malaka va o'quv sertifikatlari

Ular barcha test va baholash xodimlarining professional, akademik va diagnostika malakalarini namoyish etadi. Bundan tashqari, ular yagona baholash standartlarini ta'minlash uchun tizimli trening va muntazam ravishda qayta tayyorlash kurslari konsepsiyasini hujjatlashtiradi.

6. Sifat va tasdiqlash hisobotlarining empirik dalillari

Ular testning haqiqiy psixometrik sifati uchun ilmiy va statistik dalillarni taqdim etadi. Ular o'lchov aniqligi (ishonchliligi), kichik guruhlar bo'yicha adolatlilik va nazariyaga mos o'lchovli tuzilma bo'yicha hisob-kitoblarni o'z ichiga oladi.

7. Texnik xizmat ko'rsatish va qayta ko'rib chiqish jarayonlari

Ushbu jarayonlar sifatni doimiy ravishda monitoring qilishni va ish paytida sinovlarni muntazam ravishda yangilab turishni nazorat qiladi. Ular sarflanadigan materiallar o'z vaqtida va standartlashtirilgan tarzda almashtirilishini ta'minlash uchun vazifalarning hayot aylanishi uchun statistik ko'rsatkichlarni belgilaydi.

8. Adolat, adolat va apellyatsiyalar

Ular butun jarayon davomida imtihon topshiruvchilarning huquqlari, qadr-qimmati va himoyasini himoya qiladilar. Bunga shaffof apellyatsiya va shikoyat qilish qoidalari, oson tushunarli foydalanuvchilarni qo'llab-quvvatlash va qat'iy ma'lumotlar xavfsizligi konsepsiyalari kiradi.

2. Dalillar bazasidan tasdiqlash argumentigacha: Test talqinlarining ilmiy asoslanishi

Sifatni ta'minlash arxitekturasida yaratilgan dalillar dastlab sinov protsedurasining sifati va funksionalligiga oid alohida dalillarni tashkil qiladi. Faqat ularni tasdiqlash argumentiga tizimli integratsiya qilish orqali shaxsning til kompetensiyasi haqidagi aniq bayonot test natijasidan olinishi mumkinligi uchun tushunarli asos paydo bo'ladi.

Validatsiya argumenti nima?

Agar test ishlab chiquvchilari ilmiy sifat mezonlarini alohida ko'rib chiqsalar, ular testning umumiy mantig'i va maqsadini ko'zdan qochirmasliklari mumkin. Til testining sifati nafaqat individual vazifalar yoki statistik parametrlardan, balki test jarayonining barcha komponentlarining o'zaro ta'siridan kelib chiqadi. Shuning uchun zamonaviy til testi tadqiqotlarida testning haqiqiyligi - boshqalar qatori, Bachman va Palmer, Michael Kane va Carol Chapelle ishlari ta'sirida - keng qamrovli va ko'p o'lchovli sifat kontseptsiyasi sifatida tushuniladi. Muhim savol individual sifat mezonlariga javob beriladimi yoki yo'qmi, emas, balki test natijasidan olingan xulosalar umuman oqlanishi mumkinmi.

Bu savol ayniqsa muhimdir, chunki til testlarining natijalari ko'pincha ta'lim, martaba va rezidentura qarorlariga uzoq muddatli ta'sir ko'rsatadi. Shuning uchun test o'tkazuvchilari maxsus professional va axloqiy mas'uliyatni o'z zimmalariga oladilar. Ular nafaqat test protseduralarining sifatini ta'minlashlari, balki bu sifatni shaffof ravishda namoyish eta olishlari kerak. Zamonaviy validlik tadqiqotlarida validlik argumenti deb ataladigan tushuncha aynan shu ehtiyojdan kelib chiqqan.

Tarixan, bu yondashuv 1990 va 2000-yillarda ilgari juda mavhum bo'lgan ilmiy validlik modellariga inqilobiy javob sifatida paydo bo'lgan, bu modellar real hayotdagi test amaliyoti uchun juda kam aniq ko'rsatmalar bergan. Amerikalik tadqiqotchi Maykl Keyn faylasuf Stiven Tulminning amaliy argumentatsiya nazariyasini test nazariyasiga qo'llagan. Keyinchalik taniqli tilshunos Kerol Chapelle bu mantiqni til testlarini o'rganish uchun yanada rivojlantirdi - u 2008-yildan boshlab TOEFL iBT ni kashshof tasdiqlashi bilan dunyoga mashhur. U modelni yettita aniq xulosa chiqarish bosqichlaridan iborat uzluksiz zanjirga aylantirdi, bu bugungi kunda test talqinlarini tizimli asoslash va hujjatlashtirishga zamonaviy yondashuvni ifodalaydi.

Ushbu yondashuvning muhim foydasi til testi tashkilotlarini shunchaki "sertifikat beruvchi"larning passiv rolidan ozod qilishdadir . Test o'tkazuvchilar endi shunchaki tartibsiz individual hujjatlarni yoki qat'iy nazorat ro'yxatlarini akkreditatsiya qiluvchi organlarga yoki vazirlik qaror qabul qiluvchilariga taqdim etish o'rniga, faol, proaktiv "himoya rolini " o'z zimmalariga olishlari mumkin. Bu ularga o'z imtihonlarining asosliligi, adolatliligi va huquqiy aniqligini qaror qabul qiluvchilarga mustaqil, shaffof va ilmiy jihatdan shubhasiz tarzda bahslashish, buni o'zlari tizimli ravishda tuzilgan dalillar zanjiri orqali isbotlash imkonini beradi.

Shunday qilib, tasdiqlash argumenti test natijalarining haqiqiyligini asoslash uchun ishlatiladigan ushbu tuzilgan yondashuvni tavsiflaydi. Boshlang'ich nuqta - har bir test shaxsning tilni bilishi haqida da'vo qiladi degan taxmin. Masalan, agar shaxsga Umumiy Yevropa Tillar Malumotnomasi (CEFR) ning B1 darajasi berilgan bo'lsa, bu ularning ushbu daraja uchun belgilangan til ko'nikmalariga ega ekanligini anglatadi. Tasdiqlash argumenti ushbu da'voni tizimli ravishda qo'llab-quvvatlash va tushunarli asoslash vazifasini bajaradi.

Bu test topshiriqlaridan tortib, boshqarish va baholash orqali natijalarni talqin qilishgacha bo'lgan izchil fikrlash zanjirini yaratishni o'z ichiga oladi. Har bir alohida bosqich uchun nazariy asoslar va empirik dalillar (qo'llab-quvvatlash deb ataladigan) qo'llaniladi, bu taxminlarning asosli ekanligini ko'rsatadi. Shunday qilib, tasdiqlash argumenti ilmiy dalillarni amaliy sinov qarorlari bilan bog'laydi va ma'lum bir test natijasi nima uchun aniqlangan til kompetensiyasining mazmunli dalili deb hisoblanishi mumkinligini shaffof qiladi. Shu tarzda, u ishonch, shaffoflik va til testlarining huquqiy javobgarligi uchun asos yaratadi.

Qaysi mantiqiy zanjir bog'lanishlari tasdiqlash argumentini tashkil qiladi?

Til testining sifatiga oid rad etib bo'lmaydigan professional dalillarni taqdim etish uchun zamonaviy diagnostika aniq mantiqiy tuzilishga amal qiladi. Faqatgina ushbu yetti darajaning har biri uchun empirik dalillar mavjud bo'lgandagina test amaliy qo'llanilishi uchun to'liq ishonchli deb hisoblanadi.

Amaliy ahamiyatlilik (domen ta'rifi): Bu birinchi qadam maqsadli muhitda (masalan, kundalik hayotda, ishda yoki o'qishda) mavjud bo'lgan til talablarini aniq tahlil qilishni o'z ichiga oladi. Bu test faqat mo'ljallangan maqsad uchun mutlaqo zarur bo'lgan ko'nikmalarni (masalan, integratsiya yoki mehnat bozoriga kirish) baholashini ta'minlaydi.
Ob'ektivlik va xatosiz o'lchash (baholash): Ushbu hujjat ish faoliyatini baholash va test ballarini yaratish qat'iy, ob'ektiv qoidalarga muvofiq amalga oshirilishini ko'rsatadi. Standartlashtirilgan shartlar va statistik tahlillar ballarni qo'yish iloji boricha xatosiz, shaffof, o'zgartirilmaydigan va tashqi individual ta'sirlardan mustaqil bo'lishini ta'minlaydi. Shunday qilib, har bir ishtirokchi bir xil, adolatli standartlarga muvofiq baholanadi.
Ishonchlilik (umumlashtirish): Bu qadam test natijasi barqaror ekanligini va tasodifga asoslanmaganligini ko'rsatishga xizmat qiladi. Yuqori umumlashtirilishi natijaning izchil bo'lib qolishini anglatadi - qaysi topshiriq varianti ishlatilganidan, qaysi imtihon oluvchi ishni baholaganidan yoki imtihon qaysi kuni o'tkazilganidan mutlaqo mustaqil.
Standart muvofiqlik (deklaratsiya): Bu yerda test ballari mo'ljallangan professional ma'noni aniq aks ettirishi ilmiy jihatdan isbotlangan. Agar sertifikat "B1" darajasini ko'rsatsa, u holda ko'rsatkich nazariyaga muvofiq Umumiy Yevropa Tillar Malumotnomasi (CEFR) vakolat tavsiflariga mos kelishi shubhasiz empirik tarzda isbotlanishi kerak.
Bashorat qilish kuchi (ekstrapolyatsiya): Bu test natijalari real hayotdagi kompetensiyaning ishonchli ko'rsatkichi ekanligini ko'rsatadi. Testdan o'tganlar Germaniyada muvaffaqiyatli o'qish yoki ishlash uchun zarur bo'lgan til ko'nikmalariga ega ekanliklarini ko'rsatadi.
Qaror aniqligi (foydalanish): Ushbu bosqichda ilmiy asoslangan chegaraviy ballar aniqlanadi. Bu imtihondan "o'tish" qoidalari adolatli va o'rinli bo'lishini ta'minlaydi, shunda na malakali shaxslar nohaq ravishda bloklanmaydi (noto'g'ri salbiy), na yetarli bilim soxta sertifikatlanmaydi (noto'g'ri ijobiy).
Ta'sirni baholash (oqibatlari): Nihoyat, testdan foydalanishning ijtimoiy va individual ta'siri baholanadi. Test jarayoni uzoq muddatda ijobiy, o'rganishni rag'batlantiruvchi ta'sirga ega bo'lishiga va ayrim odamlar guruhlari uchun (masalan, ularning kelib chiqishi yoki ona tili tufayli) hech qanday tizimli noqulaylik tug'dirmasligiga ishonch hosil qilinadi.
Dalillar zanjiridagi har bir alohida bo'g'inning tarkibiy qismlari nimalardan iborat?
Da'volar / Xulosalar: Da'volar haqiqiylik argumentining markaziy bayonotlarini tashkil qiladi. Ular test natijalariga bog'liq bo'lgan ma'noni, ularning xususiyatlarini va mo'ljallangan ta'sirini tasvirlaydi. Faktlardan farqli o'laroq, da'volar empirik yoki nazariy jihatdan tekshirilishi kerak bo'lgan tasdiqlanadigan, bahsli tasdiqlardir. Masalan, da'vo test ma'lum bir konstruktsiyani o'lchaydi, haqiqiy qarorlarni qabul qilishga imkon beradi yoki o'quvchilar va muassasalar uchun ijobiy oqibatlarga olib kelishini ta'kidlashi mumkin. Har bir da'vo ketma-ket fikrlash zanjirining bir qismi bo'lib, unda bitta da'vo xulosadan kelib chiqadi va bir vaqtning o'zida keyingisi uchun asos bo'ladi. Shu tarzda, haqiqiylikning butun spektri izchil asoslashda ifodalanishi mumkin.
Maydon / bino: Asoslar har bir da'vo uchun empirik asosni tashkil qiladi. Ular ma'lumotlar, kuzatiladigan faktlar yoki oldingi xulosa bosqichlaridan olingan xulosalardan iborat. Birinchi xulosada to'g'ridan-to'g'ri sinov natijalari yoki kuzatuvlar ko'pincha asos sifatida ishlatiladi, keyingi xulosa bosqichlarida esa oldingi da'volar asos bo'lib xizmat qiladi. Asoslar fikrlash zanjiridagi bo'g'indir: ularni tanlash mantiqiy jihatdan ishonchli, dalillarga asoslangan, aniq va tekshirilishi mumkin bo'lishi kerak.
Yakuniy qoidalar / Asoslash qoidalari (Orderlar): Orderlar - bu xulosa chiqarishga ruxsat beruvchi umumiy qoidalar yoki tamoyillar. Ular mavjud ma'lumotlar (asoslar) nima uchun da'voni qo'llab-quvvatlashini va argumentning ratsional asosini tashkil qilishini tushuntiradi. Tasdiqlash jarayonini amalga oshirish uchun Chapelle (2021) umumiy ta'rif bilan cheklanib qolmaydi, balki xulosa chiqarishning har bir bosqichiga aniq toifadagi orderlarni belgilaydi (masalan, sohani aniqlash darajasida "vakillik" uchun orderlar). Ushbu tasniflash metodologik reja bo'lib xizmat qiladi.
Taxminlar: Taxminlar orderning ishonchli bo'lishi mumkin bo'lgan shartlarini belgilaydi (qarang: Kane, 2006, 2013). Ular da'voning asosli bo'lishi uchun qaysi empirik shartlar yoki nazariy taxminlar bajarilishi kerakligini belgilaydi (masalan, test topshiruvchilarning motivatsiyasi yoki test elementlarining vakilligi). Taxminlar empirik tarzda tekshirilishi mumkin bo'lgan gipotezalarni aniqlash imkonini beradi.
Qo'llab-quvvatlash / Dalillar (qo'llab-quvvatlash): Tasdiqlash taxminlar va asoslarni qo'llab-quvvatlovchi empirik, nazariy yoki mantiqiy dalillarni o'z ichiga oladi. U fikrlash zanjirining ishonchliligini ilmiy jihatdan ta'minlash uchun zarur bo'lgan dalillar bazasini (masalan, statistik tahlillar, tasdiqlash tadqiqotlari, hujjatlar) taqdim etadi. Tasdiqlash argumentatsiya yo'nalishini tushunarli qiladi va da'volarning kelib chiqishini qonuniylashtiradi.
Qarshi dalillar (raddiyalar): Raddiyalar - bu da'vo yoki order haqiqiy bo'lmagan shartlar. Ular xulosani rad etishi mumkin bo'lgan potentsial qarshi dalillarni yoki muqobil tushuntirishlarni (masalan, konstruktiv ahamiyatga ega bo'lmagan farq yoki test adolatliligining yo'qligi) aniqlaydi, bu esa test o'tkazuvchisini tanqidiy mulohaza qilishga majbur qiladi.
Deutschtest.digital ning validatsiya argumentining arxitekturasi

Quyida biz nemis tilini bilish darajasini baholash uchun tasdiqlash argumentimizning metodologik arxitekturasini taqdim etamiz. Tasdiqlash argumenti har doim ma'lum bir maqsadli sohaga, belgilangan malaka darajasiga va ma'lum bir maqsadga yo'naltirilganligi sababli, asosiy dalillar bazasi test natijasini talqin qilish va undan foydalanish uchun maxsus tuzilgan bo'lishi kerak. Quyida keltirilgan arxitektura tasdiqlash argumenti ichidagi individual xulosalar (xulosa) qanday bog'liqligini va natijada olingan bayonotlarni ilmiy jihatdan asoslash uchun qanday dalillar (qo'llab-quvvatlash) kerakligini ko'rsatadi. Barcha empirik va statistik dalillar bilan to'liq tasdiqlash argumenti ushbu taqdimot doirasidan tashqariga chiqadi. Shuning uchun, tegishli dalillar bu yerda misollar sifatida keltirilgan.

1 Domen ta'rifi
DA'VO: Test topshiriqlari tegishli til bilimlari va ko'nikmalarini yuqori darajada ishonchli va aniq baholash imkonini beradi. Talab qilinadigan til funktsiyalari maqsadli sohada real dunyo tillaridan foydalanishni yuqori darajada ifodalaydi va tillar bo'yicha umumiy Yevropa ma'lumotnoma doirasi (CEFR) da belgilangan vakolat sohalariga mos keladi.
Turkum Unser Qualitätsanspruch Dalillarni tasdiqlovchi hujjat (qo'llab-quvvatlovchi)
Domen tavsifi Maqsadli guruhning tegishli lingvistik talablari va kommunikativ vaziyatlari aniq va to'liq aniqlangan. Maqsadli domen spetsifikatsiyasi
vakillik Test topshiriqlari talab qilinadigan tarkib va ​​kognitiv darajalarni to'g'ri nisbatlarda qamrab olish orqali test spetsifikatsiyalarida belgilangan sohani yetarli darajada ifodalaydi. Imtihon rejasi/Xaritalash vositalari
dolzarbligi Test topshiriqlari mazmun jihatidan dolzarb va kerakli kompetensiya darajasiga aniq moslashtirilgan; ularda o'lchanayotgan konstruksiyaning bir qismi bo'lmagan noo'rin qiyinchilik manbalari mavjud emas. Elementlarni ko'rib chiqish protokollari, reyting varaqlari yordamida elementni baholash (CEFR darajasini tekshirishni tasdiqlovchi hujjatni o'z ichiga olgan holda)
Sifat nazorati Ishlab chiqish jarayoni sifat jihatidan kamchiliklar, noaniqliklar yoki madaniy tarafkashliklarni ko'rsatadigan vazifalarning albatta qayta ko'rib chiqilishini yoki bekor qilinishini ta'minlaydigan tizimli tahririy nazorat mexanizmlarini o'z ichiga oladi. Mahsulot sifatini nazorat qilish protokoli (mahsulotni ko'rib chiqish)

Ilmiy ma'lumot

Psixometrik va til testlari nazariyasi adabiyotlarida test chizmalari va xaritalash vositalaridan foydalanish tarkibning haqiqiyligini ta'minlash va maqsadli sohaning tegishli tasvirini namoyish etish uchun majburiy metodologiya hisoblanadi. Ta'lim va psixologik testlar standartlari test elementlarini tarkib sohasiga moslashtiradigan mantiqiy tuzilmani yaratishni aniq tavsiya qiladi (xaritalash).

Amalda ushbu qamrovni ta'minlash uchun Alderson (2005) test spetsifikatsiyalarini test va element mualliflari testning konstruktiv validligini aniqlash uchun amal qilishi kerak bo'lgan "loyiha" sifatida aniq belgilaydi. Fulcher va Davidson (2007) ham test spetsifikatsiyalarini tom ma'noda "generativ loyihalar" deb atashadi.

2 Baholash
DA'VO: Test natijalari ishtirokchilarning imtihondagi natijalarini yuqori darajadagi o'lchov aniqligi bilan aniq, xolis va benuqson umumlashtiradi.

1-qism: Qo'llash shartlari va buzg'unchilikdan himoya

Unser Qualitätsanspruch Dalillarni tasdiqlovchi hujjat (qo'llab-quvvatlovchi)
Imtihon qoidalari yuqori sifatli bo'lib, qat'iy standartlashtirilgan va bir xil test o'tkazilishini ta'minlaydigan keng qamrovli va aniq ko'rsatmalarni, shuningdek, adolatli va konstruktiv moslashuvlar (kirish imkoniyati) uchun majburiy qoidalarni o'z ichiga oladi. Nazoratchilar ishonchli autentifikatsiya protseduralaridan foydalangan holda amaldagi ko'rsatmalarga muvofiq nomzodlarning shaxsini aniq tasdiqlaydilar va test muhitini doimiy ravishda kuzatib boradilar (xonani nazorat qiladi), shu bilan proksi-serverlar va ruxsatsiz ma'lumot almashinuvining oldini oladilar. Imtihon qoidalari, baholashlarni o'tkazish bo'yicha qo'llanma - xonani nazorat qilish va shaxsni tasdiqlash
Imtihon shaxsan yoki raqamli ravishda o'tkazilishidan qat'i nazar, buzib kirishdan himoyalangan imtihon muhiti ruxsatsiz yordam vositalariga kirishni ishonchli tarzda oldini oladi va formatga mos keladigan boshqaruv mexanizmlari (jismoniy nazorat xodimlari, xavfsiz brauzer, masofaviy nazorat) orqali firibgarlik urinishlarini butunlay yo'q qiladi. Jismoniy va elektron xavfsizlik talablari ro'yxati, xavfsizlik qoidalari buzilgan taqdirda favqulodda vaziyatlar rejasi, imtihon topshiruvchilarning ruxsatsiz faoliyatiga qarshi choralar

Test ishtirokchilarini aniq identifikatsiya qilish va test muhitini uzluksiz monitoring qilish har qanday qonuniy jihatdan asosli test protsedurasining mutlaq sharti (muhim sharti) hisoblanadi. Agar tashkiliy protseduralar nuqsonli bo'lsa va test topshiruvchining jismoniy shaxsini test natijalari bilan aniq bog'lashning iloji bo'lmasa, mazmun va statistik asoslilikka oid barcha keyingi bayonotlar bekor bo'ladi.

2 va 3-qismlar: Ballar sifati, protokollar va baholovchilar

Unser Qualitätsanspruch Dalillarni tasdiqlovchi hujjat (qo'llab-quvvatlovchi)
Barcha baholash usullari va natijalarni qayd etish jarayoni uchun aniq qoidalar va mezonlar mavjud bo'lib, shu bilan ob'ektivlik va protsedura ishonchliligini ta'minlaydi. CEFR ma'lumot darajalariga ("Can-Do" bayonotlari) asoslangan va muayyan kontekstlarga moslashtirilgan baholash shkalalari o'lchanayotgan til sub-kompetensiyalarining haqiqiy ko'rsatkichlarini ifodalaydi. Baholash o'tkazish bo'yicha qo'llanma, baholash spetsifikatsiyalari qo'llanmasi, samarali ishlash uchun baholash mezonlari.
Ishga yollangan baholovchilar zarur professional malakaga (masalan, tegishli universitet darajalari) va tegishli pedagogik tajribaga ega. Baholovchi malakasining ma'lumotnoma sertifikatlari
Tizimli o'quv dasturi baholovchilarga baholash ko'rsatmalarini izchil va aniq qo'llash uchun zarur ko'nikmalarni beradi. Baholovchilarning o'quv sertifikatlari
Malakali mutaxassislar (inson ishtirokida) tomonidan tizimli qo'lda sifat nazorati va ishonchlilik tekshiruvlari avtomatlashtirilgan baholash jarayonlarining aniqligini va yechim kalitlarining to'g'riligini tasdiqlaydi. Mashinani baholashning texnik ishlov berish aniqligining isboti

Psixometrik va til testlari nazariyasi adabiyotlarida ishlashni baholashning haqiqiyligi standartlashtirilgan, tashqi jihatdan mustahkamlangan mezonlarga (mezonlarga asoslangan o'lchov) tayanishi kerak. Subyektiv standartlarni istisno qilish uchun reyting shkalalari nazariyaga asoslangan o'rnatilgan ma'lumotnoma tizimi bilan aniq moslashtirilishi kerak.

4-qism: Empirik sifat / statistik yaxlitlik

Unser Qualitätsanspruch Dalillarni tasdiqlovchi hujjat (qo'llab-quvvatlovchi) Psixometrik maqsadli qiymatlar
Test topshiriqlari yuqori va past til bilish qobiliyatiga ega nomzodlarni samarali va ishonchli tarzda farqlash uchun yetarli darajada farqlashga ega. Statistik elementlarni kamsitishning isboti Nishonni tanlash kuchi (r) ≥ 0,50 (0,30 va 0,49 oralig'idagi qiymatlar qabul qilinadi). Diskriminatsiya indeksi (D) ≥ 0,40. Chalg'ituvchi omillar tanlash chastotasi > 0 ga teng bo'lishi kerak.
Test topshiriqlarining qiyinchilik darajalari maqsadli populyatsiyaning barcha ishlash diapazonini yetarlicha qamrab oladi. Tegishli elementning qiyinchilik darajasining dalillari Maqsadli diapazon p-qiymati 0,40 va 0,59 oralig'ida (0,20–0,80 qabul qilinadi). Umumiy testning o'rtacha qiyinchilik darajasi taxminan 0,50.
Test topshiriqlari tegishli kichik guruhlar bo'ylab o'zgarmas ishlaydi (jinsi yoki ona tili tufayli tarafkashlik yo'q). Sinov adolatliligini tasdiqlash (Differentsial element funktsiyasi / DIF) Mantel-Haenszel protsedurasiga muvofiq differentsial element funktsiyasi (DIF) (A toifasi: ETS tasnifiga ko'ra xavfsiz).
3 Umumlashtirish
DA'VO: Test natijalari test nomzodlarining haqiqiy va barqaror ishlashini yuqori darajadagi ishonchlilik bilan aks ettiradi, chunki ular test vaqti, testning aniq versiyasi yoki testni o'tkazgan shaxs kabi tasodifiy omillardan aniq mustaqildir.

Imkoniyatlar, test formatlari va vazifalar bo'yicha izchillik

Unser Qualitätsanspruch Dalillarni tasdiqlovchi hujjat (qo'llab-quvvatlovchi) Psixometrik maqsadli qiymatlar
Imkoniyatlar bo'yicha izchillik: Sinov natijalari yuqori darajadagi vaqtinchalik barqarorlikni ko'rsatadi (vaqtning tizimli ta'siri yo'q). Vaqtinchalik barqarorlik nuqtai nazaridan test sifatining isboti (test-qayta sinov ishonchliligi) Pearson korrelyatsiya koeffitsienti r Maqsadli namuna hajmi ≥ 0,90 (0,80 - 0,89 qabul qilinadi). Minimal namuna hajmi. N ≥ 50.
Sinov shakllari bo'yicha izchillik: Sinov natijalari turli xil sinov versiyalarida izchil (daraja barqarorligi). Sinov shaklining ekvivalentligi sifatining isboti (parallel sinov ishonchliligi) Maqsadli korrelyatsiya r ≥ 0,90 (dan) r ≈ 0,80 qabul qilinadi). sezilarli farqlarsiz t-test (p > 0,05).
Vazifalar bo'yicha izchillik: Sinov elementlari bir hil (ichki mustahkamlik). Ichki izchillik va bir xillikning isboti Kronbax alfa α ≥ 0,90 (0,80 - 0,89 qabul qilinadi). Qolgan elementlarning element bo'yicha farqlanishi ≥ 0,30.

Sharhlovchilar orasida izchillik

Unser Qualitätsanspruch Dalillarni tasdiqlovchi hujjat (qo'llab-quvvatlovchi) Psixometrik maqsadli qiymatlar
Bitta imtihon oluvchi tomonidan imtihon natijalarini baholash vaqt o'tishi bilan barqaror va izchil bo'ladi (fikrlarning kelishuvi). Hukmlarning izchilligi va betarafligining empirik dalillari Baholovchilar o'rtasidagi taqqoslash: O'rtacha sezilarli farqlar yo'q (p > 0,05). ICC yoki Kappa ≥ 0,90 (maqsadli qiymat).
Imtihon natijalarini baholash imtihon oluvchilarning individual qat'iyligidan mustaqil va tarafkashlikdan xoli. Ob'ektiv baholash sifatini tasdiqlash (ko'p qirrali Rasch tahlili) Moslik ballari (Infit/Outfit MNSQ) 0,5 dan 1,5 gacha bo'lgan. O'zaro ta'sir effektlari ahamiyatli emas edi.t ≤ 2,0).
4 Erklärung
DA'VO: Test natijalari CEFR daraja tavsiflarida aniq belgilanganidek, til kompetensiyasining asosiy tuzilishini yuqori ishonchlilik bilan aks ettiradi.
Unser Qualitätsanspruch Dalillarni tasdiqlovchi hujjat (qo'llab-quvvatlovchi) Psixometrik maqsadli qiymatlar
Konstruktiv vakillik: Sinov natijalarining ichki tuzilishi nazariy jihatdan aniqlangan konstruktsiyaga (GER) mos keladi. Konstruktiv o'lchovlilikning empirik dalillari (EFA/CFA). KMO qiymati ≥ 0,80. Yaxshi mos keladigan qiymatlar: RMSEA ≤ 0,05, SRMR ≤ 0,08, CFI/TLI ≥ 0,95.
Nomologik tarmoq: Sinov natijalari belgilangan standartlashtirilgan sinov protseduralari (tashqi mezon) bilan o'zaro bog'liq. Mezonning haqiqiyligining empirik dalillari Kuchli, muhim korrelyatsiya r ≥ 0,50 (p <0,05).
5 Ekstrapolyatsiya
DA'VO: Til testida qayd etilgan natijalar nomzodlarning haqiqiy til kompetensiyasi haqida real amaliy vaziyatlarda (masalan, akademik tadqiqotlarda yoki kundalik professional hayotda) yuqori darajadagi bashorat qilish kuchi bilan asosli xulosalar chiqarish imkonini beradi.
Unser Qualitätsanspruch Dalillarni tasdiqlovchi hujjat (qo'llab-quvvatlovchi) Psixometrik maqsadli qiymatlar / tahlil
Maqsadli domen ishlash ko'rsatkichlari: Sinov natijalari amalda harakat qilishning haqiqiy qobiliyati bilan bog'liq. Bir vaqtning o'zida amal qilish muddati / prognostik amal qilish muddatining dalillari. Diapazondagi korrelyatsiyalar r Taxminan 0,30 dan 0,50 gacha.
Ishlashning taqqoslanishi: Sinov elementlari va baholash mezonlari maqsadli sohaning belgilangan standartlariga mos keladi. Mezonlarning ahamiyatliligini ekspert tekshiruvi orqali tasdiqlash. Mavzu bo'yicha mutaxassislar bilan tizimli taqqoslash (AERA, APA va NCME standartlari).
Haqiqiylik va yozishmalar: Kirish materiallari va formatlari odatiy amaliy talablarga javob beradi. Vaziyatning haqiqiyligini tasdiqlash (kirish tahlili). Strukturaviy ishlash ekvivalenti (MANOVA). Global sinov ahamiyatli emas (p > 0,05).
Til ijrolari asl ijro namunalaridan sezilarli strukturaviy og'ishlarni ko'rsatmaydi. Strukturaviy ishlash ekvivalentligining empirik dalillari (MANOVA).
Sinov ishtirokchilari konstruktiv jihatdan bog'liq kognitiv muammolarni hal qilish strategiyalarini qo'llaydilar (taxmin qilish o'rniga haqiqiy tushunish). Konstruktiv aqliy jarayonlarning dalillari (jarayon tahlili). -
6 foydalanish
DA'VO: Test natijalari CEFR asosidagi joylashtirish va sertifikatlash bo'yicha adolatli va xolis qarorlar qabul qilish uchun ishonchli asos yaratadi. Bundan tashqari, ular til o'qitishni maqsadli qo'llab-quvvatlash uchun qimmatli diagnostika ma'lumotlarini taqdim etadi.
Unser Qualitätsanspruch Dalillarni tasdiqlovchi hujjat (qo'llab-quvvatlovchi) Psixometrik maqsadli qiymatlar
Muvofiqlik / Foydalilik: Manfaatdor tomonlar (universitetlar, o'qituvchilar) natijalarni oqilona qarorlar qabul qilish uchun foydali deb hisoblashadi. Sinov natijalarining amaliy qo'llanilishini isbotlash. Umumiy aniqlik ≥ 0,90. Ishonchlilik indeksi (Livingston & Lewis) Φ ≥ 0,70.
Qaror qabul qilish qoidalari: Chek ballari malakali standartlarni belgilash protsedurasining natijasidir. Baholash tizimi - Standartlashtirish protseduralari / Chiqarish ballari.
Tasniflash sifati va izchilligi: Tasniflar asosan mustaqil ma'lumotnoma baholashga mos keladi. Tasniflash aniqligining isboti (kesilgan ballar).
Tushuntirish va muloqot: Sinov natijalari manfaatdor tomonlar uchun aniq talqin qilinishi mumkin. Natijalar haqidagi hisobotlarning talqin qilinishi va foydaliligini tasdiqlash.
Ilovaning aniqligi: Qaror qabul qiluvchilar o'z faoliyatida belgilangan qaror qoidalarini doimiy ravishda qo'llaydilar. Arizaga rioya qilishning isboti. -
7 oqibatlari
DA'VO: Test natijalaridan foydalanish barcha manfaatdor tomonlar uchun adolatli tasniflash va kirish imkoniyatlarini kafolatlash, shuningdek, o'qitish amaliyotiga ijobiy ta'sir ko'rsatish orqali ijobiy oqibatlarga olib kelishi ehtimoli yuqori.
Unser Qualitätsanspruch Dalillarni tasdiqlovchi hujjat (qo'llab-quvvatlovchi)
Sinovdan foydalanishning aniqlangan oqibatlari aslida kutilgan foyda keltiradi, salbiy yon ta'sirlar esa minimal darajada qoladi. Sinov natijalarining oqibatlari haqida dalillar (Foydalanuvchi foydasi va qaytarish)
Test ishtirokchilarining huquqlari, qadr-qimmati va maxfiy ma'lumotlari qat'iy ko'rsatmalar (shu jumladan, shikoyat qilish tartiblari) bilan himoyalangan. Apellyatsiya bo'yicha ko'rsatmalar, axborotni boshqarish tizimi uchun qo'llanma
Testni joriy etish ta'lim tizimiga ijobiy ta'sir ko'rsatadi (test strategiyalari o'rniga ko'nikmalarga e'tibor qaratish). Sinov natijalarining oqibatlari (makro-ta'sir va ijtimoiy foyda) haqida dalillar

Zamonaviy test nazariyasida apellyatsiya protseduralari va axborot xavfsizligi bo'yicha ko'rsatmalarni amalga oshirish faqat ma'muriy harakat sifatida emas, balki oqibatlarning haqiqiyligini ta'minlash uchun majburiy metodologik vosita sifatida qaraladi (qarang: Messick, 1989; 1995). Tartibga solingan arbitraj protsedurasi konstruktiv ahamiyatga ega bo'lmagan dispersiyani aniqlash uchun zarur bo'lgan sifatli qarshi tekshiruv vazifasini bajaradi.

🔤 Til