Keyfiyyət, etibarlılıq və sistem arxitekturası | Deutschtest.digital

Qərar qəbul edənlər üçün məlumat: Deutschtest.digital-ın validasiya arqumenti – Müasir dil diaqnostikası vasitəsilə sübutlara əsaslanan qərar etibarı

Dil testinin Ümumi Avropa Dillər Çərçivəsinə (CEFR) təyin edilməsi mürəkkəb bir təsdiqləmə prosesini təmsil edir. Testin müəyyən bir CEFR səviyyəsinə uyğun olduğu iddiası birbaşa müşahidə edilə bilən bir fakt deyil, lakin nəzəri və empirik dəlillərlə dəstəklənməlidir. Bu dəlillərin toplanması və qiymətləndirilməsi müvafiq etibarlılıq iddiasının təsdiqlənməsi çərçivəsində baş verir.

(bax: Avropa Şurası, 2009, səh. 7)

Dil sertifikatı ölçülmüş dəyərləri sənədləşdirir. Düzgün şərh vacibdir!

Əgər qərar qəbul edən şəxs olaraq, müəyyən bir məqsəd üçün ərizəçidən dil biliklərinin sübutunu tələb edirsinizsə, sizə ümumiyyətlə dil sertifikatı və ya müvafiq test nəticəsi təqdim olunacaq. Belə bir sənəd əsasən müəyyən metodoloji və imtahanla əlaqəli şərtlər altında müəyyən edilmiş ölçmə nəticəsini ehtiva edir. Məsələn, bunu dil biliklərinin qiymətləndirilməsi üçün rəsmi prosedurda istifadə etsəniz, o, sübut kimi xidmət edə bilər (Almaniya İnzibati Prosessual Qanununun 26-cı maddəsinin 1-ci bəndinin 1-ci cümləsinə və 2-ci cümlənin 3-cü cümləsinə baxın). Lakin, belə bir ölçmə nəticəsi yalnız peşəkarcasına və sübutlara əsaslanan şərh vasitəsilə əhəmiyyət qazanır. Buna görə də, vacib sual yalnız hansı nəticənin kağız üzərində yazıldığı deyil, həm də bu ölçmə nəticəsinin hansı elmi əsasda etibarlı şəkildə qiymətləndirilə bilməsidir.

Belə bir təfsirin etibarlı olub-olmaması əsasən əsas test proseslərinin elmi cəhətdən əsaslı, texniki cəhətdən etibarlı və təşkilati cəhətdən idarə olunub-olunmamasından asılıdır. Buna görə də, vacib olan sadəcə ölçmə dəyəri deyil, onu yaradan bütün sistemin keyfiyyətidir.

Test nəticələrinin sübut dəyəri və onların müvafiq məqsəd üçün qəbul edilməsi, onların institusional mənşəyindən deyil, elmi keyfiyyətin və düzgün şərhinin məntiqi nəticəsidir (bax: AERA, APA & NCME, 2014; Chapelle, 2021; Cronbach, 1988; Kane, 2013; Messick, 1989).

Buna görə də, dil sertifikatının etibarlılığını qiymətləndirmək üçün test məlumatlarının hansı şəraitdə toplandığı, emal edildiyi və şərh edildiyini araşdırmaq lazımdır. Bu nəzarət olunan proseslər test keyfiyyətinin elmi qiymətləndirilməsinə imkan verən zəruri dəlillər yaradır.

Lakin, bu fərdi sübutlar hələlik test nəticəsinin təfsiri üçün qəti əsaslandırma təşkil etmir. Yalnız onların validasiya arqumentinə sistematik inteqrasiyası sayəsində konkret test nəticəsindən insanın dil səriştəsi ilə bağlı konkret bir ifadənin nə üçün əldə edilə biləcəyinə dair elmi cəhətdən başa düşülən bir əsas ortaya çıxır.

Növbəti bölmələrdə əvvəlcə sübutların yaradılması infrastrukturu, yəni etibarlı sübutların istehsal olunduğu standartlar, proseslər və nəzarət mexanizmləri izah olunur. Daha sonra, bu sübutların validasiya yanaşmamıza necə sistematik şəkildə inteqrasiya olunduğu və test nəticələrimizin şərhinin hansı elmi əsasa əsaslandığı təsvir olunur.

1. Etibarlı sübutların yaradılması üçün infrastruktur

Sertifikatın boş vəd olmadığını obyektiv şəkildə nümayiş etdirmək üçün test təşkilatının möhkəm empirik dəlillərə (psixometrik məlumatlar, etibarlılıq təhlilləri, validasiya sənədləri) ehtiyacı var. Müasir test tədqiqatları mərkəzi bir müddəanı vurğulayır: mahiyyət etibarilə "etibarlı testlər" və ya "etibarlı test nəticələri" yoxdur - etibarlılığa yalnız bu nəticələrin müəyyən bir məqsəd üçün şərh edilməsi və istifadəsi yolu ilə nail olmaq olar.

Yalnız metodik cəhətdən hərtərəfli keyfiyyət idarəetmə sistemi test təminatçısının davamlı olaraq təmiz, qərəzsiz xam məlumatlar yaratmasına zəmanət verə bilər ki, bu da dil səriştəsinin belə etibarlı təfsirini əsaslandırmaq üçün vacibdir. Bu cür sübutlar yalnız özbaşına yaradılmadığı təqdirdə etibarlı olduğundan, ciddi, müstəqil bir sistem arxitekturası tələb olunur. Bu arxitektura beş sütun üzərində qurulur:

Sütun a) Standart

Məlumat qutusu / Tərif: Standart nədir?

Standart, müəyyən proseslər, prosedurlar və ya xidmətlər üçün tələbləri, meyarları və ya tövsiyələri təsvir edən sənədləşdirilmiş qaydalar toplusudur. Keyfiyyəti, müqayisəliliyi, şəffaflığı və izlənilə bilənliyi sistematik şəkildə təmin etmək üçün ümumi bir çərçivə yaradır. Standartlar müxtəlif maraqlı tərəflər tərəfindən hazırlana və dərc edilə bilər və ən yaxşı təcrübələri, texniki tələbləri və keyfiyyət meyarlarını şəffaf və başa düşülən şəkildə müəyyən etməyə xidmət edir.

Deutschtest.digital hansı standartdan istifadə edir?

Deutschtest.digital, dil testlərinin hazırlanmasını, idarə olunmasını, qiymətləndirilməsini və davamlı keyfiyyət təminatını DIN ISO 29992 tələblərinə əsaslandırır. ISO 29992 ("Təlim xidmətlərinin nəticələrinin qiymətləndirilməsi") ilə beynəlxalq standartlar komitəsi ISO/TC 232 ("Təhsil və Təlim Xidmətləri") təlim xidmətləri göstərən və qiymətləndirmələr hazırlayan, seçən və ya tətbiq edən təşkilatlara yönəlmiş xüsusi bir standart dərc etmişdir. Beynəlxalq ISO 29992 standartı Alman Standartlaşdırma İnstitutu (DIN) tərəfindən milli standartlar sisteminə DIN ISO 29992 kimi qəbul edilmişdir.

Standart qiymətləndirmələrin planlaşdırılması, inkişafı, idarə olunması və qiymətləndirilməsi üçün xüsusi keyfiyyət tələblərini formalaşdırır və Dillər üzrə Ümumi Avropa İstinad Çərçivəsinə (CEFR) uyğun olaraq dil biliyinin ölçülməsini açıq şəkildə əhatə edir. Sırf test-nəzəri qaydalardan fərqli olaraq, ISO 29992 əsasən keyfiyyətə zəmanətli xidmət idarəetməsi məntiqindən irəli gəlir. Deutschtest.digital üçün bu, keyfiyyətə zəmanət üçün mərkəzi təşkilati və metodoloji çərçivəni təşkil edir. Bu, etibarlı dəlillər yaratmaqda, test proseslərini şəffaf şəkildə sənədləşdirməkdə və yoxlanıla bilən və izlənilə bilən standartlara uyğun olaraq dil testlərimizin ardıcıl keyfiyyətini təmin etməkdə bizə dəstək olur. Eyni zamanda, qərar qəbul edənlərə hərtərəfli hüquqi, institusional və metodoloji müəyyənlik verir.

ISO 29992 nələri əhatə edir?

ISO 29992 tələbləri aşağıdakı əsas fəsillərə bölünür:

  • Fəsil 1 Standartın tətbiq dairəsi göstərilmişdir. İki əsas tətbiq qeyd olunur: (1) fərdi tələbə nəticələrinin ölçülməsi və (2) təlim irəliləyişinin müəyyən edilməsi.
  • Fəsil 2 digər standartlara istinadlara istinad edir (bunlar ISO 29992:2021 standartında mövcud deyil).
  • Fəsil 3 diaqnostika/performans ölçülməsi ilə əlaqəli bir sıra texniki terminləri müəyyən edir.
  • Fəsil 4 Bu standart diaqnostik alətlərin planlaşdırılması ilə bağlı xüsusi tövsiyələr verir (mətndə ardıcıl olaraq "qiymətləndirmə" adlanır). DIN ISO 29992:2021-04 standartına əsasən, planlaşdırma mərhələsinə ehtiyacların təhlili, resurs planlaşdırma sənədləri və diaqnostik alətin tətbiq dairəsi haqqında məlumatları özündə əks etdirən çərçivə sənədi; alət əsasında verilən qərarlar; nəticələrinin təfsiri; diaqnostik alətdən istifadənin nəzərdə tutulan nəticələri; alətin məqsədləri ilə istifadə olunan qiymətləndirmə metodologiyası arasındakı əlaqə; nəticələr, onların təfsirləri, istifadəsi və nəticələri arasındakı əlaqə; test nəticələrinin çatdırılması; istifadə şərtləri, cədvəlləşdirmə və xərclər; qiymətləndirmə prosedurları; qiymətləndirmə mühiti (məsələn, yerlər); qiymətləndirmədə iştirak üçün ilkin şərtlər və təlim nəticələrinin qiymətləndirilməsində istifadə olunan alətlər və metodlar üçün tətbiq olunan standartlar; keyfiyyətə təminat prosedurları; qiymətləndirmənin hazırlanmasında və/və ya tətbiqində iştirak edən maraqlı tərəflər; diaqnostik alət üçün əməliyyat planı; və prosedur qaydaları, eləcə də diaqnostik alətin mövcudluğu və test spesifikasiyası tələblərinin əhatə dairəsi dərəcəsi daxil edilməlidir.
  • Fəsil 5 Burada diaqnostik alətin hazırlanması üçün bir sıra tövsiyələr var. Bunlara alətin istifadə müddəti (təlim prosesindən əvvəl, təlim prosesində və ya sonra), test tərtibatçılarının ixtisasları, test tapşırıqlarının/imtahan suallarının formatı və diaqnostik alətin tətbiqi üçün məkan, zaman, təşkilati və texniki xüsusiyyətlər kimi aspektlər daxildir. Bundan əlavə, o, obyektivlik, etibarlılıq və validlik kimi test keyfiyyət meyarlarına dair rəhbərlik verir; test tapşırıqlarının/imtahan suallarının hazırlanması prosesi; diaqnostik alətin nəticələrinin müəyyən edilməsi prosedurları; nəticələrin necə və nə vaxt çatdırılması üçün çərçivə; nəticələrə etiraz etmək prosedurları; və texniki sənədləşmə tələbləri.
  • Fəsil 6 Bu, diaqnostik alətin inzibati aspektlərinə yönəlmişdir. Bunun aspektlərinə tətbiq üçün təlimatlar; test təhlükəsizliyini təmin etmək planı; diaqnostik alətin tətbiqinə nəzarət edən şəxslərin ixtisasları və məsuliyyətləri; və qiymətləndiricilərin ixtisasları daxildir.
  • Fəsil 7 Bu, diaqnostik alətin əməliyyat istifadəsinə aiddir. Əməliyyat istifadəsinə aid sənədlər, məsələn, etibarlılıq və etibarlılıq sübutları; diaqnostik alətin tətbiqi qaydaları; və test-metodiki keyfiyyətin idarə edilməsi və əlaqəli proseslər üçün statistik prosedurlar tələb olunur. Bundan əlavə, 7-ci fəsildə mövcud diaqnostik prosedurun necə davamlı olaraq yenidən nəzərdən keçiriləcəyi və daha da inkişaf etdiriləcəyi barədə ətraflı plan tələb olunur.
  • Fəsil 8 Bu bölmə ədalət məsələsinə toxunur. Bu baxımdan, diaqnostik alət təminatçısı ilə test namizədləri arasında bağlanacaq rəsmi müqavilə kimi xüsusiyyətləri müəyyən edir. Bu müqaviləyə, məsələn, test haqları, iştirak edən tərəflərin hüquq və vəzifələri, iştirak tələbləri, diaqnostik alətin təsviri, məlumatların qorunması məlumatları və müddətlə bağlı təfərrüatlar daxil edilməlidir. Fəsil 8 ayrı-seçkiliyin qadağan edilməsi; test namizədlərinin hüquqları; diaqnostik alətin neytrallığı; diaqnostik alətlə əlaqəli şəxslərin davranış qaydaları; və test namizədlərinə təqdim edilən məlumatlar da əlavə olaraq müzakirə olunur.
  • Fəsil 9 DIN ISO 29992:2021-04 standartı diaqnostik alətlərin istifadəsi ilə bağlı əlavə etik mülahizələri əhatə edir. Bu baxımdan, bütün tərəflərin məsuliyyətlərinin dəqiq müəyyən edilməsi tələb olunur. Bundan əlavə, diaqnostik alət haqqında doğru və dəqiq məlumat tələb olunur. Nəhayət, diaqnostik alət toplanmış məlumatların məxfiliyi, məlumatların qorunması və təhlükəsizliyi, eləcə də rabitə kanallarının təhlükəsizliyi kimi informasiya təhlükəsizliyinin müxtəlif aspektlərini təmin etməlidir. Nəticədə, rabitə idarəetmə sistemi də planlaşdırılmalı və sənədləşdirilməlidir.
  • Əlavə A Diaqnostik prosedur üçün texniki sənədlərdə strukturlaşdırılmış şəkildə toplanmalı olan məlumatları müəyyən edir. Buraya diaqnostik alətin bütün həyat dövrü ilə bağlı bütün sənədlər, alətin planlaşdırılması və hazırlanmasından tutmuş əməliyyat tətbiqinə qədər daxildir. Müvafiq sənədlərə ehtiyacların təhlili; diaqnostik alətin istifadəsi üçün çərçivə; qiymətləndirmə spesifikasiyaları; diaqnostik alətin idarə olunması üçün təlimat; iştirak edənlər üçün təlim təlimatı; qiymətləndiricilər üçün formalar; imtahançıların/qiymətləndiricilərin, nəzarətçilərin və s. ixtisas və təlimi üçün spesifikasiyalar; test elementlərinin hazırlanması prosedurları haqqında sənədlər; diaqnostik alətin test auditlərinin və validasiya tədqiqatlarının sənədləşdirilməsi; müntəzəm keyfiyyət təminatının sübutu; fərdi test elementlərinin psixometrik keyfiyyətinin sübutu; uyğun olmayan test elementlərinin aradan qaldırılmasına yönəlmiş prosedurların sübutu; nəticələrin əl ilə qiymətləndirilməsi üçün yoxlama və prosedurların sübutu; və canlı qiymətləndirmənin test spesifikasiyalarına uyğunluğunun sübutu. Maşın əsaslı qiymətləndirmələrin etibarlılığının sübutu; arbitraj və apelyasiya prosedurunun sübutu; və yenidən qiymətləndirmə halında prosedurun sübutu. Bu çox geniş sübut çeşidi diaqnostik alətin istifadəçilərinin onun tətbiqində necə dəstəklənməli olduğuna dair texniki sənədlərə dair tələblərlə daha da tamamlanır. Texniki məlumatların və sənədlərin saxlanması ilə bağlı təfərrüatlar standartın əsas hissəsini tamamlayır.
DIN ISO 29992-nin əsas üstünlükləri nələrdir?

DIN ISO 29992, Deutschtest.digital-a yalnız rəsmi keyfiyyət çərçivəsi təqdim etmir, həm də dil testlərimizin hazırlanması, idarə olunması və davamlı olaraq nəzərdən keçirilməsi üçün sistemli bir əsas yaradır. Bu standartın tətbiqinin əsas üstünlükləri xüsusilə aşağıdakı sahələrdə özünü göstərir:

Məcburi təhlükəsizlik arxitekturasının təmin edilməsi: Standart strukturlaşdırılmış təhlükəsizlik planı üçün tələbləri müəyyən edir. DIN ISO 29992 standartını tətbiq edən təşkilatlar sistematik olaraq manipulyasiyaya (saxtakarlığın qarşısının alınması) qarşı profilaktik tədbirlər həyata keçirməli və tapşırıqların bütövlüyünü, eləcə də müəyyən edilmiş proseslər vasitəsilə məlumat və şəxsiyyət təhlükəsizliyini qorumalıdırlar.

Həyat dövrünün idarə edilməsi vasitəsilə davamlı keyfiyyət təminatı: Davamlı texniki xidmət və monitorinq prosesi (texniki xidmət planı) tələb etməklə, ISO 29992 sınaq keyfiyyətinin uzunmüddətli təminatını dəstəkləyir. Standart birdəfəlik yoxlama əvəzinə, sınaq prosedurlarının davamlı qiymətləndirilməsini və təkmilləşdirilməsini keyfiyyət təminatının vacib komponenti kimi nəzərdən keçirir. Bu, sınaq keyfiyyətindəki dəyişikliklərin erkən müəyyən edilməsinə və empirik şəkildə dəstəklənən tədbirlər vasitəsilə düzəldilməsinə imkan verir.

Ümumi Avropa İstinad Çərçivəsi (CEFR) ilə texniki əlaqə: Standartın strukturu ümumi keyfiyyət tələblərini dil diaqnostikasına sistematik şəkildə köçürməyə imkan verir. Bu, ISO 29992 tələblərinin Ümumi Avropa Dillər İstinad Çərçivəsinin (CEFR) nəzəriyyəyə əsaslanan səriştə təsvirləri ilə əlaqələndirilməsinə və test nəticələrinin dil səviyyələrinə təyin edilməsinin başa düşülən şəkildə əsaslandırılmasına imkan verir.

Nəticələrin təfsiri və istifadəsinin şəffaf əsaslandırılması: ISO 29992 qiymətləndirmə nəticələri ilə onların təfsiri arasındakı əlaqənin aydın şəkildə təqdim edilməsini tələb edir. Bu, test nəticəsindən hansı nəticələrin çıxarıla biləcəyi və sertifikatın hansı məqsədlər üçün istifadə edilə biləcəyi barədə elmi cəhətdən başa düşülən təsvir üçün əsas təmin edir.

Elmi cəhətdən əsaslı validasiya arqumentinin əsası: ISO 29992-nin əsas üstünlüyü, müvafiq sübutların strukturlaşdırılmış şəkildə yaradılmasını və sənədləşdirilməsini dəstəkləməsidir. Psixometrik metodlarla birləşdirildikdə, bu, elmi cəhətdən əsaslı validasiya arqumentinin inkişaf etdirilə biləcəyi möhkəm bir dəlil bazası yaradır. Bu arqument, test nəticələrinin şərhinin və istifadəsinin şəffaf, anlaşıqlı və etibarlı peşəkar dəlillərlə əsaslandırılmasına imkan verir.

Sütun b) Müstəqil sertifikatlaşdırma orqanı

Məlumat qutusu / Tərif: Müstəqil sertifikatlaşdırma orqanı nədir?

Müstəqil sertifikatlaşdırma orqanı, təşkilatın müəyyən edilmiş keyfiyyət tələblərinə və ya standartlarına cavab verdiyini yoxlayan və təsdiqləyən xarici, qərəzsiz bir təşkilatdır. O, sertifikatlaşdırılmış təşkilatın öz fəaliyyətini qiymətləndirmir, əksinə sənədləşdirilmiş proseslərinin, strukturlarının və sübutlarının müstəqil auditini aparır. Bu xarici qiymətləndirmə əlavə etimad təbəqəsi yaradır, çünki keyfiyyət təminatı yalnız təşkilatın özünün məsuliyyəti deyil.

Müstəqil sertifikatlaşdırmanın əsas xüsusiyyəti qiymətləndirmə ilə sertifikatlaşdırma qərarı arasında fərqin olmasıdır. Proseslərin və sübutların nəzərdən keçirilməsi ekspert auditorlar tərəfindən həyata keçirilir, yekun sertifikatlaşdırma qərarı isə müstəqil qurum tərəfindən qəbul edilir. Bu, özünüqiymətləndirmədən və potensial maraqların toqquşmasından qaçınır, sertifikatlaşdırmanın obyektivliyini və etibarlılığını təmin edir.

Deutschtest.digital hansı müstəqil qurumla əməkdaşlıq edir?

Xarici keyfiyyət təminatı üçün müstəqil sertifikatlaşdırma orqanı DeuZert ilə əməkdaşlıq edirik . DeuZert sertifikatlaşdırma qərarlarının tam bütövlüyünə, etibarlılığına və qəbul edilməsinə zəmanət verir. İyirmi ildən çox təcrübəsi olan DeuZert təhsil və sertifikatlaşdırma sektorunda hərtərəfli ixtisaslaşmış biliklərə malikdir.

DeuZert tərəfindən müstəqil sertifikatlaşdırmanın üstünlükləri nələrdir?

DeuZert tərəfindən müstəqil sertifikatlaşdırmanın əsas əlavə dəyəri, tətbiq olunan proseslərin keyfiyyətinin yalnız təşkilatın özü tərəfindən qiymətləndirilməməsi, həm də xarici ekspert rəyinə məruz qalmasıdır. Bu, qərar qəbul edənlər üçün əlavə etimad səviyyəsi yaradır. Aşağıdakı aspektlər xüsusilə aktualdır:

  • İnstitusional müstəqillik və obyektiv qiymətləndirmə: DeuZert müstəqil sertifikatlaşdırma orqanı kimi fəaliyyət göstərir və şəffaf sınaq prosedurlarından istifadə edərək müəyyən edilmiş tələblərin yerinə yetirilməsini qiymətləndirir. Auditdən keçən təşkilatla xarici qiymətləndirmə orqanı arasındakı ayrılıq özünüqiymətləndirmənin qarşısını alır və sertifikatlaşdırma qərarının obyektivliyini gücləndirir.
  • Nəzarət auditləri vasitəsilə davamlı keyfiyyət təminatı: Tətbiq olunan prosedurların keyfiyyəti bir dəfə qiymətləndirilmir, müntəzəm yoxlamalar vasitəsilə davamlı olaraq izlənilir. Bu xarici nəzarət metodoloji və təşkilati tələblərin ardıcıl olaraq yerinə yetirilməsini və sonrakı inkişafların sistematik şəkildə nəzərdən keçirilməsini təmin edir.
Deutschtest.digital-ın DIN ISO 29992 standartına uyğun olduğunu hansı rəsmi sübut təsdiqləyir?

Audit prosesinin uğurla başa çatmasından sonra DeuZert bizə DIN ISO 29992 standartına uyğunluq sertifikatı verdi . Bu sənəd, Deutschtest.digital saytında alman dili bacarıqları sahəsində qiymətləndirmələrin planlaşdırılması, hazırlanması, aparılması və qiymətləndirilməsi üçün tətbiq olunan prosedurların standartın tələblərinə cavab verdiyini və müstəqil xarici auditin bir hissəsi kimi qiymətləndirildiyini təsdiqləyir.

Beləliklə, uyğunluq sertifikatı Deutschtest.digital şirkətinin sınaq proseslərini təlim nəticələrinin qiymətləndirilməsi üçün beynəlxalq səviyyədə tanınmış standarta uyğunlaşdırdığının rəsmi sübutudur. Bu sertifikat, test nəticələrinin şəffaflığını, müqayisəliliyini və keyfiyyətini təmin etmək üçün standartlara uyğun prosedurların sistemli şəkildə tətbiqini təsdiqləyir.

Sertifikata baxın

Sütun c) Müstəqil ekspertlər və auditorlar

Məlumat qutusu / Tərif: Auditorların rolu

Beynəlxalq standartlar qiymətləndirmə və sertifikatlaşdırma qərarlarının qəbul edilməsi arasında ciddi bir fərq qoyur. Test təşkilatının faktiki yoxlaması (audit) müstəqil, yüksək ixtisaslı auditorlar tərəfindən aparılır. Onlar empirik sübutları araşdırır, sistem arxitekturasını praktikada qiymətləndirir və nəticələrini audit hesabatında sənədləşdirirlər ki, bu da sertifikatlaşdırma orqanının sonrakı qərarı üçün neytral faktiki əsas kimi xidmət edir.

Deutschtest.digital-da auditləri kim aparır?

Nəzarət auditləri DeuZert adından fəaliyyət göstərən təcrübəli təhsil mütəxəssisləri, imtahançılar, auditorlar və qiymətləndiricilərdən ibarət şəbəkə tərəfindən aparılır. Bu yüksək ixtisaslaşmış komandanın istifadəsi proseslərimizin və sübutlarımızın qiymətləndirilməsinin yalnız inzibati deyil, həm də məzmun və dil test nəzəriyyəsi sahəsində ən yüksək səviyyədə təcrübə ilə həyata keçirilməsini təmin edir.

Sütun d) Audit proseduru haqqında qaydalar

Məlumat qutusu / Tərif: Audit prosesini tənzimləyən qaydalar hansılardır?

Audit qaydaları sertifikatlaşdırma orqanının auditi necə aparmalı olduğunu dəqiq müəyyən edən məcburi prosedur qaydalarıdır. Onlar özbaşınalığın qarşısını almaq və təkrarlana bilən audit keyfiyyətini təmin etmək üçün sənədlərin nəzərdən keçirilməsi, nümunələrin götürülməsi, müsahibələr və yerində və ya sistemdə aparılan auditlər prosesini tənzimləyir.

ISO 29992 standartına uyğun olaraq sertifikatlaşdırmaya hansı audit qaydaları tətbiq olunur?

ISO 29992 üçün audit proseduru DIN EN ISO/IEC 17065 ümumi standartının tələblərinə tabedir. Bu standart testin özünü deyil, sertifikatlaşdırma orqanının iş metodlarını, müstəqilliyini və səriştəsini tənzimləyir. Bu, xarici auditin kommersiya və ya daxili maraqların toqquşmasından azad olmasını təmin edir. Nəticə, şəffaf şəkildə sənədləşdirilmiş peşəkar və metodoloji təmələ əsaslanaraq, test və qiymətləndirmə proseslərinin standartlara uyğun tətbiqinin müstəqil xarici təsdiqidir.

Sütun e) Sübut

Dil bacarıqlarının düzgün qiymətləndirilməsi etibarlı məlumat bazası tələb edir. Test keyfiyyətinin sübutları əsasən aşağıdakı əsas sübut kateqoriyalarına əsaslanır:

1. Planlaşdırma və konsepsiya sənədləri

Bu sənədlər faktiki test inkişafı başlamazdan əvvəl strateji və müqavilə təməlini yaradır. Onlar hədəf qrupunun sistematik ehtiyac təhlillərini, eləcə də testin dəqiq məqsədi ilə bağlı məcburi razılaşmaları sənədləşdirir.

2. Spesifikasiya və tapşırıqların nəzərdən keçirilməsi sənədləri

Bu kateqoriyaya məzmun keyfiyyətinin təminatı üçün ətraflı planlar və test protokolları daxildir. Onlar hər bir fərdi test maddəsinin texniki spesifikasiyalara və hədəf CEFR səviyyəsinə cavab verdiyini nümayiş etdirir.

3. İdarəetmə və təhlükəsizlik sənədləri

Onlar bütün imtahan məntəqələrində tamamilə vahid, standartlaşdırılmış və müdaxiləyə davamlı imtahan prosesini təmin edirlər. Buraya nəzarətçilər üçün təlimatlar, namizədlərin ciddi şəxsiyyət yoxlamaları və ətraflı İT təhlükəsizlik planları daxildir.

4. Qiymətləndirmə və bal vermə protokolları

Bu sənədlər balların obyektiv, səhvsiz və qərəzsiz verilməsini tənzimləyir. Onlar cavab açarlarını, imtahan verənlər üçün qiymətləndirmə qaydalarını və avtomatlaşdırılmış qiymətləndirmə prosedurlarının dəqiqliyinə dair sübutları ehtiva edir.

5. Kvalifikasiya və təlim sertifikatları

Onlar bütün test və qiymətləndirmə işçilərinin peşəkar, akademik və diaqnostik ixtisaslarını nümayiş etdirir. Bundan əlavə, vahid qiymətləndirmə standartlarını təmin etmək üçün sistemli təlim və müntəzəm təkrar kurs konsepsiyasını sənədləşdirirlər.

6. Keyfiyyət və təsdiq hesabatlarının empirik sübutları

Onlar testin faktiki psixometrik keyfiyyəti üçün elmi və statistik dəlillər təqdim edirlər. Bunlara ölçmə dəqiqliyi (etibarlılıq), alt qruplar arasında ədalətlilik və nəzəriyyəyə uyğun ölçülü struktur üzrə hesablamalar daxildir.

7. Texniki xidmət və düzəliş prosesləri

Bu proseslər davamlı keyfiyyət monitorinqini və əməliyyat zamanı testlərin müntəzəm olaraq yenilənməsini idarə edir. Onlar sərf olunan materialların vaxtında və standartlaşdırılmış şəkildə dəyişdirilməsini təmin etmək üçün tapşırıqların həyat dövrü üçün statistik metrikləri müəyyən edir.

8. Ədalət, ədalət və apelyasiyalar

Onlar bütün proses boyunca imtahan namizədlərinin hüquqlarını, ləyaqətini və müdafiəsini qoruyurlar. Buraya şəffaf apelyasiya və şikayət qaydaları, asanlıqla başa düşülən istifadəçi dəstəyi və ciddi məlumat təhlükəsizliyi konsepsiyaları daxildir.

2. Sübut bazasından validasiya arqumentinə: Test şərhlərinin elmi əsaslandırılması

Keyfiyyət təminatı arxitekturasında yaradılan dəlillər əvvəlcə test prosedurunun keyfiyyəti və funksionallığı ilə bağlı fərdi dəlilləri təşkil edir. Yalnız onların validasiya arqumentinə sistematik inteqrasiyası vasitəsilə şəxsin dil səriştəsi ilə bağlı konkret bir ifadənin test nəticəsindən nə üçün əldə edilə biləcəyi üçün başa düşülən bir əsaslandırma ortaya çıxır.

Doğrulama arqumenti nədir?

Əgər test tərtibatçıları elmi keyfiyyət meyarlarını ayrıca nəzərdən keçirsələr, testin ümumi məntiqini və məqsədini gözdən qaçırmaq riski daşıyırlar. Dil testinin keyfiyyəti yalnız fərdi tapşırıqlardan və ya statistik parametrlərdən deyil, test prosedurunun bütün komponentlərinin qarşılıqlı təsirindən irəli gəlir. Buna görə də müasir dil testi tədqiqatlarında testin etibarlılığı - digərləri ilə yanaşı, Baxman və Palmer, Maykl Keyn və Kerol Şapelin işləri tərəfindən də təsirlənərək - hərtərəfli və çoxölçülü keyfiyyət konsepsiyası kimi başa düşülür. Əsas sual fərdi keyfiyyət meyarlarının yerinə yetirilib-yetirilməməsi deyil, test nəticəsindən çıxarılan nəticələrin ümumilikdə əsaslandırıla bilməsidir.

Bu sual xüsusilə vacibdir, çünki dil testlərinin nəticələri çox vaxt təhsil, karyera və rezidentura qərarları üçün genişmiqyaslı nəticələrə malikdir. Buna görə də test təminatçıları xüsusi peşəkar və etik məsuliyyət daşıyırlar. Onlar yalnız test prosedurlarının keyfiyyətini təmin etməməli, həm də bu keyfiyyəti şəffaf şəkildə nümayiş etdirə bilməlidirlər. Müasir validlik tədqiqatlarında sözdə validlik arqumenti anlayışı məhz bu ehtiyacdan irəli gəlmişdir.

Tarixən bu yanaşma 1990-cı və 2000-ci illərdə əvvəllər çox mücərrəd olan və real dünya test təcrübəsi üçün az konkret rəhbərlik təklif edən elmi etibarlılıq modellərinə qarşı çığır açan bir cavab olaraq ortaya çıxmışdır. Amerikalı tədqiqatçı Maykl Keyn filosof Stiven Toulminin praktik arqumentasiya nəzəriyyəsini test nəzəriyyəsinə tətbiq etmişdir. Məşhur dilçi Kerol Şapelle sonradan bu məntiqi xüsusilə dil testi tədqiqatları üçün inkişaf etdirmişdir - o, 2008-ci ildən başlayaraq TOEFL iBT-nin qabaqcıl təsdiqlənməsi ilə dünyaca məşhurdur. O, modeli yeddi dəqiq nəticə çıxarma addımından ibarət sorunsuz bir zəncir halına gətirmişdir ki, bu da bu gün test şərhlərinin sistematik əsaslandırılması və sənədləşdirilməsi üçün mövcud olan müasir bir yanaşmanı təmsil edir.

Bu yanaşmanın əsas faydası dil testi təşkilatlarını sadəcə "sertifikat verənlər"in passiv rolundan azad etməkdir . Sadəcə olaraq, akkreditasiya orqanlarına və ya nazirlik qərar qəbul edənlərə nizamsız fərdi sənədləri və ya sərt yoxlama siyahılarını təqdim etmək əvəzinə, test təminatçıları artıq aktiv, proaktiv "müdafiə rolu "nu öz üzərinə götürə bilərlər. Bu, onlara imtahanlarının etibarlılığını, ədalətliliyini və hüquqi müəyyənliyini qərar qəbul edənlərə müstəqil, şəffaf və elmi cəhətdən təkzibolunmaz şəkildə mübahisə etdirməyə və bunu sistematik şəkildə qurulmuş sübutlar zənciri vasitəsilə özləri sübut etməyə imkan verir.

Beləliklə, təsdiqləmə arqumenti test nəticələrinin etibarlılığını əsaslandırmaq üçün istifadə edilən bu strukturlaşdırılmış yanaşmanı təsvir edir. Başlanğıc nöqtəsi hər bir testin bir şəxsin dil biliyi ilə bağlı bir iddia irəli sürməsi fərziyyəsidir. Məsələn, bir şəxsə Ümumi Avropa Dillər Çərçivəsinin (CEFR) B1 səviyyəsi təyin edilibsə, bu, onun bu səviyyə üçün müəyyən edilmiş dil bacarıqlarına sahib olduğunu göstərir. Təsdiqləmə arqumenti bu iddianı sistematik şəkildə dəstəkləmək və anlaşıqlı şəkildə əsaslandırmaq vəzifəsini daşıyır.

Bu, test tapşırıqlarından tutmuş tətbiq və qiymətləndirmədən nəticələrin şərhinə qədər uzanan ardıcıl bir mühakimə zəncirinin qurulmasını əhatə edir. Hər bir fərdi addım üçün irəli sürülən fərziyyələrin əsaslandırıldığını nümayiş etdirmək üçün nəzəri əsaslar və empirik sübutlar (sözdə dəstək) istifadə olunur. Beləliklə, təsdiqləmə arqumenti elmi sübutları praktiki test qərarları ilə əlaqələndirir və müəyyən bir test nəticəsinin müəyyən edilmiş dil səriştəsinin mənalı sübutu hesab edilə biləcəyini şəffaflaşdırır. Bu yolla, dil testlərinin etibar, şəffaflıq və hüquqi məsuliyyəti üçün əsas yaradır.

Hansı məntiqi zəncir əlaqələri doğrulama arqumentini təşkil edir?

Dil testinin keyfiyyətinə dair təkzibolunmaz peşəkar sübutlar təqdim etmək üçün müasir diaqnostika aydın məntiqi strukturdan istifadə edir. Yalnız bu yeddi səviyyənin hər biri üçün empirik dəlillər mövcud olduqda, test praktik tətbiq üçün tam etibarlı hesab olunur.

Praktik aktuallıq (sahənin tərifi): Bu ilk addım hədəf mühitdə (məsələn, gündəlik həyat, iş və ya təhsil) mövcud olan dil tələblərinin dəqiq təhlilini əhatə edir. Bu, testin yalnız nəzərdə tutulan məqsəd üçün mütləq zəruri olan bacarıqları (məsələn, inteqrasiya və ya əmək bazarına çıxış) qiymətləndirməsini təmin edir.
Obyektivlik və səhvsiz ölçmə (qiymətləndirmə): Bu sənəd performans qiymətləndirməsinin və test ballarının yaradılmasının ciddi və obyektiv qaydalara uyğun aparıldığını nümayiş etdirir. Standartlaşdırılmış şərtlər və statistik təhlillər balların mümkün qədər səhvsiz, şəffaf, müdaxiləyə davamlı və kənar fərdi təsirlərdən asılı olmamasını təmin edir. Beləliklə, hər bir iştirakçı eyni və ədalətli standartlara uyğun olaraq qiymətləndirilir.
Etibarlılıq (ümumiləşdirmə): Bu addım test nəticəsinin sabit olduğunu və təsadüfə əsaslanmadığını nümayiş etdirməyə xidmət edir. Yüksək ümumiləşdirilə bilənlik o deməkdir ki, nəticə sabit qalır - hansı tapşırıq variantından istifadə olunmasından, hansı imtahançının işi qiymətləndirməsindən və ya imtahanın hansı gündə keçirilməsindən tamamilə asılı olmayaraq.
Standart uyğunluq (bəyannamə): Burada test ballarının nəzərdə tutulan peşəkar mənanı dəqiq əks etdirdiyi elmi cəhətdən sübut edilmişdir. Əgər sertifikat "B1" səviyyəsini göstərirsə, performansın nəzəriyyəyə uyğun olaraq Ümumi Avropa Dillər Çərçivəsinin (CEFR) səriştə təsvirlərinə uyğun olduğu şübhəsiz empirik şəkildə sübut edilməlidir.
Proqnozlaşdırma gücü (ekstrapolyasiya): Bu, testin nəticələrinin real dünyada səriştəliliyin etibarlı göstəricisi olduğunu göstərir. Testdən keçənlər Almaniyada uğurla təhsil almaq və ya işləmək üçün lazımi dil bacarıqlarına malik olduqlarını nümayiş etdirirlər.
Qərarın dəqiqliyi (istifadəsi): Bu mərhələdə elmi əsaslı keçid balları müəyyən edilir. Bu, imtahandan "keçmək" qaydalarının ədalətli və uyğun olmasını təmin edir ki, nə ixtisaslı şəxslər ədalətsiz şəkildə bloklansın (yalan mənfi cavablar), nə də kifayət qədər bilik saxta təsdiqlənməsin (yalan müsbət cavablar).
Təsirin qiymətləndirilməsi (nəticələri): Nəhayət, test istifadəsinin ictimai və fərdi təsirləri qiymətləndiriləcək. Test prosedurunun uzunmüddətli perspektivdə müsbət, öyrənməni təşviq edən təsirlərə nail olduğuna və müəyyən insan qrupları üçün (məsələn, mənşəyinə və ya ana dilinə görə) heç bir sistematik mənfi təsirin yaranmadığına əmin olacaqsınız.
Deutschtest.digital-ın validasiya arqumentinin arxitekturası

Aşağıda, Alman dili biliklərinin qiymətləndirilməsi üçün validasiya arqumentimizin metodoloji arxitekturasını təqdim edirik. Validasiya arqumenti həmişə müəyyən bir hədəf sahəsinə, müəyyən edilmiş bir bacarıq səviyyəsinə və müəyyən bir məqsədə yönəldildiyindən, əsas dəlil bazası test nəticəsinin nəzərdə tutulan təfsiri və istifadəsi üçün xüsusi olaraq qurulmalıdır. Aşağıda təqdim olunan arxitektura, validasiya arqumenti daxilindəki fərdi nəticələrin (nəticələrin) necə əlaqəli olduğunu və nəticədə ortaya çıxan ifadələri elmi cəhətdən əsaslandırmaq üçün hansı növ dəlillərin (əsaslandırmaların) tələb olunduğunu göstərir. Bütün empirik və statistik dəlillərlə tam validasiya arqumenti bu təqdimatın əhatə dairəsini aşardı. Buna görə də, müvafiq dəlil sənədləri burada nümunə kimi verilmişdir.

1 Domen tərifi
İDDİA: Test tapşırıqları müvafiq dil bilik və bacarıqlarının yüksək etibarlı və dəqiq qiymətləndirilməsinə imkan verir. Tələb olunan dil funksiyaları hədəf sahədə real dünya dil istifadəsini yüksək səviyyədə təmsil edir və Dillər üzrə Ümumi Avropa İstinad Çərçivəsində (CEFR) müəyyən edilmiş səriştə sahələrinə uyğundur.
Kateqoriya Unser Qualitätsanspruch Sübut sənədi (əsas sənəd)
Domen təsviri Hədəf qrupun müvafiq linqvistik tələbləri və ünsiyyət vəziyyətləri dəqiq və tam şəkildə müəyyən edilmişdir. Hədəf domeninin spesifikasiyası
təmsil Test tapşırıqları tələb olunan məzmunu və idrak səviyyələrini düzgün nisbətdə əhatə etməklə test spesifikasiyalarında müəyyən edilmiş sahəni adekvat şəkildə təmsil edir. İmtahan Planı/Xəritəçəkmə Alətləri
Aidiyyət Test tapşırıqları məzmun baxımından aktualdır və istənilən səriştə səviyyəsinə dəqiq uyğunlaşdırılıb; ölçülən konstruksiyanın bir hissəsi olmayan uyğunsuz çətinlik mənbələrini ehtiva etmir. Məhsulun nəzərdən keçirilməsi protokolları, qiymətləndirmə vərəqlərindən istifadə edərək məhsulun qiymətləndirilməsi (CEFR səviyyəsinin yoxlanılmasının sübutu daxil olmaqla)
Qualitätskontrol İnkişaf prosesi, keyfiyyət çatışmazlıqları, qeyri-müəyyənliklər və ya mədəni qərəzlər nümayiş etdirən tapşırıqların mütləq yenidən nəzərdən keçirilməsini və ya ləğv edilməsini təmin edən sistematik redaksiya nəzarət mexanizmlərini əhatə edir. Məhsul keyfiyyətinə nəzarət protokolu (məhsul icmalı)

Elmi məlumat

Psixometrik və dil test nəzəriyyəsi ədəbiyyatında, məzmunun etibarlılığını təmin etmək və hədəf sahəsinin müvafiq təmsilçiliyini nümayiş etdirmək üçün test planlarından və xəritələşdirmə vasitələrindən istifadə məcburi metodologiyadır. Təhsil və Psixoloji Test Standartları, test elementlərini məzmun sahəsinə uyğunlaşdıran məntiqi bir struktur yaratmağı açıq şəkildə tövsiyə edir (xəritələşdirmə).

Bu əhatə dairəsini praktikada təmin etmək üçün Alderson (2005) test spesifikasiyalarını test və element müəlliflərinin testin konstruksiya etibarlılığını müəyyən etmək üçün əməl etməli olduqları "plan" kimi açıq şəkildə müəyyən edir. Fulcher və Davidson (2007) də test spesifikasiyalarına sözün əsl mənasında "generativ planlar" kimi istinad edirlər.

2 Qiymətləndirmə
İDDİA: Test nəticələri iştirakçıların imtahandakı fəaliyyətini yüksək ölçmə dəqiqliyi ilə dəqiq, obyektiv və qüsursuz şəkildə ümumiləşdirir.

Hissə 1: İdarəetmə Şərtləri və Müdaxilədən Mühafizə

Unser Qualitätsanspruch Sübut sənədi (əsas sənəd)
İmtahan qaydaları yüksək keyfiyyətlidir və ciddi şəkildə standartlaşdırılmış və vahid test idarəçiliyini təmin edən hərtərəfli və dəqiq qaydaları, eləcə də ədalətli və konstruksiyaya uyğun şərait (əlçatanlıq) üçün məcburi qaydaları özündə əks etdirir. Nəzarətçilər etibarlı identifikasiya prosedurlarından istifadə edərək namizədlərin şəxsiyyətini tətbiq olunan qaydalara uyğun olaraq birmənalı şəkildə təsdiqləyir və test mühitini (otaq nəzarəti) davamlı olaraq izləyir və bununla da etibarnamələrin və icazəsiz məlumat mübadiləsinin qarşısını struktur şəkildə alırlar. İmtahan qaydaları, qiymətləndirmələrin aparılması üçün təlimat - otaq nəzarəti və şəxsiyyətin təsdiqlənməsi
Müayinələrin şəxsən və ya rəqəmsal şəkildə keçirilməsindən asılı olmayaraq, müdaxiləyə davamlı müayinə mühiti icazəsiz vasitələrə girişin qarşısını etibarlı şəkildə alır və formata uyğun nəzarət mexanizmləri (fiziki nəzarət heyəti, təhlükəsiz brauzer, uzaqdan nəzarət) vasitəsilə fırıldaq cəhdlərini tamamilə aradan qaldırır. Fiziki və elektron təhlükəsizlik tələblərinin siyahısı, təhlükəsizlik qaydalarının pozulması halında təcili yardım planı, imtahan namizədləri tərəfindən icazəsiz fəaliyyətlərə qarşı əks tədbirlər

Test iştirakçılarının birmənalı şəkildə müəyyən edilməsi və test mühitinin sorunsuz monitorinqi istənilən qanuni cəhətdən əsaslı test prosedurunun mütləq şərtini (əsas şərt) təşkil edir. Təşkilati prosedurlar qüsurludursa və test verənin fiziki şəxsiyyəti testin göstəriciləri ilə birmənalı şəkildə əlaqələndirilə bilmirsə, məzmun və statistik etibarlılıqla bağlı bütün sonrakı ifadələr etibarsız olur.

2 və 3-cü hissələr: Qiymətləndirmə keyfiyyəti, protokollar və qiymətləndiricilər

Unser Qualitätsanspruch Sübut sənədi (əsas sənəd)
Bütün qiymətləndirmə metodları və nəticələrin qeyd edilməsi prosesi üçün dəqiq qaydalar və meyarlar mövcuddur və beləliklə, obyektivlik və prosedur etibarlılığı təmin edilir. CEFR istinad səviyyələrinə ("Can-Do" ifadələri) əsaslanan və müəyyən kontekstlərə uyğunlaşdırılmış qiymətləndirmə şkalaları ölçülən dil alt-səriştələrinin etibarlı göstəricilərini təmsil edir. Qiymətləndirmənin aparılması üçün təlimat kitabçası, qiymətləndirmə spesifikasiyaları kitabçası: sınaq proqramı üçün minimum tələblər, məhsuldar fəaliyyət üçün qiymətləndirmə meyarları.
İşə götürülmüş qiymətləndiricilər lazımi peşəkar ixtisaslara (məsələn, müvafiq universitet dərəcələrinə) və müvafiq didaktik təcrübəyə malikdirlər. Qiymətləndiricinin ixtisaslarına dair istinadlar
Sistemli təlim proqramı qiymətləndiricilərə qiymətləndirmə qaydalarını ardıcıl və dəqiq tətbiq etmək üçün lazımi bacarıqlar verir. Qiymətləndiricilərin təlim sertifikatları
Sistematik əl ilə keyfiyyətə nəzarət və ixtisaslı mütəxəssislər (insan-döngə) tərəfindən etibarlılıq yoxlamaları avtomatlaşdırılmış qiymətləndirmə proseslərinin dəqiqliyini və həll açarlarının düzgünlüyünü yoxlayır. Maşın qiymətləndirməsinin texniki emal dəqiqliyinin sübutu
İmtahan nəticələrinin qiymətləndirilməsi imtahan verənlərin fərdi sərtliyindən asılı deyil və müəyyən tapşırıqlara və ya insan qruplarına qarşı sistematik qərəzlərdən azaddır. Obyektiv qiymətləndirmə keyfiyyətinin təsdiqlənməsi (çoxşaxəli Raş təhlili)

Hədəf dəyərləri: 0,5 ilə 1,5 aralığında dəyərlərə uyğundur. Qarşılıqlı təsirlər əhəmiyyətli deyil (t ≤ 2,0).

Psixometrik və dil testləri nəzəriyyəsi ədəbiyyatında performans qiymətləndirmələrinin etibarlılığı standartlaşdırılmış, xarici cəhətdən möhkəmləndirilmiş meyarlara (meyarlara istinad edilən ölçmə) əsaslanmaq üçün tələb olunur. Subyektiv standartları istisna etmək üçün qiymətləndirmə şkalaları müəyyən edilmiş, nəzəriyyəyə əsaslanan istinad sistemi ilə dəqiq uyğunlaşdırılmalıdır.

Hissə 4: Empirik Keyfiyyət / Statistik Bütövlük

Unser Qualitätsanspruch Sübut sənədi (əsas sənəd) Psixometrik hədəf dəyərləri
Test tapşırıqları, daha yüksək və aşağı dil biliklərinə malik namizədləri effektiv və etibarlı şəkildə fərqləndirmək üçün kifayət qədər sual fərqinə malikdir. Statistik maddələr üzrə ayrı-seçkiliyin sübutu Hədəf seçim gücü (r) ≥ 0,50 (0,30 ilə 0,49 arasındakı dəyərlər məqbuldur). Ayrı-seçkilik indeksi (D) ≥ 0,40. Yayındırıcıların seçim tezliyi > 0 olmalıdır.
Test tapşırıqlarının çətinlik səviyyələri hədəf əhalinin bütün performans diapazonunu kifayət qədər əhatə edir. Müvafiq elementin çətinlik dərəcəsinin sübutu Hədəf diapazonu p-dəyəri 0,40 ilə 0,59 arasındadır (0,20–0,80 məqbuldur). Ümumi testin orta çətinliyi təxminən 0,50-dir.
Test tapşırıqları müvafiq alt qruplar arasında dəyişməz olaraq fəaliyyət göstərir (cinsə və ya ana dilinə görə qərəz yoxdur). Testin ədalətliliyinin təsdiqi (Differensial Maddə Funksiyası / DIF) Mantel-Haenszel proseduruna görə Diferensial Maddə Funksiyası (DİF) (A Kateqoriyası: ETS təsnifatına görə təhlükəsiz).
3 Ümumiləşdirmə
İDDİA: Test nəticələri, test namizədlərinin faktiki və sabit performansını yüksək etibarlılıq dərəcəsi ilə əks etdirir, çünki onlar konkret test versiyası və ya testi aparan şəxs kimi təsadüfi amillərdən açıq şəkildə müstəqildirlər.

Test formatları və tapşırıqları arasında uyğunluq

Unser Qualitätsanspruch Sübut sənədi (əsas sənəd) Psixometrik hədəf dəyərləri
Test formaları arasında uyğunluq: Test nəticələri müxtəlif test versiyalarında ardıcıldır (səviyyə sabitliyi). Test formasının ekvivalentliyinin keyfiyyətinin sübutu (paralel test etibarlılığı) Hədəf korrelyasiyası r ≥ 0,90 (dən) r ≈ 0,80 məqbuldur). əhəmiyyətli fərqlər olmadan t-test (p > 0,05).
Tapşırıqlar arasında ardıcıllıq: Test elementləri homojendir (daxili tutarlılıq). Daxili tutarlılığın və homojenliyin sübutu Kronbax alfa α ≥ 0,90 (0,80 - 0,89 məqbuldur). Qalan elementlərin ayrı-seçkiliyi ≥ 0,30.

Rəyçilər arasında ardıcıllıq

Unser Qualitätsanspruch Sübut sənədi (əsas sənəd) Psixometrik hədəf dəyərləri
Tək bir imtahançı tərəfindən imtahanın nəticələrinin qiymətləndirilməsi zamanla sabit və ardıcıl olur (mühakimələrin ardıcıllığı). Bundan əlavə, müxtəlif imtahançıların qiymətləndirmələrində dəqiqlik (neytrallıq) baxımından heç bir əhəmiyyətli fərq yoxdur. Mühakimələrin ardıcıllığına və neytrallığına dair empirik sübutlar Qiymətləndiricilərarası müqayisə: Əhəmiyyətli orta fərq yoxdur (p > 0,05). ICC və ya Kappa ≥ 0,90 (hədəf dəyəri).
4 İzahat
İDDİA: Test nəticələri, CEFR-in səviyyə təsvirlərində müəyyən edildiyi kimi, dil səriştəsinin əsas konstruksiyasını yüksək ehtimalla əks etdirir.
Unser Qualitätsanspruch Sübut sənədi (əsas sənəd) Psixometrik hədəf dəyərləri
Quruluş təmsilçiliyi: Test nəticələrinin daxili strukturu nəzəri olaraq müəyyən edilmiş konstruksiyaya (GER) uyğun gəlir. Konstruksiya ölçülülüyünün (EFA/CFA) empirik sübutları. KMO dəyəri ≥ 0,80. Uyğun dəyərlər: RMSEA ≤ 0,05, SRMR ≤ 0,08, CFI/TLI ≥ 0,95.
Nomoloji şəbəkə: Test nəticələri müəyyən edilmiş standartlaşdırılmış test prosedurları (xarici meyar) ilə əlaqəlidir. Meyarın etibarlılığının empirik sübutu (xarici meyar) Güclü, əhəmiyyətli korrelyasiya r ≥ 0,50 (p <0,05).
5 Ekstrapolyasiya
İDDİA: Dil testində qeydə alınan göstəricilər, namizədlərin real tətbiq vəziyyətlərində (məsələn, akademik tədqiqatlarda və ya gündəlik peşə həyatında) yüksək dərəcədə proqnozlaşdırma gücü ilə faktiki dil səriştəsi barədə etibarlı nəticələr çıxarmağa imkan verir.
Unser Qualitätsanspruch Sübut sənədi (əsas sənəd) Psixometrik hədəf dəyərləri / təhlili
Hədəf domen performans göstəriciləri: Test nəticələri praktikada hərəkət etmək qabiliyyəti ilə əlaqəlidir. Paralel etibarlılığı nümayiş etdirən sənəd (müəllim qiymətləndirməsi) / Proqnozlaşdırıcı etibarlılığı nümayiş etdirən sənəd (müvafiq mütəxəssislər tərəfindən praktiki təsdiqləmə) Aralığında korrelyasiyalar r Təxminən 0,30 ilə 0,50 arasında.
Performansın müqayisəsi: Test tapşırıqları və qiymətləndirmə meyarları hədəf sahənin müəyyən edilmiş standartlarına uyğundur. Ekspert qiymətləndirməsi vasitəsilə meyarların uyğunluğunun təsdiqlənməsi. Mövzu üzrə mütəxəssislərlə sistematik müqayisə (AERA, APA və NCME standartları).
Orijinallıq və yazışma: Giriş materialları və formatları tipik praktik tələblərə cavab verir. Vəziyyətin həqiqiliyinin təsdiqlənməsi (giriş təhlili). Struktur performans ekvivalentliyi (MANOVA). Qlobal test əhəmiyyətli deyil (p > 0,05).
Dil performansları orijinal performans nümunələrindən əhəmiyyətli struktur sapmalar göstərmir. Struktur performans ekvivalentliyinin (MANOVA) empirik sübutları.
Test iştirakçıları konstruksiya ilə əlaqəli idrak problem həll etmə strategiyalarını (təxmin etmək əvəzinə, həqiqi anlama) tətbiq edirlər. Konstruksiyaya uyğun zehni proseslərin sübutu (proses təhlili). -
6 istifadə
İDDİA: Test nəticələri CEFR əsaslı yerləşdirmə və sertifikatlarla bağlı ədalətli və obyektiv qərarlar qəbul etmək üçün etibarlı əsas təmin edir. Bundan əlavə, onlar dil tədrisinə hədəflənmiş dəstək üçün dəyərli diaqnostik məlumatlar təqdim edir.
Unser Qualitätsanspruch Sübut sənədi (əsas sənəd) Psixometrik hədəf dəyərləri
Uyğunluq / Faydalılıq: Maraqlı tərəflər (universitetlər, mühazirəçilər) nəticələri əsaslandırılmış qərarlar qəbul etmək üçün faydalı hesab edirlər. Test nəticələrinin praktik tətbiqinin sübutu. Ümumi dəqiqlik ≥ 0,90. Etibarlılıq indeksi (Livingston & Lewis) Φ ≥ 0,70.
Qərar qaydaları: Son ballar ixtisaslı standartlaşdırma prosedurunun nəticəsidir. Qiymətləndirmə çərçivəsi - Standartlaşdırma prosedurları / Qiymətləndirmə balları.
Təsnifat keyfiyyəti və ardıcıllığı: Təsnifatlar əsasən müstəqil istinad qiymətləndirməsinə uyğun gəlir. Təsnifatın dəqiqliyinin sübutu (kəsilmiş ballar).
Təfsir və ünsiyyət: Test nəticələri maraqlı tərəflər üçün aydın şəkildə şərh edilə bilər. Nəticələr hesabatlarının şərh edilə bilməsinin və faydalılığının təsdiqlənməsi.
Tətbiqin dəqiqliyi: Qərar qəbul edənlər fəaliyyətlərində müəyyən edilmiş qərar qaydalarını ardıcıl olaraq tətbiq edirlər. Tətbiqə riayət olunmasının sübutu. -
7 nəticələri
İDDİA: Test nəticələrinin istifadəsinin ədalətli təsnifatlara və giriş imkanlarına zəmanət verməklə yanaşı, tədris təcrübəsinə müsbət təsir göstərməklə bütün maraqlı tərəflər üçün müsbət nəticələrə səbəb olma ehtimalı yüksəkdir.
Unser Qualitätsanspruch Sübut sənədi (əsas sənəd)
Test istifadəsinin nəticələri əslində gözlənilən faydaları verir, mənfi yan təsirləri isə minimal olaraq qalır. Test nəticələrinin nəticələrinə dair sübutlar (İstifadəçi Faydası və Geri Qaytarma)
Test iştirakçılarının hüquqları, ləyaqəti və həssas məlumatları ciddi qaydalarla (şikayət prosedurları da daxil olmaqla) qorunur. Apelyasiya qaydaları, informasiya idarəetmə sistemi üçün təlimat
Testin tətbiqi təhsil sisteminə müsbət təsir göstərir (test strategiyaları əvəzinə bacarıqlara diqqət yetirin). Test nəticələrinin nəticələrinə dair sübutlar (makro təsir və sosial fayda)

Müasir test nəzəriyyəsində apelyasiya prosedurlarının və informasiya təhlükəsizliyi qaydalarının tətbiqi sırf inzibati akt kimi deyil, nəticə etibarilə etibarlılığı təmin etmək üçün məcburi metodoloji alət kimi qəbul edilir (bax: Messick, 1989; 1995). Tənzimlənən arbitraj proseduru konstruksiya ilə əlaqəsiz dispersiyanı müəyyən etmək üçün zəruri keyfiyyət əks-yoxlama kimi xidmət edir.

🔤 Dil