Informacije za donositelje odluka: Samopouzdanje u donošenje odluka temeljeno na dokazima putem moderne jezične dijagnostike
Kvalitetu jamči DeuZert® German Certification in Education and Business GmbH
Mi smo neovisna organizacija za jezične testove certificirana prema normi ISO 29992 za procjenu znanja njemačkog jezika na temelju Zajedničkog europskog referentnog okvira za jezike (CEFR) za različite ciljne skupine i područja primjene. Testove koje dizajniramo razvijamo, provodimo i evaluiramo interno. Radi osiguranja kvalitete surađujemo s neovisnim certifikacijskim tijelom DeuZert. DeuZert posluje u skladu sa zahtjevima norme ISO/IEC 17065, čime jamči integritet, vjerodostojnost i prihvaćanje svojih certifikata. S više od 20 godina iskustva i timom iskusnih stručnjaka za obrazovanje, ispitivača, revizora i ocjenjivača, DeuZert posjeduje sveobuhvatno stručno znanje u području certificiranja i osiguranja kvalitete. Nadalje, provodimo sustavna istraživanja i razvoj u području standardiziranih testova njemačkog jezika. Znanstvene studije provedene u ovom okviru pozitivno su ocijenjene od strane Njemačkog tijela za certificiranje istraživačkih potpora (BSFZ). Izdani certifikat potvrđuje da naš projekt ispunjava uvjete financiranja subvencioniranog istraživačko-razvojnog projekta u smislu njemačkog Zakona o istraživačkoj potpori.
Važna napomena za donositelje odluka:Dobrodošli! Vjerojatno pregledavate jezični certifikat našeg instituta. Razumijemo da odluke koje donosite na temelju rezultata naših testova imaju dalekosežne posljedice i zahtijevaju apsolutnu pouzdanost. U modernoj jezičnoj procjeni važni su samo mjerljiva kvaliteta i valjani podaci. Jezična procjena je egzaktna znanost – i upravo tako je i mi tretiramo. Stoga nam je cilj pružiti vam maksimalnu transparentnost i najbolju moguću znanstvenu osnovu za donošenje informiranih odluka.
Naš standard je ISO 29992 - Osam ključnih prednosti
S normom ISO 29992:2018 ("Procjena ishoda usluga učenja"), odbor za ISO standarde ISO/TC 232 "Usluge obrazovanja i učenja" objavio je 2020. godine standard namijenjen organizacijama koje pružaju usluge učenja, odabiru, koriste ili razvijaju procjene. Međunarodni standard ISO 29992 usvojio je kao nacionalni standard Njemački institut za standardizaciju (DIN) i objavljen je pod nazivom DIN ISO 29992. Standard formulira specifične zahtjeve za planiranje, razvoj i provedbu procjena te izričito uključuje procjenu jezične vještine (CEFR). Za razliku od isključivo psihometrijskih standarda (kao što su Standardi za obrazovno i psihološko testiranje), ISO 29992 prvenstveno proizlazi iz logike upravljanja kvalitetom usluga. Norma ISO 29992 služi kao naš sveobuhvatni instrument kontrole za osiguranje kvalitete jezičnih testova. Sustav testiranja temeljen na ovoj normi jamči donositeljima odluka sveobuhvatnu pravnu, institucionalnu i metodološku sigurnost. Sljedećih osam točaka ilustrira kako jezični certifikati temeljeni na normi ISO 29992 objektivno osiguravaju dalekosežne odluke o priznavanju:
Certifikaciju prema normi ISO 29992 dodjeljuju isključivo potpuno neovisna tijela za ispitivanje (kao što je DeuZert). Budući da ta tijela za certifikaciju djeluju isključivo unutar njemačkog i europskog pravnog okvira, podliježu sveobuhvatnoj institucionalnoj usklađenosti. Stoga je u slučaju sumnje u kvalitetu revizije ili u slučaju kršenja propisa uvijek dostupna lako dostupna, pravno odgovorna kontakt osoba u Njemačkoj.
Postupak revizije za ISO 29992 podliježe izuzetno strogim zahtjevima krovne norme DIN EN ISO/IEC 17065. Ova norma uređuje radne metode samog certifikacijskog tijela, čime se jamči apsolutna neovisnost i objektivnost vanjske revizije. To omogućuje službeno revidirani sustav koji je oslobođen unutarnjih sukoba interesa i osigurava maksimalnu neutralnost.
Dok se konvencionalni industrijski certifikati često dodjeljuju na razdoblja do pet godina – bez ikakvog daljnjeg obveznog praćenja kvalitete tijekom tog vremena – ISO 29992 zahtijeva godišnje nadzorne audite. Ova mala učestalost odražava znanstveno shvaćanje da se kvaliteta ispitivanja mora redovito pratiti, budući da se uvjeti ispitivanja i ciljne skupine stalno mijenjaju.
Standard se ne zaustavlja na metodološkim preporukama, već u odjeljku 6.2 nalaže sveobuhvatan sigurnosni plan. Ovaj plan regulira zaštitu od manipulacije (sprečavanje prijevara), strogi integritet zadataka i potpunu sigurnost informacija.
Ključna komponenta norme ISO 29992 je tzv. plan održavanja. On obvezuje pružatelja testova da sustavno prati valjanost i pouzdanost testa tijekom cijelog njegovog životnog ciklusa i da to dokaže empirijskim podacima. Budući da psihometrijska literatura naglašava da valjanost testa može s vremenom opadati, taj se pad suzbija sustavnim praćenjem – test se kontinuirano podupire novim dokazima i ostaje robustan dugoročno.
Standard obvezuje svoje korisnike da precizno definiraju temeljnu "domenu znanja" procjene. U slučaju jezične dijagnostike, to čini profesionalno ispravan i psihometrijski rigorozan razvoj neizbježnim. U ovoj fazi, apstraktna pravila kvalitete ISO standarda moraju biti precizno i obvezujuće prilagođena od strane organizacije za jezično testiranje procjeni jezične vještine (CEFR).
Norma ISO 29992, točnije odjeljak 4.4 (Okvir za procjenu), već nalaže apsolutnu transparentnost od strane programera testova na konceptualnoj razini. Izričito zahtijeva "objašnjenje odnosa između rezultata procjene i njihovih interpretacija, upotreba i posljedica". To točno odgovara najnovijoj znanstvenoj definiciji argumenta interpretacije i upotrebe (I/UA). Posljedično, pružatelj testa mora unaprijed precizno definirati što se mjeri, kako se rezultati tumače i za koje pravno valjane praktične primjene mogu koristiti.
Ako pružatelj testiranja dokazivo implementira definirane normativne zahtjeve zajedno sa specifikacijom za procjenu vještina njemačkog jezika, sustavno generira robusne empirijske dokaze. To mu zatim omogućuje korištenje postojećih podataka za aktivno konstruiranje koherentnog lanca zaključivanja: Zajedno sa zaključcima (tvrdnjama) koje je izričito formulirao pružatelj testiranja, proaktivni dokaz može se pružiti konstruiranjem cjelovitog argumenta validacije – najnovijeg međunarodnog zlatnog standarda u istraživanju testova. Praktični podaci i teorijska osnova testiranja tako se kombiniraju u samostalni sustav koji u potpunosti zadovoljava najmodernije zahtjeve istraživanja testova.
Naše obećanje kvalitete vama (argumenti za tumačenje i korištenje):Naši rezultati ispitivanja pružaju pouzdanu, objektivnu i pravno utemeljenu osnovu za donošenje pravednih i primjerenih odluka u vezi s klasifikacijama i certifikatima temeljenim na CEFR-u. Kako bismo osigurali da ovo obećanje upotrebljivosti bude više od puke tvrdnje, validiramo naše testove koristeći najnapredniju znanstvenu metodu dokaza u modernom istraživanju ispitivanja: argument validacije. Temelj ovog dokaza leži u našim strogim standardima kvalitete, koje jamčimo u svakoj fazi procesa ispitivanja.
Naši standardi kvalitete na prvi pogled
Praktični zahtjevi: Unaprijed analiziramo točno koji su jezični zahtjevi i komunikacijske situacije zaista važni za našu ciljnu skupinu u stvarnom životu.
Uravnotežen sadržaj: Osiguravamo da naša ispitna pitanja pokrivaju te zahtjeve na uravnotežen i realističan način.
Točne razine težine: Sve zadatke precizno prilagođavamo potrebnoj jezičnoj razini i izbjegavamo izvore pogrešaka koji nemaju nikakve veze s jezikom.
Stroga kontrola kvalitete: U razvoju zadataka koristimo višefazne mehanizme kontrole kako bismo strogo isključili bilo kakav oblik pristranosti povezane sa sadržajem ili kulturom.
Visoka diskriminacija: Razvijamo zadatke koji mogu statistički razlikovati jake i slabe jezične vještine s izuzetnom pouzdanošću.
Pristojan raspon usluga: Naši zadaci pokrivaju sve razine težine kako bismo svakog sudionika pravedno i točno klasificirali.
Jednake mogućnosti: Statistički pokazujemo da naši zadaci jednako dobro funkcioniraju za sve ljude - bez obzira na dob, podrijetlo ili materinji jezik.
Unutarnja konzistentnost: Jako pazimo da svi zadaci unutar dijela testa budu tematski dosljedni i da zajedno mjere točno jednu vještinu.
Prikladan vokabular: Osiguravamo da vokabular i gramatika testnih zadataka objektivno odgovaraju odgovarajućem ciljanom području.
Pravo razumijevanje umjesto nagađanja: Zadatke osmišljavamo na način da zahtijevaju istinsko kognitivno razumijevanje i ne mogu se riješiti pukim nagađanjem ili čistim strategijama testiranja.
Jedinstveni uvjeti: Sveobuhvatnim postupkom ispitivanja jamčimo jedinstven postupak u cijeloj Njemačkoj, kao i pravednu, reguliranu naknadu za nepovoljan položaj osoba s invaliditetom.
Nedvosmislena provjera identiteta: Pouzdano provjeravamo identitet sudionika i kontinuirano pratimo testno okruženje kako bismo u potpunosti isključili prijevaru putem proxyja.
Zaštita od prevare: Sprječavamo svaki pristup neovlaštenim pomagalima putem okruženja za testiranje otpornih na neovlaštene promjene i strogih kontrola.
Autentični materijali: U našim ispitima koristimo tekstove, grafiku i zadatke koji se također pojavljuju u stvarnom svijetu.
Zadaci koji podsjećaju na život: Od kandidata zahtijevamo reakcije i formate teksta koji su tipični za profesionalni ili akademski život.
Produkcija prirodnog govora: Sustavno provjeravamo odgovara li jezik koji se govori ili piše u testu prirodnom jeziku u stvarnosti.
Objektivno bodovanje: Sve rezultate ocjenjujemo prema fiksnim, preciznim pravilima, osiguravajući da je ocjenjivanje potpuno objektivno i transparentno.
Visokokvalificirani ispitivači: Zapošljavamo isključivo profesionalno obučene ispitivače kako bismo od samog početka isključili nekompetentne procjene.
Redovita kalibracija: Redovito obučavamo naše ispitivače kako bi uvijek dosljedno primjenjivali naše smjernice i bili oslobođeni osobnih utjecaja.
Kontrola "čovjek u petlji": Uvijek provjeravamo automatizirane i računalno potpomognute evaluacije od strane ljudskih stručnjaka kako bismo jamčili najvišu tehničku preciznost.
Individualna stabilnost ispitivača: Osiguravamo da ispitivač danas ocjenjuje jednako dosljedno i besprijekorno kao što će to činiti za identične rezultate u budućnosti.
Jedinstvena ozbiljnost procjene: Statistički uspoređujemo ocjene naših ispitivača, tako da nije važno tko ispravlja ispit.
Statistička prilagodba: Osobnu strogost ili blagost pojedinih ispitivača filtriramo pomoću složenih statističkih metoda (Raschove analize).
Europski standardi (GER): Koristimo ljestvice ocjenjivanja temeljene na Zajedničkom europskom referentnom okviru (CEFR) kako bismo na metodološki ispravan i transparentan način prikazali razlike u jezičnoj izvedbi.
Vremenska stabilnost: Osiguravamo da je rezultat testa uvijek pouzdan i da ne ovisi o slučajnim dnevnim fluktuacijama u obliku.
Jednake šanse u svakoj probnoj verziji: Jamčimo da su sve verzije testova koje koristimo potpuno iste težine i predstavljaju istu razinu.
Znanstveni dokazi: Pružamo podatke koji dokazuju da naši testovi točno mjere jezičnu vještinu navedenu na certifikatu.
Usporedba sa zlatnim standardom: Kvalitetu osiguravamo redovitom usporedbom rezultata naših testova s drugim globalno priznatim jezičnim testovima.
Visoka prediktivna moć: Dokazujemo da su naši certifikati pouzdan pokazatelj koliko dobro netko vlada jezikom u stvarnom životu (npr. tijekom studija).
Praktični kriteriji: Kandidate procjenjujemo prema standardima koji se stvarno zahtijevaju u stvarnom ciljanom okruženju (npr. na sveučilištima).
Potvrđena korisnost: Koristimo ankete kako bismo osigurali da donositelji odluka (npr. na sveučilištima) smatraju rezultate naših testova zaista informativnima i korisnima.
Pragovi prolaznosti u znanstvenom dijelu ispita (minimalni rezultati): Prolazne ocjene ne postavljamo proizvoljno, već ih određujemo precizno prema smjernicama CEFR-a koristeći kvalificirane stručne postupke.
Minimalne stope pogrešaka: Jamčimo da su naši bodovni pragovi kalibrirani tako precizno da se netočne odluke (npr. neopravdani neuspjeh) svedu na apsolutni minimum.
Jasna svjedočanstva: Naša izvješća o rezultatima i certifikate dizajniramo tako da budu jasni, transparentni i da ih svi donositelji odluka mogu bez pogrešaka interpretirati.
Zaštita od zlouporabe: Aktivno educiramo donositelje odluka o tome kako primijeniti rezultate kako se certifikati ne bi krivotvorili ili zloupotrijebili.
Individualne pogodnosti: Osiguravamo da naš certifikat omogućuje pravedno zapošljavanje sudionika i da nitko nije sustavno stavljen u nepovoljan položaj.
Stroga zaštita podataka: Štitimo dostojanstvo, prava i osjetljive podatke naših sudionika u skladu s najvišim sigurnosnim standardima i nudimo poštene postupke žalbe.
Pozitivan utjecaj na učenje: Naše ispite osmišljavamo na način da pozitivno utječu na poučavanje jezika i potiču stjecanje stvarnih vještina.