Praktické postřehy k významu statistické analýzy při tvorbě jazykových testů

Title Alternative:Praktyczne spostrzeżenia dotyczące znaczenia analizy statystycznej podczas opracowywania testów językowych
Simple item page
dc.contributor.authorHrbáčková, Jiřin
dc.contributor.authorBoháček, Milan
dc.date.accessioned2017-10-13
dc.date.available2017-10-13
dc.date.issued2013
dc.description.abstractTento příspěvek zkoumá informační přínos statistické analýzy jazykových testů Ekonomicko-správní fakulty Masarykovy univerzity, vytvořených pro úroveň C1 dle Evropského referenčního rámce, pro zvýšení validity a reliability těchto testů. Pro zpracování výstupů testů a získání hodnot průměru, obtížnosti testových položek, indexu diskriminace a Cronbachovo alfa s vyloučením dané položky bylo pro daný účel použito programu SPSS. Byla provedena analýza funkčnosti distraktorů pro úlohy typu výběr ze 4 možností. Testové položky nevyhovující stanoveným kritériím byly před novým kolem moderací změněny nebo upraveny. Očekáváme, že se statistická analýza, představující přínosný element při zkvalitňování testů a poskytující cennou zpětnou vazbu jejich tvůrcům, stane napříště nezbytnou součástí tvorby testů daného pracoviště.cs
dc.description.abstractW niniejszym artykule zbadano korzyści informacyjne wynikające z analizy statystycznej testów językowych Wydziału Ekonomiczno-Administracyjnego Uniwersytetu Masaryka, opracowanych dla poziomu C1 według CEFR, w celu zwiększenia stosowności i rzetelności tych testów. W celu opracowania wyników testów i pozyskania wartości średnich, ustalenia trudności zadań testowych, wskaźnika dyskryminacji oraz współczynnika rzetelności alfa (Alfa-Cronbacha) z wykluczeniem danego zadania zastosowano program SPSS. Przeprowadzono analizę funkcjonalności dystraktorów w zadaniach zamkniętych z wyborem z 4 odpowiedzi. Zadania testowe, które nie odpowiadały przyjętym kryteriom, zostały zmienione lub skorygowane przed ich kolejnym zastosowaniem. Oczekujemy, że analiza statystyczna, która jest przydatna w doskonaleniu testów i daje cenną informację zwrotną dla ich autorów, będzie następnym razem niezbędnym elementem w procesie tworzenia testów w danej placówce.pl
dc.description.abstractThis contribution is about the statistical analysis of tests developed at individual faculties of the Language Centre at the Masaryk University Brno. After conducting statistical analysis on sets of tests developed by the Faculty of Economics and Administration, the Faculty of Social Studies and the Faculty of Pedagogy, the argument for checking assumptions originally attributed to the tests, which had been liable to close scrutiny of teams of language teachers and pretested on students of the target population, turned out to be not only important but also hugely fascinating and worth in-depth investigation. While the analysis confirmed some of the original assumptions about individual test items as well as complete parts of tests, its evidence also shed light on those items calling for further revision and improvement. This paper will look at ways of how statistical analysis can help test developers make tests more reliable and at the same time alert us of pitfalls that we would not be aware of be it not for its insight.en
dc.description.abstractDieser Beitrag untersucht den informativen Nutzen der statistischen Analyse von Sprachtests der ökonomisch-juristischen Fakultät der Masaryk-Universität, die für das Niveau C1 nach dem europäischen Referenzrahmen erstellt wurden, um deren Validität und Reliabilität zu erhöhen. Zur Festlegung der Testgestaltung, der Erlangung eines Bewertungsdurchschnitts, des Schwierigkeitsgrades der Testaufgaben, des Diskriminationsindexes und des Cronbach-Alfa unter Ausschluss der gegebenen Position wurde zu diesem Zweck das Programm SPSS verwendet. Es wurde eine Analyse der Funktionalität der Distraktoren für Aufgaben des Typs „Auswahl aus vier Möglichkeiten“ durchgeführt. Die Testaufgaben, welche den festgelegten Kriterien nicht entsprechen, wurden vor der neuen Moderationsrunde geändert oder angepasst. Wir erwarten, dass die statistische Analyse, welche ein gewichtiges Element bei der Verbesserung der Teste darstellt und ihren Autoren eine wichtige Rückmeldung liefert, demnächst zu einem unerlässlichen Bestandteil der Testgestaltung am genannten Lehrstuhl wird.de
dc.formattextcs
dc.format.extent9 stran
dc.identifier.eissn1803-9790
dc.identifier.issn1803-9782
dc.identifier.otherACC_2013_3_05
dc.identifier.urihttps://dspace.tul.cz/handle/15240/21047
dc.language.isocs
dc.licenseCC BY-NC 4.0
dc.publisherTechnická univerzita v Liberci, Česká republikacs
dc.relation.isbasedonDOUGLAS, Dan. Understanding language testing. London: Hodder Education, 2010, ix, 156 s. ISBN 9780340983430.
dc.relation.isbasedonGREEN, Rita: Statistical Analyses for Language Testers. Palgrave Macmillan, 2013, 309 s. ISBN: 978-1-137-01828
dc.relation.isbasedonManual for relating Language Examinations to the Common European Framework of Reference for Languages (CEFR). [online]. Strasbourg: Council of Europe, Language Policy Division, January 2009, 200 s. [citováno 10. srpna 2013]. Dostupné na WWW: <http://www.coe.int/t/dg4/linguistic/Source/ManualRevision-proofread-FINAL_en.pdf>.
dc.relation.isbasedonAnalýza úloh. [online]. www.SCIO.cz s.r.o., © 2008 – 2011. [citováno 15. srpna 2013]. Dostupné na WWW: <http://www.scio.cz/vyzkum/tvorba_testu/thodnoceni/analyza.asp>
dc.relation.ispartofACC Journalen
dc.relation.isrefereedtrue
dc.titlePraktické postřehy k významu statistické analýzy při tvorbě jazykových testůcs
dc.title.alternativePraktyczne spostrzeżenia dotyczące znaczenia analizy statystycznej podczas opracowywania testów językowychpl
dc.title.alternativePraktische Beobachtungen zur Bedeutung der statistischen Analyse bei der Erstellung von Testsde
dc.title.alternativePractical observations on the role of statistical analysis applied to language test developmenten
dc.typeArticleen
local.accessopen
local.citation.epage45
local.citation.spage37
local.fulltextyesen
local.relation.issue3
local.relation.volume19
Files
Original bundle
Now showing 1 - 1 of 1
Thumbnail Image
Name:
ACC_2013_3_05.pdf
Size:
402.96 KB
Format:
Adobe Portable Document Format
Description:
Článek
Download
Collections
2013/3 - Social Sciences