Кузембекова Ж.Ж.

Казахский национальный университет имени аль-Фараби, Алматы

Результаты анализа дистракторов, составленных по стандарту ILR для разных уровней

Дистрактор – это ложная, отвлекающая альтернатива среди перечня возможных ответов на вопрос тестового задания. Иначе говоря, дистрактор – это готовый вариант ответа на закрытое тестовое задание, похожий на правильный ответ, но таковым не являющийся.

Слабыми в тестах с выбором ответа называют дистракторы, которые по статистике выбирают очень мало испытуемых, сильными – те, которые выбирают многие.

Рассмотрим примеры слабых и сильных дистракторов самого простого тестового задания.

На первое (1) задание первого уровня ответили 25 тестируемых и 6 из них ответили правильно. 13 из тестируемых выбрали вариант В, потому что этот ответ похож в озвучивании на часть предложения из текста: Сайыстың екінші күнінде орындаушылар қазақ әнін өз тілдерінде орындап шықты. По 3 тестируемых посчитали правильными варианты ответов С, D. Оказалось, что все дистракторы были выбраны, что свидетельствует о правильности их составления. Нужно отметить, что в этом тестовом задании дистракторы являются сильными, так как они составлялись по тексту и похожи по форме, их легко перепутать с правильным ответом. Поэтому тестируемые, прочитав внимательно текст и вникнув в его смысл, способны, не останавливаясь на похожих по форме словах и словосочетаниях, выбрать правильный вариант ответа.

Тапсырма: Өнер сайысы туралы мәтінді оқып, төмендегі сұрақтарға жауап беріңіз.

«Астана-Тілеп» әндер байқауы аяқталды

«Астана-Тілеп» халықаралық эстрадалық әндер байқауы өз жұмысын аяқтады. Екі күнге созылған өнер додасында әлемнің 14 елінен келген орындаушы өзара бақ сынасты. Сайыстың екінші күнінде орындаушылар қазақ әнін өз тілдерінде орындап шықты. Байқау қорытындысы бойынша, өз елінің әнін үздік орындағаны үшін итальяндық Массимо Бертачи жеңімпаз атанды. Ал қазақ әнін ерекше әрлеген филиппиндық Майк Джи арнайы сыйлыққа ие болды. Ал «Астана-Тілеп» халықаралық эстрадалық әндер байқауының гран-при жүлдесін грузиялық Нодико өз қанжығасына байлады.

(1) Байқаудың соңғы күні қатысушылар қандай ән айтты?

A. ана тілінде қазақ әндерін

B. қазақ тілінде өз әндерін

C. танымал әндерді әр тілде

D. қазақ әнін ағылшын тілінде

На высоком уровне сложности текста картина выбора дистракторов меняется. С вопросами сорокового (40) задания справляются только два тестируемых. Но, исходя из ответов на другие задания иных уровней догадываемся, что они выбраны наугад. Это подтверждается следующими фактами: а) оба тестируемых не могли ответить правильно на легкие вопросы, а на трудные – выбрали нужный дистрактор.; б) они же не смогли выполнить тридцать девятое (39) задание по этому же тексту; в) даже тестируемый с самой высокой компетенцией (62,50%) не смог правильно ответить на этот вопрос.

Итак, дистракторы тридцать девятого (39) и сорокового (40) задания очень сильные, а вопросы ориентированы на высокий уровень владения казахским языком и способность тестируемого воспринимать философскую концепцию автора текста.

Тапсырма: Абайдың қарасөзін оқып, төмендегі сұрақтарға жауап беріңіз.

Қазаққа ақыл берем, түзеймін деп қам жеген адамға екі нәрсе керек.

Әуелі – бек зор өкімет, жарлық қолында бар кісі керек. Үлкендерін қорқытып, жас балаларын еріксіз қолдарынан алып, медреселерге беріп, бірін ол жол, бірін бұл жолға салу керек, дүниеде көп есепсіз ғылымның жолдары бар, әрбір жолда үйретушілерге беріп сен бұл жолды үйрен, сен ол жолды үйрен деп жолға салып, мұндағы халыққа шығынын төлетіп жіберсе, хәтта қыздарды да ең болмаса мұсылман ғылымына жіберсе, жақсы дін танырлық қылып үйретсе, сонда сол жастар жетіп, бұл аталары қартайып сөзден қалғанда түзелсе болар еді.

Екінші – ол адам есепсіз бай боларға керек. Аталарын паралап, балаларын алып, бастапқы айтқандай жолға салып, тағлым берсе, сонда түзелер еді.

Енді мұндай халықты еріксіз қорқытып көндірерлік күш-қуат ешкімге бітпейді. Ол баланы қазақтың бәрін паралап көндірерлік дәулет бір кісіге бітуге мүмкін де емес.

Қазақты я қорқытпай, я параламай, ақылменен не жырлап, не сырлап айтқанменен ешнәрсеге көндіру мүмкін де емес. Етінен өткен, сүйегіне жеткен, атадан мирас алған, ананың сүтіменен біткен надандық әлдеқашан адамшылықтан кетірген. Өздерінің ырбаңы бар ма, пыш-пышы бар ма, гуілдегі бар ма, дүрілдегі бар ма – сонысынан дүниеде ешбір қызықты нәрсе бар деп ойламайды, ойласа да бұрыла алмайды, егер сөз айтсаң, түгел тыңдап тұра алмайды, не көңілі, не көзі алаңдап отырады. Енді не қылдық, не болдық!

(39)Абайдың осы қарасөзді жазуына қандай мәселе түрткі болды?

A. Кедейлердің тағдыры

B. Ұлттың жарқын келешегі

C. Байлардың озбырлықтары

D. Ата-аналардың сабырсыздықтары

(40) Абайдың осы қарасөзін оқи отырып, Абайдың замандастарына деген қандай сезімде екенін аңғаруға болады?

A. Аяушылық пен сынаушылық

B. Ашынушылық пен торығушылық

C. Шыдамдылық пен төзімділік

D. Толқымалы және екіұшты

Из вышеперечисленных примеров тестовых заданий – 1, 39, 40 – видно, что при выборе дистракторов любой разработчик тестовых заданий должен соблюдать ряд требований, принятых в современной мировой тестологии к дистракторам, используемым при создании тестовых заданий. На примере анализа выявленных ошибок в созданных и апробированных тестовых заданиях проиллюстрируем общие требования к дистракторам [1, 2]:

- все дистракторы должны быть правдоподобными, убедительными, привлекательными и внушающими испытуемому доверие, не должны содержать частичную правду;

- внешний вид и грамматическая структура дистракторов в пределах данного тестового задания должны быть подобными (аналогичными, похожими);

- тестовые дистракторы должны быть краткими и компактными; визуально все дистракторы должны быть, насколько это возможно, одинаковыми по длине, чтобы с первого взгляда, не вникая в смысл ответов, было неясно, какой из них является правильным;

- при формулировке дистракторов желательно избегать использования ключевых слов, так они могут служить подсказкой для испытуемого;

- нельзя использовать такие варианты ответов, как ни один из перечисленных, все перечисленные и другие, поскольку они способствуют угадыванию правильного ответа;

- все повторяющиеся слова включать в тестовое задание, но не использовать их в дистракторах;

- дистракторы должны содержать исключительно тот материал, который представлен в тексте, но не апеллировать к фоновым знаниям испытуемого, или содержать слова или термины, незнакомые тестируемому;

- все дистракторы следует грамматически и семантически согласовывать с основной частью тестового задания.

- формулировка основной части задания, должна быть лаконичной и законченной;

- в ответы целесообразно включать не более двух-трех важных ключевых слов, при этом правильный ответ не должен отличаться какими-либо формальными признаками от неправильных дистракторов;

- из текста задания исключаются все словесные ассоциации, способствующие выбору правильного ответа с помощью догадки и др.

Несоблюдение одного из этих критериев может привести к тому, что тестовое задание будет воспринято тестируемым неправильно и станет причиной неверной интерпретации тестового задания.

Литература:

1. Аванесов В.С. Композиция тестовых заданий: Учебная книга. – М.: Центр тестирования, 2002 – 240 с.

2. Челышкова М.Б. Теория и практика конструирования педагогических тестов: Учебное пособие. – М.: Логос, 2002. – 432 с.