Задачи с избираем отговор Людмила Зафирова Христина Сергеева 1. - презентация

1 Задачи с избираем отговор Людмила Зафирова Христина Сергеева 1

2 Видове (формати) Има различни видове задачи с избираем отговор. Ще разгледаме някои от тях, придружени с примери. 2

3 3 Задачи с избираем отговор – класически вид Условие и коректно поставен въпрос. Няколко възможности за отговор, от които точно един е правилният. Той не зависи от субективна преценка. Останалите отговори – дистрактори. Два начина за поставяне на условието: като въпрос; като незавършено изречение. Когато задачата не подлежи на превод или друга адаптация, няма обективни причини да бъде предпочетена.

4 Пример – условие, зададено като незавършено изречение Глаголът ИГРАЯ е в а) бъдеще време. б) сегашно време. в) минало свършено време. г) минало несвършено време. 4 условие дистрактор правилен отгов ор

5 Пример – условие, зададено като въпрос В кое време е глаголът ИГРАЯ? а) бъдеще време б) сегашно време в) минало свършено време г) минало несвършено време 5 условие дистрактор правилен отговор

6 Правилният отговор... е обективно правилен (неговата правилност не зависи от гледната точка на отговарящия или друг субективен критерий); може да е дума, фраза, изречение, понякога чертеж, снимка... 6

7 Дистракторите... без никакво съмнение да са грешни. Всеки дистрактор да е възможен отговор за тези, които не притежават знания/умения да решат задачата. Всеки дистрактор да не е възможен отговор за тези, които притежават знания/умения да решат задачата. Да са типични грешки, които се допускат при решаване на задачата. Да са еднотипни по външен вид с правилния отговор. Писането на дистракторите е най-трудната част от съставянето на тестова задача. 7

8 Брой на възможностите за отговор От 3 до 5. Няма общо правило за това какъв да бъде общият брой на дистракторите. Признак на добър стил обаче е, ако всички задачи от теста съдържат еднакъв брой дистрактори. В противен случай човек остава с впечатление, че авторът е поставил толкова дистрактора, колкото е могъл да измисли, а не колкото трябва. 8

9 Брой на възможностите за отговор Дава статистическата вероятност за налучкване. Пример: при задачи с 3 възможности за отговор вероятността да се налучка правилен отговор на една задача е 0,33; на две задачи е 0,11; на три задачи – 0,04; на четири задачи – 0,01; на пет задачи – 0,004. Това е така, ако вероятността да се избере всеки дистрактор е една и съща, което на практика не е вярно.

10 Брой на възможностите за отговор Изследванията показват, че в голяма част от случаите 3 възможности за отговор са напълно достатъчни. Трудно се правят повече от 2 работещи дистрактора. Традицията да се пишат 4 или 5 възможности за отговор е много силна, затова тези задачи са преобладаващи. 10

11 Недостатъци на задачите с избираем отговор (класически вид): Една от основните критики е, че правилният отговор може да се налучква. Създадени са различни начини, за да се намали/избегне този недостатък. Важно е винаги да се има пред вид вероятността за налучкване на всяка задача и на процента правилни отговори, получени с налучкване. 11

12 Задачи за съответствие Няколко опции/условия, инструкция как да се отговори. С една инструкция поставяме няколко задания, вместо да я повтаряме няколко пъти. Удобни са за оценяване на разбиране на понятия и принципи. Броят на опциите и на условията не е нужно да е един и същ. Опциите трябва да са хомогенни. Не е добре да имаме например няколко опции имена на хора, а другите – имена на местности. (В следващия пример всички опции са имена на планети.) Изискването за хомогенност е обусловено от стремежа за по-висока дискриминативна сила на задачите. 12

13 Пример на задача за съответствие 13 На всяка чертичка в дясната колонка напишете съответната буква на планетата от лявата колонка, така че да се получат правилни твърдения. А. Меркурий Б. Венера В. Земя Г. Марс Д. Юпитер Е. Сатурн Ж. Уран З. Нептун ______ е най-далече от Слънцето. ______ е най-близко до Слънцето. ______ е най-близката до Земята планета. ______ е най-голямата планета. ______ е третата по големина планета. ______ е най-отдалечената от Слънцето вътрешна планета. ______ има пръстен от парченца лед и прах. ______ е единствената планета, на която има живот.

14 14 Пример на задача за съответствие Свържи със стрелки живите организми с техните приспособления за живот. Бъди внимателен! Възможно е да има организми, които да притежават повече от едно приспособление. орел заек бук мишка лисица кестен таралеж липа дъждовник скакалец защитна окраска листопад гъста козина зимен сън изострени сетива (слух, зрение и обоняние) бодли предупредителна окраска бяга бързо силни мускули остри зъби и нокти

15 15 Пример на задача за съответствие С помощта на географската карта определи къде се намират изброените градове. Свържи със стрелки! Дунавска равнина Горнотракийска низина Задбалкански котловини Сопот Пловдив Карлово Плевен Стара Загора Добрич Шумен Казанлък

16 16 Пример на задача за съответствие Свържи отделните части на изреченията, така че да получиш верни твърдения. Най-дългата планина в България е... Най-високата планина в България е... Най-обширната планина в България е... Рила Родопи Стара планина

17 17 Пример на задача за съответствие Какво е характерно за управлението на следните български владетели? Свържи със стрелки! хан Омуртаг хан Крум хан Аспарух създава първите писани закони създава Българската държава поощрява строителството

18 Задачи с алтернативен избор Това са задачи с две възможности за избираем отговор. Подходящи са, когато трудно може да се намери повече от един дистрактор. Ученикът трябва да сравни двете възможности. В този смисъл това не са задачи за вярно-невярно, при които ученикът трябва да работи по метода на контра примера. 18

19 Пример: Задача с алтернативен избор За всяко изречение изберете подходящата форма на глагола съм. 1.Вчера _____ (бях/съм) на кино. 2.За Коледа _____ (е/ще бъда) при родителите си. 3.Къде _____ (бяхте/ще бъда) седнали на концерта? 4.Кой _____ (са/е) твоят приятел? 5.Те _____ (сте/са) наши клиенти. 19

20 20 Пример: Задача с алтернативен избор Отбележете със знака онези дейности на човека, които помагат на природата да се възстановява, обогатява и развива, а със знака, тези, които и вредят. Изсичане на горите. Разрастване на градовете. Пестелива употреба на енергия. Използване на химически торове. Залесяване на нови горски площи. Пресушаване на блатата. Използване на предмети за еднократна употреба. Създаване на резервати. Увеличаване на броя на старите автомобили. Използване на енергията на слънцето, вятъра и водата. Използване на естествените неприятели на вредителите в селското стопанство.

21 Задачи с алтернативен избор Предимства: По-лесно се пишат. Изискват по-малко време; повече задачи могат се администрират за даденото тестово време; по- добро покриване на тематиката; по-голяма надеждност. Особено подходящи за оценяване в клас. Не е вярно, че са подходящи само за оценяване на ниски познавателни равнища. Недостатъци: Най-сериозният недостатък е голямата вероятност (50%) от налучкване на правилния отговор. Това означава, че средната трудност е около 75%. 21

22 Вярно-невярно Употребяват се повече в оценяването в клас и по-рядко в стандартизираните масови тествания. Разпространено е схващането, че оценяват тривиални знания. Следващият пример показва, че тези разбирания не са верни. 22

23 23 Пример: Кое от следните твърдения е вярно? Отбележете едно квадратче на всеки ред. ТвърдениеВярноНевярно Правоъгълните триъгълници са 6. Остроъгълните триъгълници са 5. Тъпоъгълните триъгълници 4. Равнобедрените триъгълници са 2. Разностранните триъгълници са 8. Равностранният триъгълник е един.

24 Предимства и недостатъци Сходни са с тези на задачите с алтернативен избор. Силно критикувани, но напоследък редица изследвания показват, че голяма част от критиките не са основателни. Основен недостатък е трудността при включването им в скалите за оценяване на теста. Особено внимание трябва да се обърне, ако има зависими условия. 24

25 Комплексни задачи с избираем отговор Дадени са няколко твърдения/въпроси. За всяко има няколко възможности за отговор, точно една от които е правилна. За всяко от тях ученикът избира правилният (според него) отговор. 25

26 Пример: Попълни таблицата като отбележиш със знака към коя група се отнася всяко от животните. Поставяй само по един знак на ред. група животно бозайнициптицивлечугиземноводнирибинасекоми гущер шаран смок делфин кълвач сврака калинка акула прилеп костенурка скакалец жаба

27 Предимства и недостатъци С едно и също условие могат да се зададат няколко въпроса. Възможно е да се използват за оценяване на по-високи познавателни способности. Основен недостатък е трудността при включването им в скалите за оценяване на теста. Особено внимание трябва да се обърне, ако има зависими условия. 27

28 Задачи с повече от един правилен отговор Понякога има задачи с избираем отговор с повече от един правилен отговор. Понеже всеки отговор на такива задачи е или правилен, или неправилен, може да се поставят за отговори комбинации от различни отговори. 28

29 Пример: Задача с повече от един правилен отговор Кои от изброените човешки дейности НЕ вредят на природата? 1. Добив на полезни изкопаеми 2. Залесяване 3. Създаване на паркове А.Само 1 и 2 Б.Само 2 и 3 В.Само 1 и 3 Г.Всичките 1, 2 и 3 29

30 Предимства и недостатъци По-трудни са от задачите с избираем отговор. По-трудно се съставят и редактират. Заемат много място на страницата. Изискват повече време. Имат по-слаба разграничителна сила. Могат да се елиминират някои възможности за отговор и то само чрез частично знание. 30

31 Съставни вярно-невярно задачи Състоят се от условие, последвано от известен брой фрази, някои от които са смислени/правилни, а други не са. Това е множество от тестови задачи, като броят им понякога може да е доста голям (десетки). Позволява администриране на много задачи наведнъж. 31

32 Пример: Съставни вярно- невярно задачи След всяко от написаните живи същества отбележете Р, ако е реално съществуващо и А – ако е абсурдно. 1. Водно млекопитаещо ____ 2. Риба с бял дроб ____ 3. Летящо млекопитаещо ____ 4. Амеба с определено място за уста ____ 5. Топлокръвно влечуго ____ 32

33 Предимства и недостатъци Избягват се някои недостатъци на комплексните задачи с избираем отговор. Показват добра валидност и надеждност. Ефективни са по отношение на съставянето, времето за четене, броя на поставените задачи. Налучкването е 50% - да се има пред вид при определяне на трудността. Ограничават оценяването на ниво разбиране, тъй като дават предимно примери и анти-примери. Да се внимава с взаимната зависимост. 33

34 Поредица от зависими задачи Представя се някакъв сценарий, част от разказ, проблемна ситуация и др. и се поставят редица задачи, свързани с нея. Стават все по-популярни, защото се подобряват начините на точкуване на тези задачи. В следващите слайдове са представени четири основни вида. 34

35 Разбиране на текст – пример Костенурка и заек спорели кой е по-бърз. Те определили мястото и разстоянието и се разделили. Заекът, като се осланял на вродената си пъргавина, не се постарал да бяга бързо, а легнал край пътя и заспал. Костенурката била наясно, че се движи бавно, затова тичала без почивка. Така надминала спящия заек и победила. Баснята показва, че често пъти с труд човек може да надмогне други, които нехаят, разчитайки на вродените си дарби Какъв е видът на текста? а) разсъждение б) описание в) повествование 2. Кое е най-подходящото заглавие на текста? а) Костенурката и заекът б) На разходка в) Костенурката 3. Какво е значението на думата ПЪРГАВИНА от текста? а) работливост б) спешност в) бързина 4. Коя от изброените думи е синоним на думата ОПРЕДЕЛИЛИ от текста? а) обсъждали б) уточнили в) разговаряли

36 36 Проблемни ситуации (problem solving) – пример Отговорете на въпросите, свързани с този опит. Разполагате с бутилка пълна с 500 мл вода и празен буркан от 800 мл. Температурата на въздуха е 25°C. Преливате всичката вода в буркана. 1. Какво се случва с количеството на течността? а) намалява б) увеличава се в) остава същото

37 37 Проблемни ситуации (продължение) 2. Какво се случва с обема на течността? а) намалява б) увеличава се в) остава същия 3. Кое свойство на вода се променя при този опит? а) маса б) обем в) форма

38 38 Линейно наредени задачи – пример Кое е вярно? Избери и подчертай правилната дума в текста. Република България е разположена в (А – североизточната; Б – югоизточната) част на Европа на Балканския полуостров. Тя е европейска, балканска, черноморска и дунавска страна. Това географско положение я поставя на кръстопът между континентите Европа и (А – Азия; Б – Америка). На (А – север, Б – юг) България граничи с Румъния. На (А – запад; Б – изток) със Сърбия и Македония. Гърция е нашата (А - югозападна; Б - югоизточна) съседка, а Турция осъществява връзката ни с Близкия Изток. Президент на държавата е (А – Пламен Орешарски; Б – Росен Плевнелиев).

39 39 Задачи,използващи нагледни материали На балкона на Катя е поставен термометър. В един пролетен ден тя решава да проследи как се изменя температурата на въздуха от сутринта до вечерта. Получените резултати от Катя са показани на долната графика.

40 40 Задачи,използващи нагледни материали 1. В колко часа темпера- турата на въздуха е най- ниска? а) 8 часа б) 10 часа в) 18 часа 2. Колко градуса Целзий е температурата в 18 часа? а) 16°С б) 17°С в) 18°С 3. Кога температурата се покачва най-бързо? а) между 8 и 10 часа б) между 10 и 12 часа в) между 12 и 14 часа 4. С колко градуса Целзий се понижава температура-та между 14 и 18 часа? а) 3°С б) 4°С в) 5°С

41 Видове формати – резюме 1.Класически задачи с избираем отговор 2.Задачи за съответствие 3.Задачи с алтернативен избор 4.Вярно-невярно 5.Комплексни задачи с избираем отговор 6.Задачи с повече от един правилен отговор 7.Съставни вярно-невярно задачи 8.Поредица от зависими задачи разбиране на текст проблемни ситуации линейно наредени ползващи нагледни материали 41

42 Резюме Най-използвани и ясни за оценяване: Класически задачи с избираем отговор Задачи за съответствие Задачи с алтернативен избор Съставни вярно-невярно задачи 42 По-малко се използват: вярно-невярно; задачи с повече от един правилен отговор; комплексни задачи с избираем отговор. Трудности с точкуването: поредица от зависими задачи; поради засиления интерес към оценяването на високи познавателни равнища, все повече се използват поредица от зависими задачи.

43 Предимства на задачите с избираем отговор Автоматично оценяване верността на отговора Липса на субективизъм Сравнително лесно се скалират (обработват) Дават възможност за получаване на богата база от данни В рамките на тестовото време могат да се дадат много задачи, т.е. извадката от задачи за областта е голяма. Това повишава съдържателната валидност. Показват сравнително добра конструктна валидност. Тези предимства са налице, когато задачите са добре направени от подготвени експерти. 43

44 Недостатъци (ограничения) на задачите с избираем отговор Не са подходящи за оценяване на психомоторни умения, творчески способности и др., например съставяне на оригинален текст. За целта се използват задачи със свободен отговор. Все пак задачите с избираем отговор могат да се използват за оценяване на някои основи на психомоторни умения. Например, граматика; знания за структурата на изречението и др. 44

45 Недостатъци (ограничения) на задачите с избираем отговор Съдържат неосъзната подсказка за правилния отговор. Това може да е вярно за лошо направени тестови задачи. Тестват тривиално съдържание. Това се забелязва при начинаещи съставители на задачи. Налучкване на правилния отговор. Това може да се провери с анализ на данните (лоши измерителни качества на задачите, ниска надеждност). 45