Измерване в образованието Людмила Зафирова Христина Сергеева 1

Обща характеристика на измерването Основна цел на измерването – да се получи информация. Събирането на информация става винаги на основата на сравнение. Измерването е съответствие между обектите и числата, при което на всеки обект се приписва число по някакво правило. 2

ОБЩА СХЕМА НА ИЗМЕРВАНЕТО В ОБРАЗОВАНИЕТО 3 ученически постижения числа f стимулиране наблюдаван ефект Тест Измерване на конструкт – ненаблюдаема педагогическа величина (четене, писане, творческо мислене, критично мислене, решаване на задачи)

Какво да разбираме под тест? Тест е инструмент за измерване и числово описание на познавателен конструкт. Тестът е така направен, че измерването става при едни и същи стандартизирани условия. Тестът се състои от тестови задачи, чиито отговори се изразяват с числа (брой точки). Подходяща комбинация от точките по отделните задачи дава тестов бал. 4

Тестът измерва... Знания – факти, понятия, принципи, процедури (алгоритми) Умения, свързани с прилагането на знания, извършването на някаква дейност, постигането на определена цел (извършване на аритметични действия, превръщане на мерни единици и др.) Знанията и уменията са основни компоненти на всеки познавателен конструкт. Примери за конструкт: Интелигентност, Творческо мислене, Критическо мислене, Решаване на задачи 5

Тестови спецификации Показват колко задачи трябва да има теста, какъв е техният формат, тяхното съдържание и какви мисловни процеси трябва да прояви ученикът при решаване на теста. Тестовите задачи се пишат съгласно тестовите спецификации. 6

Тестови спецификации Необходимост от: Ясно поставени измерителни цели: По отношение на учебното съдържание По отношение на познавателните равнища Определяне структурата на теста: Продължителност Формата на задачите Начин на оценяване 7

Съдържателна рамка Тя описва съдържателните и познавателните (когнитивни) области. Съдържателните области описват съдържанието, което се проверява с тестовите задачи. 8

Познавателни (когнитивни) области Какви логически процеси искаме да проверим? Каква активност изискваме от учениците по време на решаване на теста? Възможност за по-прецизен анализ на това, което оценяваме с теста. 9

Класификации на учебните цели Съществуват няколко различни класификации на учебните цели в зависимост от: мисловните процеси; крайния резултат; конкретното учебно съдържание. 10

Таксономия (научна класификация) на Bloom – 1956 г. Съгласно тази класификация, целите са разделят на шест основни групи: Знание Разбиране Приложение Анализ Синтез Оценка 11

Знанието Учебни цели, насочени към получаване, запаметяване и възпроизвеждане на фактическа информация – имена, дати, факти, термини, дефиниции и алгоритми. Поведенчески термини: изброява дефинира наименува назовава казва определя идентифицира 12

Задачи на ниво знание Те обикновено изискват от учениците да назоват, изброят, определят кой, кога, какво и колко е направил. Примери: През коя година е създадена българската държава? Кой е авторът на стихотворението Аз съм българче? Кои са главните части на изречението? Каква е скоростта на светлината? 6. 8 = ? 13

Конструиране на тестова задача на ниво знание Чрез използването на твърдение, чиято вярност трябва да бъде оценена от ученика. Верността на твърдението може да бъде проверена с въпрос, недовършено съждение или задача с изборен отговор. 14

Пример: Авторът на стихотворението Аз съм българче е Иван Вазов. 1. Кой е авторът на стихотворението Аз съм българче? Авторът на стихотворението Аз съм българче е Авторът на стихотворението Аз съм българче е: а) Ран Босилек б) Дора Габе в) Иван Вазов България се освобождава от турско робство през 1878 г. 1. Кога България се освобождава от турско робство? година 2. България се освобождава от турско робство през година. 3. България се освобождава от турско робство през: а) 1876 г. б) 1878 г. в) 1881 г. 15

Основни принципи при подбора на съждения: Формулировката на твърденията да е кратка, точна и ясна. Твърдението да е вярно според специалистите в съответната област. Твърдението да е важно от гледна точка на обучението на следващите етапи. Правилният отговор да е резултат от предходното обучение, а не да се дължи на широка обща култура. 16

Предимства: Лесни за съставяне – достатъчно е само предварително да се подберат подходящи твърдения и да се модифицират във вариант на недовършено изречение или въпрос. Недостатъци: Необосновано големият относителен дял на учебни цели от това равнище и съпътстващите ги въпроси и задачи силно намаляват положителната мотивация за учене. 17

Разбиране Трансформация на знанието, т.е. изразяването му по друг начин (превод от вербален към графичен или символичен начин на изразяване и обратното). Изисква сравнение, обобщаване, откриване на връзки и зависимости, разграничаване на съществени от несъществени признаци и др. Формулиране на прости правила от типа: ако..., то..., които са преки следствия от даденото. Преработка на информацията с цел осмисляне и логическо свързване с останалите ни знания. 18

Разбиране Поведенчески термини: сравнява демонстрира разграничава обобщава систематизира структурира пресмята измерва подбира обяснява опростява преобразува преформулира и др. 19

Разбиране Формиране на понятие: определяне на съдържанието на понятието (съществени признаци на изследваните обекти) чрез сравнение, абстрахиране, обобщение; определяне на обема на понятието (съотнасяне на обект с определение на понятие с цел установяване на принадлежност към съответното понятие); включване в общата понятийна структура. 20

Пример: Подчертайте сказуемото в изречението Аз купих мляко от магазина. За да реши задачата, ученикът трябва да: 1.Знае определението за сказуемо. 2.Преведе това определение на собствения си език, за да разбере смисъла му. 3.Сравни всяка от думите в текста със своето разбиране за понятието сказуемо, за да определи коя от тях му съответства. 4.Подчертае така определената в т. 3 дума. 21

Конструиране на тестови задачи по метода на П. Тиъмън и С. Маркъл: 1.Формулиране на съществените признаци. 2.Формулиране на несъществените признаци. 3.Съставяне на списък от обекти, които принадлежат към обема на даденото понятие (примери). 4.Съставяне на списък от обекти, които не принадлежат към обема на даденото понятие (контрапримери). Образуват се чрез пропускане на един (или няколко) от съществените признаци на понятието и вариране с несъществените. 5.Конструиране на тестова задача на основата на двата списъка. 22

Конструиране на тестови задачи по метода на П. Тиъмън и С. Маркъл: Общо правило: Добри задачи се получават, когато: контрапримерите са на основата на само един пропуснат съществен признак; примерите и контрапримерите са получени на основата на едни и същи или близки варианти на несъществени признаци. 23

Предимства на метода на П. Тиъмън и С. Маркъл: Осигурява генериране на практически неограничен брой примери и контрапримери на дадено понятие. Позволява да се конструират достатъчен брой задачи, за да се измери с необходимата степен на надеждност доколко е усвоено съответно понятие. 24

Пример: 25

Приложение: Нова ситуация Подбор на средства Изпълнение на процедура На това равнище ученикът знае кога и как да приложи даден метод, за да достигне до решението на дадена задача. Поведенчески термини: оперира прилага използва пресмята продуцира решава демонстрира манипулира подготвя изготвя разработва 26

Пример: 1 см Обиколката на фигурата е: а ) 10 см б) 20 см в) 24 кв. см г) невъзможно да се определи 27

Анализ Вземане на решения Индуктивни и дедуктивни умозаключения Откриване на тенденции и правене на хипотези и прогнози, базирайки се на открити зависимости Разграничаване на факти от мнения Поведенчески термини: прогнозира разделя разграничава свързва открива класифицира подрежда Систематизира Пример: Задача за 1.клас Кое е следващото число: 1, 3, 5, 7, 9, 11,...? 28

Прилики и разлика между разбиране и анализ Прилики: И при двете познавателни равнища често се налага сравнение, класификация и обобщение. Разлики: Разбиране Връзките, които следва да се открият са вече изучени, а обощенията, които се правят, изиск-ват само трансформация (превод, пренос) на полученото вече знание. Анализ Откриват се неявни, дъл- бочинни връзки в нова ситуация и резултатът е ново съждение (извод, умозаключение, хипотеза, прогноза). 29

Синтез Създаване на субективно нов продукт (напр.: есе, тема, съчинение, рисуване на картини, проверка на собствени хипотези, правене на модели...). Повече от едно решение на задачата. Проверка на творчески способности. Трудно се оценяват. Поведенчески термини: създава конструира планира проектира експериментира интерпретира комбинира композира генерира ревизира организира аранжира и др. 30

Оценка Оценката изисква: Знание за обекта Анализ на неговите характеристики Подбор на критерии за оценка Приложение на оценъчни умения Оценката включва в себе си в по-голяма или по-малка степен всички останали равнища. 31 Поведенчески термини: оценява сравнява Критикува аргументира защитава приема отхвърля подбира избира и др.

Типове задачи за оценка: 1. Да се оценят по предварително зададен критерий един или повече обекти. Напр.: Кой е най-бързият и лесен начин за решаване на задачата...? 2. Да се открие критерият, на основата на който е взето дадено решение. Напр.: Казват, че дърветата са белите дробове на природата. Защо? 3.Самостоятелно да се подбере най-подходящият критерий, с който да се оцени един или повече обекти. Напр.: Кой момент в приказката... ти харесва най-много и защо? 4.Общ критерий, който трябва да се преформулира така, че да се направи оценка на един или повече обекти. Напр.: Кой е най-добрият (общ критерий) детски писател? 32

33 Познавателни област и Причисляването на дадена задача към едно или друго познавателно равнище зависи и от учениците, към които тя е отправена. Всеки колектив изработва класификация, която най-добре отговаря на целите на оценяването.

34 Учебно съдържание Разпознаване и разбиране на факти и понятия Приложение Общуване. Аргументация Разпознава текста според сфера на употреба – художествен, разговорен, научен. + Използва речев етикет съобразно комуникативната ситуация. + Озаглавява текст, коментар на предпочетеното заглавие; определяне на темата на текста. + Ориентира се в сюжета, в обстановката на действие в художествения текст, възприемане на персонажа. + Част от съдържателната рамка по БЕЛ, 4 клас, 2009

35 Учебно съдържание Познаване на факти Изпълнение на алгоритми Разбиране и приложение Записване на естествени числа; десетична позиционна бройна система + Нареждане на естествени числа + Събиране на естествени числа с преминаване + Изваждане на естествени числа с преминаване + Умножение с едноцифрено число + Част от съдържателната рамка по математика, 4 клас, 2009

Част от съдържателната рамка по човекът и обществото, 4 клас, 2009 Ядро Очаквани резултати на ниво ДОИ за УС Брой задачи по познавателни равнища ЗРП Роден край Познава значението на семейството и рода + Различава училището като институция и общност + Различава основни държавни институции и органи на местната власт + 36

37 Тестова задача Основна градивна единица на всеки тест. Състои се от: Задание (въпрос) Условия, при които се изпълнява заданието (отговаря се на въпроса) Формат, в който искаме да получим отговор на заданието Начин за оценка (точкуване) Колкото по-добри тестови задачи имаме, толкова по-лесно е да се направи хубав тест.

38 Основни видове тестови задачи Задачи със свободен отговор (отворени) А. Задачи с кратък отговор Б. Задачи с разширен отговор Особености: Бързо и лесно се конструират, трудно се оценяват Нужна е подробна инструкция за проверка Субективност при проверяването Може да се оцени начина на разсъждение на ученика Задачи с избираем отговор (затворени) Съдържат Условие и Възможности за отговор Особености: Трудно се пишат, лесно се администрират и обработват Не може да се изследва как се стига до правилния отговор Правилният отговор може да се налучка Брой на възможностите за отговор – от 3 до 5

Предимства и недостатъци Задача със свободен отговор Задача с избираем отговор Време, необходимо за създаване на задачите 1. Бързо и лесно се конструират 1. Изискват повече време за създаване. Време, необходимо за решаване 2. Изискват повече време за решение. 2. Бързо и лесно се решават. Време, необходимо за проверка на резултатите 3. Дълго3. Сравнително кратко Начин за проверка на резултатите 3. Чрез ръководство за оценяване, съдържащо подробна инструкция за проверка и оценка 3. Чрез ключ с верни отговори Обективност на измерването (независимост на крайния резултат от субекта, извършващ измерването 4. Голяма степен на субективизъм. 4. Висока степен на обективност 39 Кой тип задачи са по-добри?

Предимства и недостатъци Задача със свободен отговор Задача с избираем отговор Надеждност на измерването (свързана е с обективността и броя на включените в теста задачи) 5. По-ниска надеждност5. По-висока надеждност. Когнитивни процеси6. За предпочитане са при създаване на задачи за висшите когнитивни равнища, за проверка на изпълнителски умения 6. По-подходящи за създаване на задачи за нисшите когнитивни равнища Учебно съдържание, включено в теста 7. По-малък обем от УС7. Значително по-голям обем УС Поведенчески контрол (до колко поведението на ученика може да бъде контролирано в процеса на решаване на теста) 8. Условието на задачата дава широки възможности за вариации при отговора 8. Условието ясно оказва какво точно трябва да извърши ученикът. 40

Предимства и недостатъци Задача със свободен отговор Задача с избираем отговор Степен на професионализъм9. Необходим е по-висок професионализъм при проверката на задачите 9. Необходим е по-висок професионализъм при създаването на задачите Психологически характеристики от гледна точка на възрастовите особености на децата 10. Не са особено подходящи за ученици от предучилищна и начална училищна възраст поради все още недостатъчно развитите умения за писмено изразяване; Подходящи за проверка на умения за писане и четене. 10. Особено подходящи за учениците от предучилищна и начална училищна възраст Вероятност на случайно налучкване на верния отговор 11. Малка вероятност11. Голяма вероятност, особено ако задачата не е добре конструирана и има лоши измерителни качества. 41

Примери 1. задача Кой е авторът на романа Под игото? а) Иван Вазов б) Любен Каравелов в) Добри Войников 2. задача Кой е авторът на романа Под игото? а) Иван Вазов б) Майкъл Джексън в) Уди Кълвачът 42

Вероятност на случайно налучкване на верния отговор Твърдението за високия процент на налучкване на верния отговор при задачите с избираем отговор не е съвсем вярно, защото е доказано, че при тест от 10 задачи, всяка от които с по четири алтернативи, вероятността за един лаик късметлия да получи максимален резултат само с помощта на налучкване е по-малка от едно на един милион. 43

Кой тип задачи са по-добри? Няма еднозначен отговор. Всичко зависи от конкретната ситуация – време, възрастови особености, учебно съдържание, степен на професионализъм и пр. Желателно е задачите в теста да са еднотипни. В случай, че това не е възможно, то следва тестът да се раздели на няколко основни блока, във всеки от които задачите да са еднотипни по вид (форма). 44

Изисквания към съставителя на тестови задачи Да е добър специалист в предметната област. Да познава учебните планове, стандарти и други документи, регулиращи учебния процес. Да е запознат с основните правила за съставяне на тестови задачи. Понякога прекрасни съдържателни идеи се представят с лоши тестови задачи. 45