Плюси і мінуси комп'ютерного тестування. «Переваги та недоліки тестування

Метод тестів є одним з основних в сучасній психодіагностиці. За рівнем популярності в освітній і професійній психодіагностиці він міцно утримує перше місце в світовій психодіагностичної практиці вже фактично протягом сторіччя.

В даному розділі під тестами слід розуміти методики, які складаються з серії завдань з вибором з готових варіантів відповіді. При підрахунку балів по тесту вибрані відповіді отримують однозначну кількісну інтерпретацію і підсумовуються. Сумарний бал порівнюється з кількісними тестовими нормами, і після цього порівняння формулюються стандартні діагностичні висновки.

Популярність методу тестів пояснюється такими головними його достоїнствами:

1) стандартизацією умов і результатів. Тестові методики відносно незалежні від кваліфікації користувача (виконавця), на роль якого можна підготувати навіть лаборанта з середньою освітою. Це, однак, не означає, що для підготовки комплексного висновку по батареї тестів не треба залучати кваліфікованого фахівця з повноцінною вищою психологічною освітою;

2) оперативністю і економічністю. Типовий тест складається з серії коротких завдань, на виконання кожного з яких потрібно, як правило, не більше півхвилини, а весь тест займає, як правило, не більше години. Тестування одночасно піддається відразу група піддослідних, таким чином, відбувається значна економія часу на збір даних;

3) кількісним диференційованим характером оцінки. Дробность шкали і стандартизованность тесту дозволяють розглядати його як «вимірювальний інструмент», що дає кількісну оцінку вимірюваним властивостями. Кількісний характер тестових результатів дає можливість застосувати добре розроблений апарат психометрики, що дозволяє оцінити, наскільки добре працює даний тест на даній вибірці випробуваних в даних умовах;

4) оптимальної труднощами. Професійно зроблений тест складається із завдань оптимальної труднощі. При цьому середній випробуваний набирає приблизно 50% з максимально можливої \u200b\u200bкількості балів. Це досягається за рахунок попередніх випробувань - психометричного експерименту (або пілотажу). Якщо в ході пілотажу стає відомим, що із завданням справляється приблизно половина з обстеженого контингенту, то таке завдання визнається вдалим, і його залишають в тесті;

5) надійністю. Це, напевно, найголовніше гідність тестів в освітній психодіагностику. Лотерейний характер сучасних іспитів з витягуванням щасливих або нещасливих квитків давно вже став притчею во язицех. Лотерейний для екзаменованого тут обертається низькою надійністю для екзаменатора - відповідь на один фрагмент навчальної програми, як правило, не показовий для рівня засвоєння всього матеріалу. На відміну від цього будь-який грамотно побудований тест охоплює основні розділи навчальної програми (тестируемой області знань або прояви якогось вміння або здібності). В результаті можливість для «хвостистів» вибитися в відмінники, а для відмінника раптом провалитися різко скорочується;

6) справедливістю. Є найважливішим соціальним наслідком перерахованих вище достоїнств. Її слід розуміти як захищеність від упередженості екзаменатора. Хороший тест ставить усіх у рівні умови. Найбільш сильно суб'єктивізм екзаменатора проявляється, як відомо, не в трактуванні рівня залагодження завдання (не так просто назвати чорне білим, вирішену задачу - невирішеною), а в тенденційному підборі завдань - своїм легше, чужим - важче. Тести забезпечують найважливішу функцію школи як соціального фільтра - функцію «соціально-професійної селекції». Те, наскільки справедливою виявляється подібна селекція, має гігантське значення для розвитку суспільства. Тому так важливо всім, хто має доступ до тестів і їх результатами, вчитися культурі грамотного і гуманного застосування тестів, бо тільки сумлінне і кваліфіковане ставлення користувачів до тестів перетворює їх в інструмент, що підвищує, а не понижуючий рівень справедливості в суспільстві;

7) можливістю комп'ютеризації. В даному випадку це не просто додаткова зручність, що скорочує жива праця кваліфікованих виконавців при масовому обстеженні. В результаті комп'ютеризації підвищуються всі параметри тестування (наприклад, при адаптованому комп'ютерному тестуванні різко скорочується час тестування). Комп'ютеризація - це потужний інструмент забезпечення інформаційної безпеки (достовірності діагностики). Комп'ютерна організація тестування, що передбачає створення потужних інформаційних банків тестових завдань, дозволяє технічно запобігти зловживанням з боку недобросовісних екзаменаторів. Вибір завдань, які пропонуються конкретному випробуваному, може виробляти з такого банку сама комп'ютерна програма прямо в ході тестування, і пред'явлення даного випробуваному певного завдання в цьому випадку є таким же сюрпризом для екзаменатора, як і для випробуваного.

У багатьох країнах впровадження методу тестів (так само як і опір цьому впровадженню) тісно пов'язане з соціально-політичними обставинами. Впровадження добре технічно оснащених тестових служб в освіту - найважливіший інструмент в боротьбі з корупцією, яка уражує правлячу еліту (номенклатуру) у багатьох країнах. На Заході тестові служби працюють незалежно від що випускають (школи) і приймають (вузи) організацій і постачають абітурієнта незалежним сертифікатом про результати тестування, з яким він може відправлятися в будь-яку установу. Ця незалежність служби тестування від випускають і приймаючих організацій є додатковим чинником демократизації процесу селекції професійних кадрів в суспільстві, що дає талановитому і просто працездатному людині зайвий шанс проявити себе.

У порівнянні з іншими формами контролю знань тестування має свої переваги і недоліки.

переваги

Тестування є більш якісним і об'єктивним способом оцінювання, його об'єктивність досягається шляхом стандартизації процедури проведення, перевірки показників якості завдань і тестів цілком.

Тестування - більш справедливий метод, воно ставить всіх учнів в рівні умови, як в процесі контролю, так і в процесі оцінки, практично виключаючи суб'єктивізм викладача. За даними Британської асоціації NEAB, що займається підсумковою атестацією учнів Великобританії, тестування дозволяє знизити кількість апеляцій більш ніж в три рази, зробити процедуру оцінювання однаковою для всіх учнів незалежно від місця проживання, типу і виду освітнього закладу, В якому займаються учні.

Тести це більш об'ємний інструмент, оскільки тестування може включати в себе завдання з усіх тем курсу, в той час як на усний іспит зазвичай виноситься 2-4 теми, а на письмовий - 3-5. Це дозволяє виявити знання учня по всьому курсу, виключивши елемент випадковості при витягуванні квитка. За допомогою тестування можна встановити рівень знань учня по предмету в цілому і по окремих його розділів.

Тест це більш точний інструмент, так, наприклад, шкала оцінювання тесту з 20 питань, складається з 20 ділень, в той час, як звичайна шкала оцінки знань - тільки з чотирьох.

Тестування більш ефективно з економічної точки зору. Основні витрати при тестуванні припадають на розробку якісного інструментарію, тобто мають разовий характер. Витрати ж на проведення тесту значно нижче, ніж при письмовому або усному контролі. Проведення тестування і контроль результатів в групі з 30 чоловік займає півтори-дві години, усний або письмовий іспит - не менше чотирьох годин.

Тестування - це більш м'який інструмент, вони ставлять всіх учнів в рівні умови, використовуючи єдину процедуру і єдині критерії оцінки, що призводить до зниження передекзаменаційні нервових напружень.

недоліки

Розробка якісного тестового інструментарію - тривалий, трудомісткий і дорогий процес.

Дані, одержувані викладачем в результаті тестування, хоча і включають в себе інформацію про прогалини в знаннях по конкретних розділах, але не дозволяють судити про причини цих прогалин.

Тест не дозволяє перевіряти і оцінювати високі, продуктивні рівні знань, пов'язані з творчістю, тобто імовірнісні, абстрактні і методологічні знання.

Широта охоплення тем в тестуванні має і зворотний бік. Учень при тестуванні, на відміну від усного або письмового іспиту, не має достатньо часу для скільки-небудь глибокого аналізу теми.

Забезпечення об'єктивності і справедливості тесту вимагає прийняття спеціальних заходів щодо забезпечення конфіденційності тестових завдань. При повторному застосуванні тесту бажано внесення в завдання змін.

У тестуванні присутній елемент випадковості. Наприклад, учень, що не відповів на просте питання, може дати правильну відповідь на більш складний. Причиною цього може бути, як випадкова помилка в першому питанні, так і вгадування відповіді у другому. Це спотворює результати тесту і призводить до необхідності врахування ймовірнісної складової при їх аналізі.

Саме останній з наведених вище недоліків спонукав провести невелике дослідження. Мені стало цікаво, який в середньому бал може отримати учень, відповідаючи на питання тесту навмання. Групі учнів було запропоновано десять тестів на різні теми, які відрізнялися кількістю питань, інтерфейсом і способом реалізації. Оскільки досліджувалася саме імовірнісна складова тесту, учні відповідали не замислюючись над суттю питання. Контрольним виміром кожного тесту був відсоток правильно виконаних завдань. Всього було вироблено 120 вимірів. Контрольні значення коливалися в межах від 5% до 64%. Середнє значення, отримане за результатами всіх вимірювань \u003d 28,10%

Більшість учнів в процесі вивчення англійської будуть проходити перевірку знань: TOEFL, IELTS, шкільні іспити і т.д. Тести - спосіб досить швидко і легко перевірити великий обсяг інформації, і, як будь-який тип перевірки, допомагає психологічно підготувати учня до майбутніх іспитів. Також тест - статистичне доказ прогресу учня, так як тут він отримує чіткий результат, наприклад, 80% з 100.

У той же час слід врахувати, що тести підходять для перевірки далеко не всіх мовних навичок, в першу чергу головного - говоріння. Крім цього тести дають уявлення скоріше про пасивних, ніж активних знання учня. Багато, наприклад, без проблем вибирають в тесті правильні дієслівні форми, в той же час неправильно їх використовують в спілкуванні і листі.
У статті розглянемо різні види тестових завдань, їх переваги та недоліки, а також для перевірки яких навичок вони найкраще підходять.

Типи тестових завдань:

Multiple choice
Transformation
Gap-filling
Matching
Cloze
True / False
Open questions
Error correction

1. Multiple choice

Choose the correct word to complete the sentence.
I ... .. tennis every Sunday morning.

playing
play
am playing
am play

Суть завдання: учень повинен вибрати серед кілька варіантів правильну відповідь.
Підходять для перевірки: граматики, лексики, читання та аудіювання.
переваги:
- самий швидкий спосіб протестувати великий обсяг інформації
- підходять для підготовки учнів до стандартизованим тестам
недоліки:
- створення якісних тестів з множинним вибором займає чимало часу.

2. Transformation

Complete the second sentence so that it has the same meaning as the first.
We paid some people to landscape the garden for us last year.
had
We _____________________________________ last year.

Суть завдання: учень повинен переробити пропозицію використовуючи певне слово.
Підходить для перевірки: граматичних форм

3. Matching

Суть завдання: учень зіставляє пункти з однієї колонки з відповідними пунктами з іншого. Це можуть бути індивідуальні слова, слова і їх визначення, частини пропозиції, картинки і слова і т.д.
Підходять для перевірки: лексики
переваги:
- зменшують «тестовий стрес» учня, так як є опора для відповідей
недоліки:
- не завжди надають чітку картину про знання учня. Навіть якщо учень не знає правильної відповіді, у нього є шанс вгадати. Цю проблему можна вирішити, якщо включити в другу колонку більше слів або картинок ніж в першій.
- одна помилка може «посунути» все завдання і воно буде виконано неправильно

4. Completion (fill in the blank tests, cloze tests)

Complete the text by adding a word to each gap.

Word Bank: feast, turkey, parade, football, cranberry, pumpkin pie, thanks

Thanksgiving is a special time of year when families come together and give ___ for all they have.
There is a popular ___ in New York, and you can also enjoy the ___ games on TV.
Thanksgiving dinner is a ___ that includes ___, potatoes, ____ sauce and much more.
There are also many desserts after Thanksgiving dinner, including the most popular ___.

Суть завдання: учень заповнює пропуски в пропозиціях.
Підходить для перевірки: граматики і лексики

5.True / False

Decide if the statement is true or false.
The currency of the USA is the dollar. T / F

Суть завдання: кожне питання являє собою твердження. Учень повинен визначити правильно воно чи ні.
Підходить для перевірки: читання та аудіювання.
переваги:
- дуже швидко і легко перевіряються
недоліки:
- в такому типі завдання учень може вибрати неправильну відповідь не через незнання теми, а звичайної неуважності до якихось деталей
- не завжди вказують на прогалини в знаннях, так як учень має 50% шансів вдало вгадати. Цю проблему можна вирішити за допомогою додаткового завдання - учень повинен не просто відзначити неправильні твердження, але і виправити їх.

6. Open questions

Answer the questions.
Why did John go to the shop?

Суть завдання: учень дає письмові відповіді на питання
Підходить для перевірки: всіх мовних аспектів.
переваги:
- перевіряє, наскільки добре учень може використовувати знання, а не тільки те, скільки інформації він завчив.
недоліки:
- вимагає більше часу для перевірки
- перевірка більш суб'єктивна, ніж при інших видах тестових завдань. Один викладач може бути згоден з вибором слів учня, інший - ні. Цю проблему можна вирішити за допомогою word bank - набору лексики, яку учні можуть використовувати при відповіді. Бажано надати учням більше варіантів, ніж потрібно у відповіді. Наприклад, якщо в тесті 20 питань, word bank може містити 30 слів.

Error Correction

Find the mistakes in the sentence and correct them.
I would rather to work from home than come to the office.

Суть завдання: учень повинен знайти і виправити помилки в реченні. Помилками можуть бути зайві слова, неправильні форми дієслів, пропущені слова і т.д.
Підходить для перевірки: граматики, лексики, читання та аудіювання

Підводячи підсумки слід зауважити, що до головних плюсів тестів відноситься те, що це - структурований і об'єктивний спосіб швидко перевірити велику кількість інформації.
Головний мінус - тести не підходять для перевірки головного аспекту вивчення - комунікації. Тому для повноцінної перевірки рівня володіння мовою тестові завдання слід комбінувати з такими формами перевірки, як есе і усну співбесіду.

Однією з найбільш розповсюдженний методик є тести. Тест - фіксоване в часі випробування, призначене для встановлення кількісних і якісних індивідуальних психологічних відмінностей.

Класифікація:

1) по предмету тестування:

а) інтелектуальні - дозволяють виміряти ступінь розвитку розумових здібностей.

б) особистісні - вимірювальні не інтелектуальні прояви особистості (емоції, мотиви, властивості особистості і т.п.)

2) За формою процедури обстеження:

а) Індивідуальні тести

б) Групові тести

3) За характером тестового матеріалу:

а) бланкові тести - тестування в формі різних бланків;

б) апаратурні тести - використовуються комп'ютери, аудіо та відео техніка і т.п.

4) За особливостями використання тестів:

а) вербальні(Словникові тести)

б) практичні (мануальні) - маніпуляції предметами (скласти фігуру і т.п.)

Характеристики психологічних тестів

- валідність- відповідність результатів тесту тій характеристиці, для вимірювання якої він призначений.

Надійність - властивість тесту давати при повторному вимірі близькі результати. Надійність як внутрішня узгодженість - спрямованість всіх елементів тестової щкали на вимір одного якості.

Під тестами слід розуміти методики, які складаються з серії завдань з вибором з готових варіантів відповіді. При підрахунку балів по тесту вибрані відповіді отримують однозначну кількісну інтерпретацію і підсумовуються. Сумарний бал порівнюється з кількісними тестовими нормами, і після цього порівняння формулюються стандартні діагностичні висновки.

ПЕРЕВАГИ:

1. Стандартизація умов і результатів. Тестові методики відносно незалежні від кваліфікації виконавця.

2. Оперативність і економічність. Тест складається з серії коротких завдань, на виконання кожного з яких потрібно півхвилини, а весь тест - не більше години. , Може тестуватися вся група.

3. Кількісний диференційований характер оцінки. Дробность шкали і стандартизованность тесту дозволяють розглядати його як «вимірювальний інструмент», що дає кількісну оцінку вимірюваним властивостями.

4. Оптимальна трудність. Професійно зроблений тест складається із завдань оптимальної труднощі.

5. Надійність. тест охоплює основні розділи навчальної тестованої галузі знань або прояви якогось вміння або здібності.

6. Справедливість. Її слід розуміти як захищеність від упередженості екзаменатора.

7. Можливість комп'ютеризації. комп'ютеризація- це потужний інструмент забезпечення інформаційної безпеки (достовірності діагностики).

НЕДОЛІКИ:

1) небезпека «сліпих» (автоматичних) помилок.

2) небезпека профанації. Зовнішня легкість проведення тестів привертає людей, які не бажають серйозно знайомитися з психодіагностикою

3) втрата індивідуального підходу, стрессогенность Тест призначений для всіх. Досить вірогідною є можливість втратити унікальну індивідуальність нестандартного людини (тим більше дитини). Це відчувають самі випробовувані, і це їх нервує - особливо в ситуації атестаційного тестування, У людей зі зниженою стресо стійкістю виникає навіть певне порушення саморегуляції -вони починають хвилюватися і помилятися в елементарних для себе питаннях

4) втрата індивідуального підходу, репродуктивність. Тести знань апелюють насамперед до стандартного застосування готових знань;

5) відсутність можливості розкрити індивідуальність при наявності стандартних, заданих відповідей

6) відсутність довірчої обстановки. Процедура тестування може створити у випробуваного враження, що психолог мало зацікавлений в ньому особисто, в його проблемах і труднощах.

7) втрата індивідуального підходу, неадекватна складність. Іноді некваліфіковані тестологи обрушують на дитину тести, занадто складні для нього за віком. У нього ще не склалися необхідні поняття і понятійні навички, щоб адекватно осмислити як загальну інструкцію до тесту, так і зміст окремих питань.

23. Проективні тестові методики. Загальна характеристика.

Проективні методики засновані на виявленні проекції за результатами експерименту з подальшим їх аналізом.

особливості:

1. Особливостями стимульного матеріалу;

Відмінною особливістю стимульного матеріалу проективних методик є його неоднозначність, невизначеність, що є необхідною умовою реалізації принципу проекції. В процесі взаємодії особистості з стомлений матеріалом відбувається його структурування, в ході якого особистість проектує особливості свого внутрішнього світу: потреби, конфлікти, тривогу і т. Д.

2. Особливостями поставленої перед респондентом завдання;

Щодо неструктурована завдання, яка допускає необмежену різноманітність можливих відповідей, - одна з основних особливостей проективних методик. Тестування за допомогою проективних методик - замасковане тестування, так як респондент не може здогадатися, що саме в його відповіді є предметом інтерпретації експериментатора. Проективні методики менше схильні до фальсифікації, ніж опитувальники,

3. Особливостями обробки і інтерпретації результатів.

Існує проблема стандартизації проективних методик. Деякі методики не містять математичного апарату для об'єктивної обробки отриманих результатів, не містять норм.

Ці методики насамперед характеризує якісний підхід до дослідження особистості, а не кількісний, як психометричні тести. І тому ще не розроблені адекватні методи перевірки їх надійності та надання їм валідності.

Для більш точного дослідження дані, отримані за допомогою проективних методик, слід співвідносити з даними, отриманими за допомогою інших методів.

Класифікація проективних методик (по Л.Франку)

1. Конститутивні. Потрібно структурування та оформлення стимулу; надання йому сенсу.

тест Роршаха ; Словесний тест асоціацій (Гальтон); тест «Словник» (дослідження індивідуального тезауруса, кругозору).

2. Конструктивні.

Створення з оформлених деталей осмисленого цілого.

тест Миру (232 моделі предметів, розпод. По 15 категоріям (будинки, дерева, тварини та ін. Необхідно створити «свій світ»). М. Ловенфельд. \u200b\u200bСценотест (як гра в ляльки).

3. інтерпретатівную (Інтерпретаційні). Необхідно витлумачити будь-яку ситуацію, подія. ТАТ і його модифікації.

4. катартического. Психодрама.

5. рефрактівной. Мова, почерк.

6. Експресивні. Малювання на вільну або задану тему.

7. імпрессівной. Перевага стимулів. Люшер, Сонди.

7. Адитивні Завершення розповіді, ситуації, історії. Розенцвейг; рука; Системний тест сім'ї Т.Герінга; Незакінчені речення та їх модифікації.

Не буде перебільшенням сказати, що сьогодні системи онлайн-тестування зробили справжню революцію в навчанні. Саме вони допомогли вдосконалити оцінювання знань студентів. Тепер викладачам набагато простіше проводити іспити, а також стежити за результатами і прогресом своїх учнів. Давно минули дні, коли вчителю треба було створювати кожен тест вручну і записувати результати в журнал, вираховувати середній бал. Сьогоднішні системи онлайн-тестування допомагають стежити за прогресом кожного учня, уникаючи складних підрахунків. Самі ж інструменти для створення онлайн-тестів стають все зрозуміліше і зручніше як для учнів, так і для викладача.

Навчитися створювати онлайн-тести легко

Раніше багато викладачів відмовлялися від онлайн-тестів, оскільки створення кожного з них вимагало багато зусиль і могло бути дійсно вимотує заняттям. Хтось боявся, що у нього не вистачить знань, потрібно купувати додаткове обладнання, розбиратися з HTML-кодом або наймати програміста. Але зараз інструменти для створення тестів стають настільки інтуїтивно зрозумілими, що кожен викладач, навіть новачок в, може легко створити відмінний онлайн-тест для свого курсу. Зручно, що безліч програм не вимагають установки, працюючи з браузера, а мобільні додатки для створення онлайн-тестів дозволяють працювати навіть в дорозі.

Онлайн-тестування економить час

Зараз можна створити цілу базу запитань і зберегти їх, щоб використовувати в подальшому. Не потрібно писати окремий тест для кожного курсу - ви можете створити іспит просто вибираючи питання з уже створеної бази або скористатися шаблоном, який буде легко змінити для кожного нового курсу. Крім того дуже корисною виявляється автоматична система підрахунку балів. А який простий може бути аналітика! Ви можете легко визначити, кому із студентів потрібні ваша допомога. Погодьтеся, це збереже вам чимало часу і нервів. Багато системи дозволяють вибирати дизайн для своїх тестів, а також автоматично формують іменні сертифікати за результатами складеного іспиту.

Онлайн-тести ефективні і надійні

Надійність тестів ставати особливо актуальною для онлайн-курсів. Щоб оцінка кожного учня була об'єктивною, дуже важливо запобігти можливості списування. І саме за допомогою програм для онлайн-тестування можна використовувати методи, які не дадуть вашим студентам ділитися відповідями. Ви можете створювати безліч версій одного і того ж тесту, змінюючи порядок питань і варіантів відповідей. Ефективним буде також запропонувати більш 6 розгорнутих варіантів відповідей для кожного питання.

Багато системи онлайн-тестування не дозволяють користувачеві скопіювати текст з діалогового вікна. А ми знаємо, що якщо робота відбувається за комп'ютером, учень може просто скопіювати питання, щоб знайти відповідь на нього в інтернеті. Навіть попри те, що питання і відповідь на нього можна надрукувати вручну, ви можете встановити ліміт часу для відповіді.

Недоліки онлайн-тестування

Подивіться, які програми доступні на ринку. На початку вам не треба вивчати все опції, які надає кожна з програм, досить просто переглянути список пропонованих інструментів. Зверніть увагу, що не всі програми підтримую російську мову.
Тепер знаючи, які функції можна знайти в різних програмах, створіть список тих, які будуть найбільш важливі для вас.
Порівняйте різні онлайн-додатки. Оцінюйте тільки ті параметри, які важливі для вас і будуть вирішальними при виборі платформи.
Почитайте відгуки.
Протестуйте кілька додатків. Багато з них пропонують безкоштовний тест-драйв. Подивіться, на скільки легко буде створювати тест і проходити його. Для цього організуйте невелику перевірку серед учнів і дізнайтеся їх думку. Важливо, щоб такий тест мав радше символічний характер і не впливав на оцінювання самих знань.

Звичайно, було б добре, якби ваш сервіс вебінарів або програма для e-learning`а підтримували онлайн-тестування. Управління таким курсом вимагає менше зусиль, всі тести і результати зберігаються в одному місці. Але кожен курс індивідуальний, і програму для онлайн-тестування варто вибирати виходячи з особливостей саме вашого навчального курсу.