1. При створенні тестів для перевірки залишкових знань з відповідної дисципліни або для перевірки підсумкових знань студента/студента на підставі програми дисципліни визначаєтьсяобласть утримання тестуі цілі тестування.

План тесту (Додаток 1) для проміжного контролю знань повинен охоплювати знання, вміння та навички з однієї або кількох дидактичних одиниць, для підсумкової атестації – за всіма дидактичними одиницями дисципліни відповідно до програми дисципліни, для перевірки залишкових знань з усіх дидактичних одиниць дисципліни відповідно до ГОСом / Спеціальності.

3. Необхідно включення в тести лише найважливіших, базових знань, що виражають сутність, зміст, закони та закономірності аналізованих явищ. Усі спірні погляду, допустимі у науковій суперечці, слід виключити з тестових завдань.

4. Кожен навчальний елементповинен мати певну усереднену міру проблеми, яку необхідно враховувати у процесі контролю знань.

1. При розробці плану тестових завдань з дисципліни робиться приблизна розкладка процентного змісту розділів і визначається необхідна кількість завдань (але не менше 3-х) по кожному розділу дисципліни (по кожній дидактичній одиниці) виходячи з його важливості та числа годин, відведених на його вивчення у програмі .

Основні терміни тестового завдання повинні бути чітко визначені.

Тестові завдання мають бути прагматично коректними та розраховані на оцінку рівня навчальних досягнень студентів з конкретної галузі знань.

Тестові завдання мають формулюватися як згорнутих коротких суджень.

Слід уникати тестових завдань, які вимагають від тестованого розгорнутих висновків на вимоги тестових завдань.

При конструюванні тестових ситуацій можна застосовувати різні форми їх подання, а також графічні та мультимедійні компоненти з метою раціонального пред'явлення змісту навчального матеріалу.

Кількість слів у тестовому завданні має перевищувати 10-12, якщо у своїй не спотворюється понятійна структура тестової ситуації. Головним вважається ясне та явне відображення змісту фрагмента предметної області.

Середній час на тестове завдання має перевищувати 1,5 хвилини.

1. Рекомендується дотримуватись наступних параметрів тестів:

Відповідність змісту тестових завдань державному освітньому стандарту з навчальної дисципліни (базова частина тестових завдань –70%-85%), а також включення додаткових тестових завдань (варіативна частина тестових завдань – 15%-30%).

Необхідно проводити добір завдань, які комплексно відображають основні теми навчальної дисципліни.

Тестові завдання з конкретної навчальної дисципліни мають найповніше відображати її зміст та ключові поняття, щоб мати якісну об'єктивну оцінку знань студентів. Включення в тест другорядних елементів змісту може призвести до невиправданих висновків про знання чи незнання навчальної дисципліни.

Необхідно дотримуватись пропорцій у кількості тестових завдань з тем навчальної дисципліни.

Необхідно перевіряти відповідність змісту тестових завдань знанням, навичкам та вмінням, що оцінюються у студентів.

У кожному тестовому завданні потрібна визначеність, логічність, відсутність некоректних формулювань, виділення одного предмета виміру (ключового поняття, терміна, правила, визначення тощо).

1. Специфікація тесту включає:

Ціль створення тесту, обґрунтування вибору підходу до його створення, опис можливих сфер його застосування.

Список нормативних документів(базових програм, вимог до рівня підготовки випускників та ін.), що використовуються під час планування змісту тесту.

Кількість завдань різної форми із зазначенням числа відповідей до закритих завдань, загальна кількість завдань у тесті.

Охоплення вимог державних освітніх стандартів з дисципліни.

1. Рекомендації до формулювань тестових завдань

Основними елементами тестового завдання є інструкція, завдання (змістовна частина), відповіді завдання.

Інструкція до тестових завдань визначає перелік дій під час проходження тестування. Вона має бути адекватна формі та змісту завдання («вкажіть правильну відповідь (відповіді)», «встановіть відповідність», «визначте правильну послідовність», «введіть правильну відповідь»).

Термінологія, що використовується, не повинна виходити за рамки основних підручників і нормативних документів.

Усі слова, що повторюються, повинні бути виключені з відповідей і винесені до змістовної частини завдання.

Усі варіанти відповідей мають бути грамотно узгоджені із змістовною частиною завдання, одноманітні за змістом та структурою, рівнопривабливі. Між відповідями потрібні чіткі відмінності. Правильна відповідь однозначна і не повинна спиратися на підказки.

Серед відповідей повинні бути відсутні відповіді, які з одного.

У варіанти відповідей не можна включати формулювання «все перераховане вище», «всі твердження вірні», «перераховані відповіді не вірні», оскільки такі відповіді порушують логічну конструкцію тестового завдання або підказують.

Кількість тестових завдань із запереченням має бути мінімальною. При цьому частка«ні» виділяється жирним шрифтом.

1. Види та типи тестових завдань. Їх особливості, переваги та недоліки

Існують два типи завдань, які поєднують шість видів

Схема 1. Типи та види тестових завдань

До завдань відкритого типу належать два види – завдання доповнення та завдання вільного викладу. Їхньою відмінністю є те, що для їх виконання учневі необхідно записати одне або кілька слів (цифр, букв, словосполучень, речень).

Завдання закритого типу (альтернативних відповідей, множинного вибору, відновлення відповідності та відновлення послідовності) передбачають різні варіантивідповіді поставлене запитання: із низки запропонованих вибираються одне чи кілька правильних відповідей, вибираються правильні (чи неправильні) елементи списку та інших. Ці завдання припускають наявність низки попередньо розроблених варіантів відповіді задане питання.

Завдання закритого типу

1. Завдання альтернативних відповідей.

До кожного завдання альтернативних відповідей дається лише два варіанти відповідей. Випробуваний повинен вибрати одне із них – “так – ні”, “правильно – неправильно” та інших.

Форма завдання

Текст завдання (запитання)	Відповідь
Твердження 1	так	ні
Твердження 2	так	ні
Твердження 3	так	ні

... ...

Інструкція для завдання альтернативних відповідей: Вам необхідно вибрати один варіант відповіді, який Ви вважаєте за правильне.

Завдання альтернативних відповідей більшою мірою підходять виявлення рівня оволодіння складними визначеннями, знання досить складних графіків, діаграм, схем та ін. Особливістю завдань альтернативних відповідей є те, що питання має бути сформульоване у формі затвердження, оскільки він передбачає згоду чи незгоду, яку можна віднести до затвердження.

2. Завдання множинного вибору.

Це основний вид завдань, що застосовується у тестах досягнень. Завдання з множинним вибором передбачають наявність варіативності у виборі. Випробовуваний повинен вибрати один із запропонованих варіантів, серед яких найчастіше лише один правильний.

1. У тексті завдання має бути усунена будь-яка двозначність чи неясність формулювань;

2. Основна частина завдання формулюється дуже коротко, не більше одного речення із семи-восьми слів;

3. Завдання повинне мати гранично просту синтаксичну конструкцію;

4. В основну частину завдання включається якнайбільше слів, залишаючи для відповіді 2-3 ключових словадля цієї проблеми;

5. Всі відповіді до одного завдання повинні бути приблизно однієї довжини, або в деяких завданнях правильна відповідь може бути коротшою за інші;

6. З тексту мають бути виключені всі асоціації, що сприяють вибору правильної відповіді за допомогою припущення;

7. Частота вибору одного і того ж номера місця для правильної відповіді різних завданняхмає бути приблизно однакова;

8. З відповідей виключаються всі слова, що повторюються, за рахунок введення їх в основний текст завдань;

10. З числа неправильних повинні виключатися відповіді, що випливають одна з одної;

11. З-поміж тестових повинні виключатися завдання, що містять оціночні судження або думки випробуваного з будь-якого питання;

12. Усі варіанти відповідей мають бути рівноймовірно привабливі для піддослідних;

13. Жоден з варіантів відповідей не повинен бути частково правильним, що перетворюється за певних додаткових умов на правильний;

14. Основна частина завдання формулюється у формі затвердження, яке звертається до справжнього чи хибного висловлювання після підстановки відповідей;

15. Відповідь одне завдання ні служити ключем до правильним відповідей інші завдання тесту, тобто. не слід використовувати дистрактори з одного завдання як відповіді до інших завдань тесту;

16. Якщо завдання містить серед інших альтернативні відповіді, не слід відразу після правильного наводити альтернативну відповідь, оскільки увага відповідального зазвичай зосереджується тільки на цих двох відповідях;

17. Усі відповіді мають бути паралельні по конструкції та граматично узгоджені з основною частиною завдання тесту.

Форма надання завдань множинного вибору:

Питання (затвердження):

A. Варіант відповіді 1

B. Варіант відповіді 2

C. Варіант відповіді 3

Інструкція для завдань множинного вибору: Виберіть букву (и), що відповідає (і) варіанту (ам) правильної (их) відповіді (ів).

3. Завдання відновлення відповідності.

До завдань цього типу ставляться завдання відновлення відповідності між елементами двох списків, порядку ряду. Складається із двох груп елементів та чіткого формулювання критерію вибору відповідності між ними. Відповідність встановлюється за принципом 1:1 (одному елементу першої групи відповідає лише один елемент другої групи) або 1:M (одному елементу першої групи відповідає елементам М групи другої групи). Усередині кожної групи елементи мають бути однорідними. Кількість елементів у другій групі має перевищувати кількість елементів першої групи, але не більше ніж у 1,5 рази. Максимально допустима кількість елементів у другій групі не повинна перевищувати 10. Кількість елементів у першій групі має бути не менше ніж два.

Форма подання завдань на відновлення відповідності:

Інструкція: Співвіднесіть написане у стовпцях 1 та 2.

Запитання:

Варіанти відповіді:

Стовпець 1	Стовпець 2

Відповідь: А. 3. Б. 2. У. 5. Р. 1. Д. 4.

Головними перевагами завдань цього виду є: можливість швидкої оцінки знань, умінь і навичок у конкретній галузі знань, та економічність розміщення завдань у тесті.

4. Завдання на відновлення послідовності

Завдання на відновлення послідовності можна розглядати як варіант завдання на відновлення відповідності, коли одним із рядів є час, відстань або інший континуальний конструкт, який мається на увазі у вигляді ряду.

Завдання на відновлення послідовності – це дуже якісна форма тестових завдань, що має значні переваги: ​​стислість, простота перевірки.

Завдання.

Інструкція: Розташуйте в правильної послідовності.

Запитання.

Варіанти відповіді.

1. А.

2. B.

3. З. ……. Відповідь: 1. А. 2. D. 3. В. 4. Е. 5. С. 6. F.

Переваги завдань закритого типу

Завдання можуть бути надійними, оскільки відсутні фактори, пов'язані із суб'єктивними оцінками, які знижують надійність.

Оцінювання завдань повністю об'єктивне: між оцінками різних перевіряльників може бути відмінностей.

Не враховується вміння досліджуваних добре формулювати відповіді.

Завдання цього легко обробляються, тестування швидко проводиться.

Простий алгоритм заповнення знижує кількість випадкових помилок та описок.

Ці завдання дозволяють охопити великі сфери знання, що для тестів досягнень особливо важливо.

Можливе машинне оброблення відповідей.

Низька ймовірність вгадування правильних відповідей.

Можливе отримання точної оцінки змістовності тесту, що особливо важливо визначення відповідності тесту цілям дослідження.

Завдання відкритого типу

Вимагає сформульованого самим тестованим висновку вимоги завдання. Має вигляд неповного затвердження, в якому немає одного або декількох ключових елементів. Як ключові елементи можуть бути: число, слово або словосполучення. При формулюванні завдання на місці ключового елемента, необхідно поставити прочерк або крапку. Відсутній елемент (правильний висновок) у завданні відкритої форми вводить тестований на місці прочерку та/або у спеціальному полі, добре видимому випробуваним.

До них відносяться завдання двох видів:

1) доповнення (завдання з обмеженням відповіді). У цих завданнях випробувані також самостійно давати відповіді питання, проте їх можливості обмежені.

Обмеження забезпечують об'єктивність оцінювання результату виконання завдання, а формулювання відповіді має дати можливість однозначного оцінювання.

Інструкція для завдань доповнення: замість крапки впишіть тільки одне слово (символ, знак і т.д.).

Приклад завдання доповнення.

Інструкція: Замість крапки впишіть тільки одне слово.

Запитання: Фірма, що надає мережеві послуги – це...

Відповідь: провайдер.

2) Вільного викладу чи вільного конструювання. Вони припускають вільні відповіді випробуваних насправді завдання. На відповіді не накладаються обмеження. Однак формулювання завдань повинні забезпечувати наявність лише однієї правильної відповіді.

Інструкція для завдань вільного викладу: закінчіть речення (фразу), впишіть замість крапки правильну відповідь (словосполучення, фразу, речення або кілька речень).

Приклад завдання вільного викладу.

Інструкція: Закінчіть речення.

Запитання: Спеціальна програма, що реалізує правила передачі інформації між комп'ютерами – це...

Відповідь: мережевий протокол.

Складність у застосуванні цього виду завдань полягає у складності з формалізацією відповідей, необхідність підготовки оціночних схем ускладнює стандартизацію, громіздкість процедури та великі витрати часу на проведення.

Основна складність при складанні завдань відкритого типу – дотримання основної вимоги до тестових завдань (наявності однозначної правильної відповіді).

Позитивними сторонами добре складених завдань доповнення та вільного викладу є:

1) неможливість вгадати відповідь;

2) стислість та однозначність відповідей;

3) необхідність відтворення відповіді з пам'яті;

4) відсутність необхідності шукати кілька варіантів відповіді;

5) простота формулювання питання;

6) простота перевірки.

1. Критерії виставлення оцінки

Оцінка «задовільно» ставиться, якщо студент/студент відповів на від 55 до 70% питань. Оцінка «добре» ставиться, якщо студент/студент отримав від 71 до 85%. Оцінка «відмінно» ставиться, якщо студент/студент отримав 86% і більше.

Основні типи хімічних реакцій

3.2, 3.3

Періодична система Д.І.Менеделєєва та властивості хімічних елементів

Хімічний зв'язок та будова речовини

Хімічна кінетика та каталіз. Швидкість реакцій. Каталіз. (Завдання)

2. 2.3

Хімічна рівновага. Константа рівноваги. Зміщення рівноваги.

2.1,

Дисперсні системи. Загальні властивостірозчинів. Енергетика розчинення.

А10

склад розчинів. Масова частка. Молярна концентрація.

1.1,

А11

Розчини електролітів. Дисоціація кислот, основ, солей.

А12

Кислотно-основні реакції. Гідроліз солей.

Усього

*Примітка. Види тестових завдань:

1 - завдання з вибором однієї чи кількох правильних відповідей;

2 - завдання відкритої форми, тобто без зазначення відповідей (доповнення та вільного викладу)

3 – завдання на встановлення відповідності

4 - завдання на встановлення правильної послідовності

5 – завдання альтернативних відповідей

Вибираючи кандидата на посаду, роботодавець ризикує отримати, як то кажуть, кота в мішку. Тому на етапі переговорів він перевіряє рівень професіоналізму претендента всіма можливими способами. Але чи це завжди виправдано? Що робити, якщо пропонують виконати тестове завдання чи попрацювати деякий час для проби?

Часто досвідчені фахівці вважають, що тестове завдання це не для них. А ті, хто має мало досвіду, навпаки, беруться за таку об'ємну роботу, що визнати таке завдання «тестовим» складно. Нерозуміння виникає з різних причин, у тому числі через помилки роботодавців: тестове завдання іноді не відповідає тим цілям, яким має служити.

Які цілі можуть бути?

1. Перевірити ваші реальні знання та навички. Тестове завдання - це те, що ви робите не в команді і не під керівництвом начальника, тому іноді йому довіряють більше, ніж портфоліо.
2. Познайомити вас із роботою. Дати можливість зрозуміти і вам, і роботодавцю, чи впораєтеся ви, чи правильно ви уявляли собі таку роботу, чи цікаво вам. Завдання можуть попросити виконати у офісі.
3. Перевірити ваш хід думок, як саме ви бачите актуальну проблемучи аналогічне завдання. Часто застосовується для керівних та творчих вакансій.

Будь-яке тестове завдання – це ще й перевірка мотивації. Але мотивація під час виконання завдання має зникнути. Якщо ви ще не бачили роботодавця і не знаєте нічого про компанію, а вас уже просять вирішити кілька об'ємних завдань, це має насторожити. Тестові завдання часто невеликі за обсягом і не надто трудомісткі, якщо це не компанія-зірка, в якій дуже високий конкурс на кожну вакансію.

Якщо вас умовляють виконати складну роботу, яка забере чимало часу, дізнайтеся у роботодавця якнайбільше подробиць: у якому вигляді від вас вимагають результат, чи потрібно при виконанні завдання враховувати особливості компанії, чи можна ставити уточнюючі питання і хто оцінюватиме результат. Якщо завдання є об'ємним, ви можете вимагати від роботодавця докладний розбірсвоєї роботи – і часто це великий плюс.

Тестова робота допомагає не тільки роботодавцю, а й претенденту вирішити, чи готовий він щодня виконувати подібні завдання. Будьте обережні, якщо:

• на виконання тестового завдання у вас потрібно більше одного дня;
• ви мало знаєте про компанію-роботодавця;
• здоровий глузд підказує, що завдання не схоже на тестове, і це частина роботи, на якій компанія хоче заощадити.

А ви з якими тестовими завданнями стикалися? Як визначали, коли це – справді тест, а коли – марна праця?

Vc.ru розповіли, що випробування, які необхідно проходити, щоб потрапити у омріяну компанію, бувають дуже витонченими. Хтось пропонує пробігти сім етапів співбесід, хтось — перевірку службою безпеки, у когось кандидатів інспектує психолог із ляпками та дуже проникливим поглядом. У ігровій промисловості справи трохи краще, але й тут не без винятків. У більшості випадків схема проста: співбесіда, тестове завдання, співбесіда - від зміни місць доданків сума не змінюється. Але один із них часто викликає сумніви і в тих, хто його дає, і в тих, хто виконує.

"Вони мене побачать і відразу все зрозуміють"

Більшість кандидатів умовно можна розділити на два типи: тих, хто насамперед запитує про зарплату, і тих, хто запитує про проект, над яким має працювати. Але практично ніхто не хоче виконувати тестове завдання для будь-кого. Тому після хвилюючого першого питання завжди слідує друге: «чи можна якось обійтися без тестового завдання?»

Тестове завдання – це інструмент, а не самоціль. Звичайно, можливі ситуації, коли воно не потрібне. Наприклад, якщо у наймача немає сумнівів у професійних навичках кандидата, можливо, якщо кандидат раніше публічно демонстрував ці навички або має дуже сильні рекомендації. Сюди ж потрапляють відомі та шановні люди, тестове завдання для яких буде чимось на зразок образи. В решті випадків без тестового завдання ніяк. Його виконання не гарантує, що кандидат підійде на посаду, але хоча б відсіває тих, хто не спроможний впоратися навіть із простими завданнями.

Часто докладне інтерв'ю та хороше резюме замінюють тестове завдання, особливо якщо важливо оцінити те, як людина думає. У такому разі кандидату доведеться витратити 10-15 годин на спілкування з кадровою службою та лідом та годин вісім на інтерв'ю з командою.

Ми не пропонуємо геймдизайнерам виконувати тестове завдання — є кілька питань, відповіді на які показують відсутність шаблонного мислення та загальний потенціал. Нам насамперед важливий палаючий погляд, аналітичний склад розуму, структурованість і критичність мислення, а глибина фундаментальних знань вторинна.

«Тільки після третього побачення»

Багато кандидатів бентежить, якщо тестове завдання просять виконати ще до першої зустрічі: він поки не познайомився з компанією, не знає, що вони можуть запропонувати і боїться, що це виявиться марною тратою часу. З іншого боку, коли ви вже зустрілися, поспілкувалися і так сподобалися одне одному, додаткові перевірки це просто прикро. Так чи інакше, тестове завдання вам таки запропонують. Інше питання – коли це варто зробити?

На етапі, який передує співбесіді. До виконання тестового завдання проводять співбесіду лише жадібні до грошей зовнішні рекрутери та фахівці кадрового відділу з контор із підвищеним рівнем бюрократії. Нормальний ланцюжок виглядає таким чином: ознайомлення з резюме претендента, перевірка попередніх робіт, тестове завдання та особиста співбесіда з майбутнім керівником.

Якщо кандидат усім влаштовує після ознайомлення з його резюме та особистої бесіди, саме час перевірити його практичні вміння. У деяких випадках, навіть якщо у вас залишилися питання після співбесіди, тестове завдання допоможе підтвердити або спростувати побоювання щодо його знань та навичок.

Євгена Нікітіна директор кадрової служби у студії Pixonic

Важливо ще в описі вакансії попередити претендентів на необхідність виконання тестового завдання. Після цього вже не так важливо, на якому етапі воно буде. Більше значення має своєчасність надання кандидату повної інформації про перспективи та зміст роботи, яку йому пропонують, а також конкретику за критеріями оцінки результатів. Адже негатив викликає саме усвідомлення неминучості витрачання особистого часу та відсутність розуміння оцінки виконаної роботи. У зворотній ситуації народжується лише спортивний інтерес.

"Дайте мені п'ять хвилин, і я зроблю все завтра"

Для компаній об'ємне завдання - це найпростіший спосіб відсіяти недостатньо мотивованих кандидатів. Але окрім тестового на десять сторінок у вас є основна робота та обмежена кількість годин на добу, парочку з яких хотілося б витрачати на сон та особисті справи. Скільки часу має займати виконання тестового завдання, щоб компанія не прогавила відповідних кандидатів?

Павло Михайлів головний геймдизайнер Crytek

Необхідно враховувати, що кандидат може продовжувати працювати над своїм поточним проектом або проходити співбесіди в інших компаніях (у яких йому також дали тестові завдання). Розраховувати, що ще не найнятий співробітник зможе витратити наступні 8-16 годин свого життя тільки на ваше завдання, дещо необачно. Якщо виконання технічного завдання виділено два-три дні, завдання буде виконано неякісно або зовсім. Оптимальний час – тиждень. За тиждень можна знайти час на виконання завдання, або на підготовку та пошук необхідної інформації навіть за дуже щільного графіка. Зрештою, у такому варіанті у кандидата залишаються у запасі цілі вихідні.

Сергій Масленніков геймдизайнер Zeptolab

У нас немає жодних обмежень із цього приводу, але ми, швидше за все, запитаємо кандидата про те, скільки часу зайняло завдання. Віримо на слово, тому що не відслідковуємо факт завантаження тестового завдання з сайту, та й кількість варіантів обійти це обмеження прагне нескінченності. Оптимальний час виконання залежить від конкретної людини, але в середньому виходить п'ять-сім годин робочого часу.

Ярослав Кравцовпродюсер гри Smash Bash в інді-команді

Не більше трьох днів це точно. Якщо кандидат тиждень просидить над тестовим завданням та отримає відмову, то у компанії стане на одного ворога більше. До того ж уміння укладатися в строки є одним із ключових навичок професійного співробітника, тому логічно перевірити цю навичку заздалегідь. Але якщо надто лімітувати час не варто, інакше кандидат не встигне показати весь масштаб своїх навичок. Звичайно, варто заздалегідь попередити його про такі обмеження, щоб особисті обставини не завадили випробуванню.

«Я не безкоштовна робоча сила»

Перший пункт стандартного завданнядля геймдизайнерів звучить так: Завантажте нашу гру. Напишіть, що вам подобається, які проблеми ви бачите і що варто виправити». Саме він періодично стає каменем спотикання. У 99 випадках зі 100 за виконання тестового завдання грошей вам не дадуть. Але мало кому хочеться безкоштовно робити те, за що платити. Наскільки професійно та доцільно просити аналізувати свій проект?

Якби метою пошуку кандидатів та проведення співбесід для нас було збирання «безкоштовних ідей» — я думаю, що це був би вкрай дорогий і неефективний шлях. Якщо людина не хоче озвучувати якісь думки чи пропозиції, це повністю її право. Якщо кандидат не озвучив якихось нових для нас ідей, це ніяк не впливає на рішення. Чому не варто боятись аналізувати наші проекти? Тому що хороший аналіз наших проектів — це одна з добрих причин взяти кандидата до штату. Розбір уже запущених, перевірених проектів, за якими ми маємо багато аналітики та думок, дозволяє нам з високим ступенем точності припустити, наскільки життєздатні ідеї та пропозиції кандидата. Це як простий чекліст, де кандидат або підтверджує наявні дані, або доповнює їх (що, безперечно, буде вагомим плюсом).

Сергій Галенкін керівник видавничого спрямування Epic Games у Східній Європі

Якщо кандидат не аналізуватиме проект, як він зрозуміє, чи готовий він займатися ним найближчі кілька років з ранку до вечора? Якщо у грі є значні проблеми, які цей кандидат може виправити за тиждень, компанія його з руками відірве.

У нашому випадку "свій проект" зазвичай знаходиться під суворим NDA, і ми не можемо його дати кандидатам. Деякі використовують ігри Ubisoft як приклади, і зроблене «домашнє завдання» з вивчення ігор компанії – це плюс. Але у нас немає якихось особливих вимог щодо цього. В першу чергу, нам важливо, щоб відповіді на запитання тесту були якісними, поганий тест із прикладами з ігор Ubisoft все ще поганий тест.

Павло Михайлов головний геймдизайнер Crytek

Побачити та зрозуміти в чому полягає проблема — лише частина справи, знайти та сформувати оптимальні варіанти вирішення потребує вже інших навичок та гарного знання архітектури проекту. А імплементувати рішення до проекту — вже третє завдання. Я б припустив, що людина, яка не розуміє цього, не має необхідного досвіду для роботи. Тут можна провести паралель з існуючою в ігровій розробці думкою про те, що ціна навіть дуже хорошої ідеї – один цент. А цінність людини, яка може її запропонувати і самостійно реалізувати, — незрівнянно вища.

«І швець, і жнець, і на дуді гравець»

Буває кілька типів завдань із ухилом у ті чи інші аспекти роботи геймдизайнера. У великих компаніях є поділ на «геймдизайнер-математик» та «геймдизайнер-сценарист». Тільки ось геймдизайн - це все ще комплексне завдання, де потрібно і функції вигадувати, і технічне завданняпрограмістам писати, та художників розуміти. Наявність яких навичок потрібно перевіряти у тестовому завданні?

Андрій Доценко геймдизайнер в Ubisoft

Англійська мова – одна з основних вимог для роботи в Ubisoft. У нашому випадку дизайнеру доведеться дуже багато спілкуватися англійською з колегами з інших офісів. Тому загальний рівень володіння англійською у тесті дуже важливий (також ми перевіряємо розмовні навички на інтерв'ю). Сильний кандидат із поганим знанням англійської, на жаль, не підходить. Наш тест складається з десяти питань (на даний момент нам такий формат здається оптимальним). Питання досить загальні, на них немає на 100% правильних відповідей, головне завдання тесту – перевірити, як дизайнер думає і як підходить до вирішення. різних проблем. Умовно, кожне питання тесту можна оцінити в 0/0,5/1 бал. З досвіду за останні два роки: «прохідний бал» для запрошення на інтерв'ю починається десь із 6,5-7 і вище. Перша з областей, які перевіряє тест — це загальні дизайнерські знання та навички: знання ігрової культури, здатність розуміти та аналізувати, як працюють інші ігри, знання дизайнерської теорії та експертизу в різних областях (у київському офісі традиційно великий фокус на 3C/UI / UX). Друга – технічні та організаційні навички: планування, вміння аналізувати інформацію, розуміння технічних обмежень платформи. І третя область – навички комунікації та презентації: рівень володіння мовою, уміння формулювати думки, структура та зовнішній вигляд тесту також дуже важливі.

Сергій Масленников геймдизайнер у Zeptolab

Спочатку ми дивимося на логіку роздумів, потім — на оригінальність та свіжість ідей. Здатність сприймати вступні та ясно донести ідеї як щось логічне, аргументоване, ціле – позитивно говорить про навички кандидата. Іноді ми пропонуємо кандидатам ввести третього гравця у Pong. Як зміниться форма поля? Залежно від того, що намалює кандидат — обговорюємо потенційні «вузькі місця» в геймплей, вводимо додаткові умови (наприклад, четвертого гравця, який керує кулькою). Цей кейс дозволяє оцінити вміння поставити себе на місце гравця, "емулювати" геймплей у голові. Часто просимо назвати кохану мобільну груі розповісти, що в ній не подобається і як змінити її на краще. По тому, що пропонує кандидат, можна сказати багато про фокус його професійних інтересів і глибини розуміння механік.

Ярослав Кравцов продюсер гри Smash Bash в інді-команді

Перевіряти потрібно ті навички, які будуть потрібні в роботі. Для цього тестове завдання має ґрунтуватися на тих завданнях, які кандидату належить вирішувати при успішному працевлаштуванні. Інакше є ризик, що він покаже майстерне володіння аналізом Hi-End-геймплей World of Warcraft, але при цьому виявиться, що не здатний писати дизайнерську документацію.

Леонід Сиротін незалежний розробник та партнер DTF

Навичка володіння письмовою промовою, навичка виразно викладати свої думки, навичка систематизувати вхідну та вихідну інформацію, навичку концентрації уваги та навичку кам'яного заду. Цей перелік є основним та практично вичерпним списком навичок, необхідних геймдизайнеру. Також слід враховувати, що немає такої професії, як геймдизайнер. Існують геймдизайнери-балансери, геймдизайнери-креативники, геймдизайнери-управлінці. До кожної з цих категорій геймдизайнерів у рамках тестового завдання можна висувати ті чи інші додаткові вимоги, наприклад, від балансера можна вимагати порахувати баланс, від креативника запропонувати функції, від управлінця покричати на монітор або скласти план розробки з бюджетуванням. Але зазвичай, у переважній більшості компаній, оцінка ТЗ зводиться до оцінки набору навичок, викладених на початку цього пункту.

Висновки

По-перше, не треба відгукуватися на все поспіль, витрачати свій і чужий час, щоб у результаті отримати відмову «через слабке тестове завдання». Це закриє шлях до компанії щонайменше на рік-півтора, бо мало хто з роботодавців вірить, що за рік кандидат може чогось навчитися. Визначтеся, де саме ви дійсно хочете працювати та докладете максимум зусиль та часу, щоб туди потрапити. По-друге, припустимо, ви вже визначилися з проектами, над якими хочете працювати кілька наступних років від заходу сонця до світанку і навпаки. У цьому випадку вам доведеться пройти всі випробування, які компанія запропонує: спілкуватися з психологами, перевірятись на поліграфі, робити величезне тестове завдання. По-третє і головних, не працюйте в компаніях, для яких вам ліньки робити тестові завдання. Ігрова індустрія — це для тих, хто любить свою роботу.

Основна класифікація тестових завдань - завдання:

закритого типу (коли учневі належить вибрати з готових варіантіввідповіді);

відкритого типу (коли учень сам знаходить відповідь і вписує до бланку).

Завдання закритого типу, у свою чергу, поділяються на:

один варіант відповіді(множинний вибір; radio-кнопка). Відповідь зараховується, якщо учень вибрав її правильно. Варіанти:

• простий вибір - одна відповідь із 4-5;

  простий вибір з множини - одна відповідь з 6-15;

  вибір найточнішої відповіді з поданих.

тести, в яких можна вибрати кілька варіантів відповіді- поставити галочки, але правильним може бути як один, так і кілька варіантів відповіді (альтернативний вибір, checkbox). Відповідь за тест може зараховується тільки якщо всі відповіді дано правильно (немає ні зайвих, ні відсутніх) або нараховується бал за кожну правильну відповідь і віднімається бал за кожну неправильну відповідь. Варіанти:

• складний вибір - двох і більш правильних відповідей із 4-5;

  складний вибір з множини - двох і більш правильних відповідей з 6-15.

встановити відповідність(ліворуч і праворуч даються пов'язані поняття, наприклад, слова у реченні, родові та видові поняття та ін.). Учню потрібно провести лінії відповідності, на комп'ютері перетягнути блоки та встановити один з одним тощо. Сюди можна віднести завдання на сортування та класифікацію. Варіанти відповідності між:

• поняттями та визначеннями;

  датами та подіями;

  списком понять та їх характеристиками;

визначити послідовності(Учню пропонується ряд понять, дат, слів, які йому належить встановити у правильній послідовності). Варіанти:

• встановлення хронологічної послідовності подій;

  встановлення логічної послідовності;

  розстановка чисел за зростанням / спаданням;

альтернативна відповідь (учню пропонується встановити Так-Ні чи Правда-Брехня за кожним наведеним твердженням).

Завдання відкритого типу:

вписати невелику фразу, слово чи символи. доповненнядо контексту. Наприклад, вставити пропущену літеру, розділові знаки, пропущене слово і т.д.;

вільний виклад - учневі виділяється місце для вільного викладу відповіді питання. Місце може бути обмежене за кількістю символів, наприклад, не більше ніж 100 або 500 символів, 10 слів тощо.

Коли та які варіанти завдань використовувати?

Характеристики	Завдання закритої форми	Доповнення	Встановлення відповідності	Встановлення послідовності
Перевірка знань фактів
Застосування знань за зразком
Застосування знань у нестандартних ситуаціях
Вгадування		Виключено
Об'єктивність оцінки
Виняток описок

Таблиця М.Б. Челишковій.

Як групувати завдання тестів

Існує три підходи до угруповання тестових завдань:

всі завдання виводяться випадковим чином – для добре використовувати програми тестування або онлайн-сервіси тестування;

завдання виводяться у порядку ускладнення - спочатку прості, потім складні. Це дозволить учням швидко просунутися вперед, а не «сидіти» зі складним завданням на початку тестування, витративши все відведене на тест час. У порядку ускладнення подаються завдання ЄДІ;

Завдання групуються за типом або темою - таким чином, учень може пристосуватися до типу завдання, а не налаштовуватись на кожен тип завдання, витрачаючи час.

Правила складання тестів

Тестове завдання має бути сформульоване чітко, зрозуміло і тлумачитися однозначно. Якщо питання сформульовано таким чином, що не всі учні можуть його однозначно зрозуміти, формулювання потрібно змінити. Приклад: Фірма, що надає мережеві послуги – це... Учень запитає: що таке «мережеві послуги? Послуги доступу до Інтернету? Фірма мережевого маркетингу типу Avon чи ще щось?

Тестове завдання має бути сформульовано коротко, бажано без використання складнопідрядних речень, зайвих причетних та дієприслівникових оборотів, вступних слів. Краще розбити завдання на кілька невеликих речень. Якщо в завданні багато «який», «де», «ніж», багато ком, його буде важко зрозуміти, а значить, і вирішити. Не бійтеся розбивати пропозиції на частини.

Завдання має бути сформульоване без повторів, подвійного заперечення (не – не), а краще взагалі уникати заперечення. Приклад: Paint не є програмою для роботи з електронними таблицями. Варіанти відповідей: Да-ні. Учню буде важко відповісти це питання, т.к. і в завданні, і у відповіді є заперечення.

Не варто писати в питанні слова типу: "сформулюйте", "вкажіть", "повідомте", якщо це і так передбачається самим питанням. Наприклад: Напишіть, як звали першовідкривача Америки? Слово "напишіть" зайве.

Перевіряйте і формулювання завдань, і формулювання відповідей, щоб у них не було підказок для учня. Слідкуйте, щоб в одному завданні не було підказки щодо відповіді на інше завдання.

У завданнях повинно бути явно невідповідних відповідей, побачивши які учень відразу обчислить правильну відповідь. Усі відповіді мають бути приблизно однаковими і за змістом, і за обсягом.

Повторювані фрази у кожному варіанті відповіді необхідно включити до тексту питання.

Не допускається використання у питанні оціночних суджень та відсилання до суб'єктивної думки учня. Наприклад, використання слів "важливий", "головний" не допускається.

У завданні головне слово (ключове поняття) краще зробити початком речення. Краще не розпочинати формулювання завдання з прийменників чи спілок. Приклад: На яку групу країн припадає найменша частка у світовому ВВП та експорті товарів. Правильно: Найменша частка у світовому ВВП посідає…

У тестовому завданні має бути достатня кількість варіантів відповідей:

• закриті типи питань – 4-6 варіантів відповідей;

  встановити відповідність – 4-5 варіантів відповідей;

  розставити послідовність – 4-8 варіантів відповідей;

Бажано супроводжувати завдання та варіанти відповідей ілюстраціями, схемами, таблицями тощо.

У тесті має бути досить багато завдань, а також завдань різного рівняскладності, щоб результати тестування були максимально об'єктивними та надійними. Також це допоможе виключити втому учня.

У тесті бажано чергувати різні види завдань, а також уникати великої кількості простих завдань (Так-Ні та ін) для підвищення об'єктивності тесту.

Вкрай небажано включати в тест завдання та питання-пастки, провокаційні питання - це не професійно та знижує довіру учнів до тесту, викладача та тестування в принципі.

Уникайте питань, на які можна відповісти на основі ерудиції чи логічного роздуму, оскільки завдання тесту – не перевірити начитаність та вміння розмірковувати, а перевірити спеціальні знання у конкретного учня, знання навчального матеріалу.

Виключайте питання на знання текстів (якщо це не потрібно спеціально), довідкової інформації, дрібних деталей та ін.

Експерт:в області інформаційні технологіїта навчального відео

Перш ніж ми перейдемо до принципів розробки тестів, необхідно зробити низку зауважень.

Відмінності між тестом та завданнями у тестовій формі

У повсякденному свідомості завжди поєднуються поняття тістаі системи завдань у тестовій формі(або передтестових завдань).

Як правило, тест розробляється колективом дослідників та апробується протягом певного часу. Після апробації до тесту вносяться корективи. Тест складається із тестових завдань. В англомовній літературі для позначення тесту використовується термін Quiz (але не Test!).

Таким чином, викладач не може створювати тести. Натомість він розробляє завдання у тестовій формі, які зовні схожі на тест, але не проходять статистичної та іншої апробації. Такі завдання можна використовувати у освітньому процесі на вирішення певних педагогічних завдань.

З цього випливає важлива неможливість використання низки показників тесту. Наприклад, труднощі тестового завдання визначається експериментально, з результатів великого обсягу вибірки учнів. Насправді вчитель має як часом щодо експерименту, і необхідний обсягом вибірки. Тому часто складність визначається «на вічко».

У загальному вигляді завдання у тестовій формі (як і тестові завдання) відповідають таким вимогам:

• стислість;
• технологічність;
• визначеність мети;
• логічна форма висловлювання;
• визначення місця для відповідей;
• однаковість правил оцінки відповідей;
• правильність розташування елементів завдання;
• однаковість інструкції всім випробуваних;
• адекватність інструкції формі та змісту завдання.

Так, стислістьзавдань у тестовій формі забезпечується ретельним підбором слів, символів, графіків, що дозволяють мінімумом коштів досягати максимуму ясності змістового завдання.Технологічність завдань визначається як властивість, яка дозволяє вести процес тестування за допомогою технічних засобів, і робити це точно, швидко, економічно та об'єктивно.Логічна форма висловлювання – це засіб упорядкування та ефективної організаціїзмісту завдання.

Форми тестових завдань

Крім того, принципи розробки тестових завдань (завдань у тестовій формі) пов'язані з їх формами. Різні автори по-різному класифікують форми тестових завдань. Положення посилюється тим, кожна автоматизована система щодо тестування називає одні й самі форми по-різному. Узагальним все різноманіття форм тестових завдань наступною класифікацією.

1. Правильно/Неправильно (Правда чи Брехня, від англ. True or False)- Містить твердження, з яким учень повинен або погодитися, або ні.

Наприклад:

Першим президентом США був Джордж Вашингтон

1. Правильно
2. Невірно

У ЄДІ подібні завдання зустрічаються в КІМах по іноземним моваму завданнях на аудіювання: учні слухають текст, далі переходять до завдань типу Правда чи Брехня.

Ця форма тестових завдань найпростіша як складання викладачем, так відповіді учням. Такі форми завдання характеризуються високим ступенем вгадування правильної відповіді.

2. Множинний вибір (завдання з вибором однієї чи кількох правильних відповідей).Ця найпоширеніша форма тестових завдань. Вона містить затвердження (запитання) та альтернативні відповіді.

Для завдань із вибором однієї правильної відповіді рекомендується щонайменше 4 (якщо менше, то ймовірність вгадування правильної відповіді збільшується) і трохи більше 6 (важко придумати правдоподібні альтернативи).

Для завдань із вибором кількох правильних відповідей рекомендується щонайменше 6 альтернатив.

3. Завдання на встановлення відповідності.Воно є набором елементів у двох стовпцях – учню потрібно встановити відповідність між елементами лівого і правого стовпців. Наявність заголовка для кожного набору стовпців є обов'язковою – він дозволяє учню не витрачати час на узагальнення елементів у стовпцях і одразу перейти до вправи.

Порівняйте:

1. a) Ярлик
2. b) Улус
3. c) Волостень
4. d) Порок
5. e) Плінфа

1. Стінобитна споруда
2. Цегла
3. Ханська грамота
4. Правитель волості
5. Володіння

Теж завдання, переформатоване з урахуванням специфічних вимог:

Як бачимо, у другому випадку завдання більш читальна, його сенс легко вловлюється. Зверніть увагу, що, наприклад, сервіс OnlineTestPad та деякі інші дозволяють додавати такі заголовки. Інші (як Moodle) не мають такого функціоналу. У цьому випадку потрібно писати повну інструкцію, наприклад, «Встановіть відповідність між ….і….»

У паперових тестах такої форми завдань для правильної відповідіпропонується заповнити спеціальну табличку. Варіант зі стрілками вважається менш технологічним для перевірки, тому його слід уникати.

	2	3	4

Також бажано встановлювати непарну кількість елементівлівого та правого стовпця, щоб останній елемент вибирався не методом виключення.

Подивіться це завдання:

Розташуйте імена російських полководців у хронологічній послідовності (за зростанням) їх діяльності

Дмитро Пожарський

Олексій Єрмолов

Михайло Скобелєв

Олексій Орлов

Це теж завдання встановлення відповідності, точніше, його різновид – завдання встановлення правильної послідовності. Ряд зарубіжних дослідників схильні до такого об'єднання. Саме тому, наприклад, у Moodle ми не знайдемо такої форми. Але її легко можна сконструювати із завдання на встановлення відповідності. Для наочності трохи переформатуємо попереднє завдання:

Ми бачимо класичне завдання на відповідність, просто лівий стовпець є числовим порядком. Правильні відповіді учень також заносити до спеціальної таблиці.

	2	3

Іноді описані вище завдання вірно-невірно, множинного вибору та відповідності об'єднують у групу завдань закритого типу, які мають наступні спільні риси:

• Присутня у явному вигляді правильна відповідь, її потрібно просто вибрати тим чи іншим способом;
• Відповіді питання можна вгадати (імовірність вгадування зростає із зменшенням кількості альтернатив);
• Відповіді можна пригадати
• Відповіді можна підібрати логічно, відкинувши неправильні альтернативи.

5. Доповнення (коротка відповідь).У цих завданнях учню необхідно дописати правильну відповідь. Іноді такий тип завдань називають завданнями відкритого типу.На відміну від розглянутих вище форм тестових завдань, такі стратегії як вгадування, нагадування правильної відповіді та ін. «Не працюють». Тому цей тип завдання вважається складнішим для учнів.

6. Есе- Коротка відповідь учня по суті питання. Строго кажучи есе перестав бути формою тестового завдання, т.к. він не відповідає необхідним критеріям стислості, технологічності та інше. На нашу думку, есе було введено для подолання відомих труднощів при складанні типових тестових завдань, головні з яких – неможливість уявитивесь навчальний матеріалу тестовому вигляді та репродуктивний характер типових тестових завдань.

Проте в завданнях есе повинні бути запропоновані еталон оптимальної відповіді разом зі стандартизованими правилами оцінки результатів його виконання.

При яких значеннях відповідні значення функцій f(х)=log 2 x та g(х) = log2 (3 – х) відрізнятимуться менше, ніж на 1?

Критерії для оцінювання правильної відповіді

Бали	Критерії оцінки виконання завдання 9
2	Наведено правильну послідовність кроків рішення: 1) складання нерівності, що містить модуль; 2) розв'язання нерівності. Всі перетворення та обчислення проведені правильно, отримано правильну відповідь
1	Наведено правильну послідовність кроків рішення. При розв'язанні нерівності у кроці 2 допущено описування та/або негруба обчислювальна помилка, що не впливає на правильність подальшого ходу рішення. В результаті цієї описки та/або помилки може бути отримана неправильна відповідь
0	Усі випадки рішення, що не відповідають зазначеним вище критеріям виставлення оцінок в 1 або 2 бали

Принципи розробки завдань у тестовій формі

Наступне, на чому нас варто зупинитись – на принципах розробки завдань у тестовій формі.

Довгий час існувала переконаність, що тест сам собою об'єктивним засобом контролю. Однак потім прийшло розуміння, що тест забезпечує насамперед процедурну об'єктивність. Для оцінки якості тесту існує ряд суміжних напрямів – надійність (гарантія відсутності в тесті випадкових помилок), валідність (гарантія, що тест вимірює саме те, що він повинен вимірювати), труднощі і т.д. Як ми вказували вище, всі ці параметри розробляються на основі різних математичних моделейу ході експериментальної роботи авторського колективу та недоступні для вчителів, викладачів. Тому ми лише зупинимося на ряді теоретичних вимог щодо розробки завдань у тестовій формі.

1. Починайте конструювати завдання з правильної відповіді. Часто так відбувається, що завдання формально містить більше правильних відповідей, ніж заплановано. Трапляються і зворотні випадки – завдання взагалі не містить правильної відповіді.
2. Зміст завдання спирається на вимоги програми та відображає предметний (метапредметний) зміст. Іноді до тесту намагаються включити питання, правильної відповіді на які просто не існує.

Наприклад:

Ми вивчатимемо Латинська моватому що…

1. На ньому говорять у багатьох країнах світу
2. Бажаємо краще розуміти рідну мову, тому що в ній багато слів, запозичених з латини
3. Бажаємо краще розуміти історію та культуру стародавнього світу

Це гарне завдання. Але його слід використовувати в соціологічному опитуванні, а не в завданнях на перевірку навчальних досягнень.

1. Питання має бути спрямовано виявлення одного елемента знання, однієї закінченої думки. В іншому випадку важко діагностувати причину невиконання завдання.

Конфуцій.

1. жив в Африці
2. жив у Китаї
3. був лікарем
4. був правителем
5. був філософом

Це завдання спрямоване виявлення відразу двох елементів – де жив Конфуцій і ким він був. Необхідно розділити ці два питання.

1. При складанні питань слід уникати слів "іноді", "часто", "завжди", "мало", "більше" і т.д. Подібні слова мають суб'єктивне значення і можуть призводити до помилкових відповідей. Тестові завдання (завдання у тестовій формі) повинні мати чітку однозначну відповідь.
2. Уникайте вступних фраз або речень, що мають мало зв'язку з основною думкою, не слід вдаватися до широких тверджень.

Наприклад:

«Анадирська западина. Дуже плоско, і Анадир по ній виляє величезним удавом… «Анадир – жовта річка», – можна назвати потім нарис. Тундра та озера по всій западині. Важко зрозуміти, чого більше: чи озер, чи землі» (О. Куваєв). В яке море впадає ця річка?

1. Правильні відповіді мають бути правдоподібними, вміло підібраними, не повинно бути явних неправильних відповідей (вони є своєрідною підказкою – дана відповідь точно є помилковою). Неправильні відповіді, дуже схожі на правильні, називаютьдистракторами.Наприклад:

Батьківщина Карла Маркса:

1. Трір
2. Карл-Маркс-Штадт
3. Штургард
4. Мюнхен

Тут можна припустити, що місто Карл-Маркс-Штадт отримало свою назву тому, що саме в ньому народився Карл Маркс. Проте правильна відповідь – Трір.

1. Не слід ставити запитання з каверзою - швидше за все в оману будуть введені найбільш здібні або обізнані учні, які знають достатньо для того, щоб потрапити в пастку, а також це суперечить меті визначення рівня знань і розуміння.
2. Слід використовувати більш довгі запитання та більш короткі відповіді, граматично узгоджені з основною частиною завдання .

Наприклад:

Яке судження вірне?

1. Неповні пропозиції – це пропозиції, в яких пропущено одного з головних членів
2. Неповні пропозиції – це пропозиції, в яких пропущено одного з другорядних членів
3. Неповні пропозиції - це пропозиції, в яких пропущено якийсь член пропозиції - головний або другорядний

Неважко побачити, що тут є словосполучення, що повторюється, яке і слід винести у формулювання завдання:

Неповні пропозиції - це пропозиції, в яких пропущено

1. один із головних членів
2. один із другорядних членів
3. будь-який член пропозиції - головний або другорядний

1. Не використовуйте заперечення в основній частині питання. По-перше, це призводить до нерозуміння суті завдання. По-друге, об'єктом контролю мають бути елементи знання, а чи не елементи незнання.

Наприклад:

Чи жили чи ні ці люди насправді в Стародавню Грецію?

1. Гомер
2. Ахілл
3. Зевс
4. Перікл
5. Фідій
6. Арістотель
7. Сократ

У цьому випадку не ясно як відповідати - так жили, або не жили. Тому питання потрібно сформулювати точніше, наприклад: Назвіть міфологічних персонажів Стародавню Грецію.

1. При чергуванні правильних відповідей у ​​питаннях не повинно бути явної системи – наприклад, завжди лише 1 варіанти правильні, чи правильними варіантами є послідовно перший, другий, третій, четвертий варіант. У комп'ютерному тестуванні зазвичай такої проблеми не існує, тому що комп'ютер автоматично перетасовує альтернативи.
2. Якщо ставиться питання кількісного характеру, необхідно вказати послідовність (від меншого до більшого чи навпаки) вибору правильних відповідей .

Наприклад:

Відстань від Сонця

a) Сатурн

b) Меркурій

c) Земля

d) Уран

e) Венера

f) Марс

У цьому прикладі існують два набори правильних варіантів відповідей – одна послідовність від найближчої планети від Сонця, інша – від найбільш віддаленої.

1. Питання та відповідь мають відрізнятися шрифтовим та просторовим оформленням. Наприклад, питання (завдання) виділяється жирним шрифтом, відповідь – звичайним. Для запису відповідей використовують додаткові відступи. Але це правило стосується лише паперових тестів – у комп'ютерних автоматизованих системахоформлення задається програмне, яке змінювати не доцільно.

І пам'ятайте – не кожне завдання можна подати у вигляді тестового контролю.

При написанні статті використовувалися приклади http://koi.tspu.ru/koi_books/samolyuk/