Модернизация диагностики знаний студентов: анализ эффективности современных форматов тестирования
Аннотация и ключевые слова
Аннотация:
Актуальность исследования: сегодня возрастают требования к объективности контроля качества образования и обновляются стандартизированные форматы тестовых заданий, что обусловливает необходимость их апробации. С этой целью проводится оценка остаточных знаний студентов по базовой дисциплине «Физика. Механика. Термодинамика», с применением современных диагностических средств, в соответствии с процедурами государственной аккредитации в сфере образования. Разработка и использование таких средств согласуются с требованиями федерального государственного контроля (надзора) в сфере образования. Методы исследования: диагностика остаточных знаний студентов с использованием тестов двух форматов. Цель исследования — апробировать диагностические тесты, разработанные в соответствии с методическими рекомендациями до и после 2024 г., сравнить их результативность, когнитивные аспекты восприятия их студентами и статистику выполнения заданий. Новизна исследования: впервые на материале базовой дисциплины разработаны тестовые задания по методическим рекомендациям 2024 г. и проведено их экспериментальное сопоставление с традиционным форматом тестирования. Анализ результатов выполнения заданий студентами, при переходе к новым оценочным средствам, позволил выявить факторы, определяющие успешность усвоения знаний. Результаты исследования: установлено, что тесты, разработанные по методическим рекомендациям 2024 г., обладают более высокой дифференцирующей способностью по сравнению с традиционными форматами тестирования — позволяют уверенно выделять группы студентов по уровню знаний и дают более сбалансированное распределение баллов за тест. Особую диагностическую ценность показали задания с развернутым ответом, выполнение которых тесно коррелирует с прогнозируемой успешностью освоения инженерных дисциплин. Практическая значимость исследования: представленный методический подход к конструированию диагностических тестов (сочетание заданий разного формата) носит универсальный характер и становится действенным инструментом планирования индивидуальной работы. Подход может быть использован для оценки остаточных знаний по дисциплинам любого профиля — от инженерных и естественно-научных до гуманитарных.

Ключевые слова:
форматы тестовых заданий, апробирование тестов, качество образования, образовательные программы, базовая дисциплина, остаточные знания, объективность оценки знаний, усвоение знаний, аккредитация вузов
Текст
Рекомендательное письмо (PDF): Читать Скачать

Art. ID: m04s03a10

Введение

Современная модернизация системы высшего образования России охватывает широкий спектр преобразований (Петров, Егорова, 2023), где особое место занимает стандартизация оценки качества подготовки будущих специалистов. Повышение объективности этой оценки представляет собой неотъемлемую составляющую реформ в сфере высшего образования. Сегодня для оценки усвоения дисциплин программы высшего образования применяются унифицированные критерии и методика их расчета, утвержденные Министерством науки и высшего образования на период 2023—2029 гг.[1]

Особое значение в рамках применения аккредитационных показателей приобретает оценка остаточных знаний по базовым дисциплинам с использованием современных диагностических средств, соответствующих новым нормативам (Алтыникова, 2024). Такой подход не просто дополняет традиционные формы аттестации, а радикально меняет парадигму контроля качества, фокусируясь на долгосрочной устойчивости усвоенного материала. Подход позволяет перейти от поверхностной проверки «свежего» знания к верификации его «выживаемости» во времени, что особенно актуально в условиях цифровизации и ускоренного обновления профессиональных компетенций.

Остаточные знания (или residual knowledge в международной терминологии) — это объем информации, навыков и компетенций, сохраняющийся у студента через значительный период после завершения изучения дисциплины (обычно 6—18 месяцев). В отличие от стандартных экзаменов, проводимых сразу после изучения курса, диагностика остаточных знаний ориентирована не на проверку кратковременного запоминания, а на определение глубины понимания и готовности применять знания при решении новых задач. Это имеет принципиальное значение для базовых естественно-научных дисциплин, таких как физика, математика, химия.

В основе оценки остаточных знаний лежат современные диагностические технологии, которые минимизируют роль человеческого фактора, тем самым обеспечивая объективность оценивания знаний.

Пробное тестирование студентов Национального исследовательского университета «МИЭТ» проведено с целью проверки остаточных знаний по дисциплине «Физика. Механика. Термодинамика».

Обоснование использования тестового контроля в системе оценки качества обучения физике в вузе

Тестирование было проведено с использованием двух комплектов тестов, составленных в соответствии с требованиями, действовавшими до и после 2024 г. В дальнейшем изложении тесты, составленные в соответствии с требованиями до 2024 г., будут именоваться тестами старого формата, а тесты, соответствующие требованиям, действующим с 2024 г., — тестами нового формата.

Исследование было выполнено в весеннем семестре 2025 г. среди студентов первого курса, изучавших дисциплину «Физика. Механика. Термодинамика» в осеннем семестре 2024 г. Согласно рабочей программе, общая трудоемкость дисциплины составляет 180 ч, включая 32 ч лекционных занятий, 16 ч практических работ и 16 ч лабораторных работ. В тестировании приняли участие 112 студентов, обучающихся по следующим направлениям подготовки: «Прикладная математика» (01.03.04), «Математика и компьютерные науки» (02.03.01), «Информационная безопасность» (10.03.01) и «Радиотехника» (11.03.01). Следует заметить, что студенты данных направлений зачислены в Национальный исследовательский университет «МИЭТ» на основе результатов ЕГЭ по информатике или физике (на выбор абитуриента). Данные приемной комиссии МИЭТ свидетельствуют о том, что при поступлении на технические направления примерно 50 % абитуриентов предпочитают сдавать ЕГЭ по информатике, что создает в дальнейшем комплекс проблем. Можно сказать, что это системная «болевая точка» современного высшего технического образования в России. Перечислим проблемы, связанные с выбором экзамена по информатике вместо экзамена по физике.

Во-первых, физическое мышление подразумевает умение строить идеализированные модели, представлять процессы в пространстве и времени, анализировать конкретную ситуацию. Информатика (в школьном формате обучения) развивает иной тип мышления — алгоритмический, дискретный, структурный.

Во-вторых, студенты, поступившие в вуз по результатам ЕГЭ по информатике, имеют «нулевой» уровень подготовки по физике, в то время как программа вуза опирается на базовую подготовку по предмету и ориентирована н а углубление знаний, полученных в школе. Преподаватель вынужден либо снижать уровень сложности изучаемого курса, либо излагать материал, который большинство студентов усвоить не способны. Когда «физики» повторяют и углубляют школьный курс, «информатики» его впервые осваивают. Это резко замедляет темп лекций и семинаров, создает дисбаланс в студенческой группе.

В-третьих, студенты, выбравшие ЕГЭ по информатике вместо ЕГЭ по физике, часто ориентированы на программирование и вычислительную технику. От обучения в техническом вузе (особенно на таких направлениях, как «Математика и компьютерные науки», «Прикладная математика», «Информационная безопасность»), они ожидают сразу погружения в написание компьютерных кодов. А вместо этого сталкиваются с глубокой и сложной физической теорией, лабораторными работами по механике, электричеству, волновой оптике. Для «информатиков» часто шокирующим является сам формат обучения в вузе: физический эксперимент, работа с реальными приборами, оценка погрешностей, построение графиков вручную, анализ экспериментальных зависимостей (Жаринова, Харач, 2025). У них нет «чувства физики», интуитивного предсказания результата опыта. Это вызывает разочарование, психологические и мотивационные проблемы.

В-четвертых, физика использует математику как язык (Федоренко, 2017). Проблема выбора адекватного математического аппарата при обучении физике тесно связана с одним из фундаментальных дидактических принципов — наглядностью. Можно говорить о наглядности записанных формул или уравнений, если их использование в рамках выбранной математической схемы позволяет учащемуся уверенно анализировать рассматриваемые явления и получать правильные, согласующиеся с экспериментом результаты. Школьная информатика использует математический аппарат иначе: на первый план выходит не анализ явлений и их согласованность с опытом, а алгоритмическая реализуемость и корректность работы программы. Очевидно, что данная проблема носит системный характер. Она возникла из-за разрыва между школьными экзаменами (где информатика является тактическим выбором, в целях получения количества баллов) и реальными требованиями технического вуза. Студенты, поступившие в вуз без базовых знаний по физике, оказываются в ситуации «хронического отставания» и стресса. Решение проблемы требует усилий и от преподавателей вузов (адаптация программ, вводные курсы, использование современных средств диагностики знаний), и от абитуриентов, которые должны осознанно подходить к выбору экзаменов, понимая, что поступление в вуз и успешная учеба в нем — это разные вещи.

Адаптация образовательных программ невозможна без систематического мониторинга фактического состояния знаний студентов (Мурсенкова, Лубенченко, Лапицкий, 2024). Для объективной оценки степени усвоения учебного материала и выявления зон необходимой коррекции проведена проверка остаточных знаний, в рамках которой студентам предложили два типа тестов:

1) тест старого формата[2] — содержит пять заданий с выбором одного верного ответа из предложенных;

2) тест нового формата[3] — содержит одно задание с выбором одного верного ответа из предложенных, одно задание с выбором двух верных ответов из числа предложенных, одно задание на установление соответствия, одно задание на установление последовательности, одно задание с развернутым ответом.

Тест старого формата составлен в привычной для студентов форме, используемой в ходе семестрового обучения и на экзамене (Федоренко, 2011, 2022).

Тест нового формата разработан в соответствии с актуальными методическими рекомендациями, применяемыми в ходе государственной аккредитации и при проведении федерального государственного контроля (надзора) в сфере образования (Алтыникова, 2024).

Тест старого формата было предложено написать 58 студентам, тест нового формата — 54 студентам. Максимальная оценка за каждое задание теста — 2 балла, максимальный балл за тест — 10.

Сравнение эффективности разных подходов к оценке остаточных знаний студентов

Оценивание каждого задания в тестах осуществлялось с учетом полноты и корректности письменного обоснования выбранного ответа, что позволило минимизировать эффект случайного угадывания и оценить фактическое понимание материала.

Анализ результатов выполнения теста старого формата. Средний балл за тест — 5.1. Результаты тестирования представлены на гистограмме 1.

 

Гистограмма 1. Результаты выполнения теста старого формата

Histogram 1. Results of the old format test

 

Из анализа гистограммы следует, что примерно 50 % студентов набрали 4 балла и менее, 50 % — более 4 баллов. При этом 25 % студентов получили ≤ 2 балла, 75 % — ≤ 6 баллов. Минимальный балл — 0 (1 чел.), максимальный — 10 (6 чел.). Результаты выполнения теста большинством студентов оказались в интервале от 2 до 5 баллов (31 чел., 53 %). Максимумы гистограммы в 2 и 5 баллов свидетельствуют о поляризации групп студентов по уровням подготовки: первая группа справляется с базовыми заданиями 2 и 5, но не решает сложные задания 3 и 4; вторая группа стабильно решает четыре или пять заданий теста, набирая 5 баллов и более.

Анализ результатов по отдельным заданиям показал, что наибольшие трудности вызвало задание 3 (по теме «Динамика твердого тела»): его выполнили успешно лишь 24 % студентов, что резко контрастирует с результатами выполнения остальных заданий (см. гистограмму 2).

 

 

Гистограмма 2. Успешность выполнения отдельных заданий теста старого формата

Histogram 2. Success rate of individual tasks in the old format test

 

Анализ результатов выполнения теста нового формата. Средний балл за тест — 6.3. Результаты тестирования представлены на гистограмме 3.

 

 

Гистограмма 3. Результаты выполнения теста нового формата

Histogram 3. Results of the new format test

 

Из анализа гистограммы 3 следует, что 81,5 % студентов получили ≥ 5 баллов, 37 % — ≥7 баллов.

Максимумы гистограммы в 5 и 6 баллов (44,4 % студентов) и в 9 и 10 баллов (20,4 %) можно интерпретировать следующим образом. Выявлены три группы студентов с разным уровнем подготовки: примерно 44,4 % студентов показали стандартный уровень остаточных знаний (5—6 баллов); 25,9 % студентов обнаружили глубокое понимание предмета (9—10 баллов); 18,5 % студентов имеют пробелы в базовых знаниях (1—4 балла).

Анализ результатов по отдельным заданиям (см. гистограмму 4) показал:

1) задание 1 (выбор одного верного ответа из предложенных) выполнили успешно 74 % студентов — базовый уровень, усвоен большинством;

2) задание 3 (на установление соответствия) и задание 4 (на установление последовательности) выполнили 54—59 % студентов;

3) задание 2 (выбор двух верных ответов из числа предложенных) оказалось критически сложным, его выполнили 35 % студентов.

 

 

Гистограмма 4. Успешность выполнения отдельных заданий теста нового формата

Histogram 4. Success rate of individual tasks in the new format test

Сравнительная характеристика тестов старого и нового формата. Тест старого формата может быть избыточно сложным для студентов с низкой успеваемостью, что снижает его эффективность как инструмента проверки остаточных знаний, — тест, скорее, выявляет неспособность справиться с заданием, чем дает объективную оценку.

Тест нового формата выявляет пробелы (задание 2), но не «заваливает» студентов, что наиболее соответствует цели проверки остаточных знаний. Тест в таком формате лучше дифференцирует студентов с разным уровнем подготовки (на гистограмме 3 выделены три группы студентов).

При проверке остаточных знаний тест является эффективным инструментом диагностики, если соответствует следующим критериям:

1) тест показывает, какие темы студенты забыли, т. е. выявляет пробелы в знаниях;

2) тест не слишком сложный — иначе большинство студентов получат низкие баллы, и диагностика будет бесполезной;

3) тест дифференцирует уровни знаний: глубокое понимание предмета; стандартный уровень; недостаток базовых знаний.

В соответствии с данными критериями тест нового формата лучше выявляет сохранившиеся знания, позволяет разделить студентов по уровню подготовки: 5—6 баллов — «удовлетворительно»; 7—9 — «хорошо»; 10 — «отлично».

Особую диагностическую ценность представляет включение в т ест заданий с развернутым ответом. Именно выполнение этой части наиболее тесно коррелирует с прогнозируемой успешностью освоения инженерных дисциплин Сопротивление материалов», «Теоретическая механика», «Электротехника»). Задания закрытого типа позволяют оценить преимущественно узнавание и степень запоминания, тогда как посредством заданий открытого типа выявляются сформированность физического мышления, способность к логическим рассуждениям, построению моделей и применению законов в измененной ситуации, — т. е. те компетенции, которые важны для профессиональной подготовки специалиста.

Выводы

Тестирование студентов по дисциплине «Физика. Механика. Термодинамика» показало, что системная оценка остаточных знаний является необходимым условием эффективного управления образовательным процессом. Реформа должна начинаться не с внедрения нового, а с диагностики и укрепления старого — того базиса, на котором только и может быть построено качественное и осмысленное образование. Важным методическим условием успешной диагностики является оптимальная трудность теста. Завышенная сложность теста приводит к невозможности содержательно интерпретировать результат, так как велика доля невыполненных заданий. Сбалансированный по типам заданий тест нового формата позволяет получить распределение результатов — от удовлетворительных до отличных, — что дает возможность четко выделить группы студентов по уровню знаний. Это превращает тестирование из процедуры констатации неуспеваемости в действенный инструмент планирования индивидуальной работы.

Представленный в статье подход к конструированию диагностических тестов (сочетание заданий разного формата) носит универсальный характер. Подход может быть использован для диагностики остаточных знаний по дисциплинам любого профиля — от инженерных и естественно-научных до гуманитарных.

Дефицит фундаментальных физических знаний у значительной группы студентов первого курса ведет в последующем к снижению уровня усвоения дисциплин инженерного цикла и специальных курсов. Игнорирование этого факта создает риск выпуска специалистов с фрагментарными, бессистемными знаниями, не способных к комплексному анализу, моделированию реальных процессов и решению междисциплинарных профессиональных задач.

В условиях цифровизации высшего образования, сокращения аудиторной нагрузки и быстрого обновления профессиональных требований подход к диагностике остаточных знаний, основанный на рекомендациях Н. В. Алтынниковой, становится не просто желательным, а необходимым элементом управления качеством образования. Такой подход позволяет оперативно получать объективную обратную связь, адаптировать методы преподавания под студентов с разным уровнем подготовки и принимать обоснованные педагогические решения, направленные на подготовку конкурентоспособных специалистов, обладающих системным мышлением.

 

[1] «Об утверждении аккредитационных показателей по образовательным программам высшего образования, методики расчета и применения аккредитационных показателей по образовательным программам высшего образования: Приказ Минобрнауки РФ от 18.04.2023 № 409». 4.09.2025. Рособрнадзор. 11.06.2026. <https://obrnadzor.gov.ru/wp-content/uploads/2023/05/prikaz-minobr-409.docx>.

[2] Проверка остаточных знаний. Демонстрационный вариант теста старого формата. См. в: «Архив: ИБ-1, ПМ-1, МК-1, РТ-1 (2024-2025 уч. год)». Федоренко Ирина Владимировна. <https://iv-fedorenko.ru/test_starogo_formata.pdf>.

[3] Проверка остаточных знаний. Демонстрационный вариант теста нового формата. См. в: «Архив: ИБ-1, ПМ-1, МК-1, РТ-1 (2024-2025 уч. год)». Федоренко Ирина Владимировна. <https://iv-fedorenko.ru/test_novogo_formata.pdf>.

Список литературы

1. Алтыникова Н. В. Диагностическая работа в государственной регламентации образовательной деятельности: высшее образование: методические рекомендации для экспертов. М.: Ай Пи Ар Медиа, 2024. 42 с.

2. Жаринова Н. Н., Харач О. Г. «Методические аспекты введения в теорию погрешностей в лабораторном практикуме по физике в современном вузе». Экономические и социально-гуманитарные исследования 12.3 (2025): 88—101. https://doi.org/10.24151/2409-1073-2025-12-3-m06s03a10. EDN: https://elibrary.ru/UQQJSO.

3. Мурсенкова И. В., Лубенченко О. И., Лапицкий К. М. «Разработка тестов для проверки остаточных знаний по общему курсу физики у студентов НИУ МЭИ». Вестник Московского университета сер. 20 Педагогическое образование 22.4 (2024): 103—121. https://doi.org/10.55959/LPEJ-24-28. EDN: https://elibrary.ru/LDYEHA.

4. Петров В. Л., Егорова Л. Е. «Концептуальные подходы и модели ФГОС ВО нового поколения». Высшее образование: новые вызовы и современные решения при реализации образовательных программ: сб. материалов III Всерос. науч.-метод. конф. (19—20 дек. 2022). М.: Центр полиграфических услуг «Радуга», 2023. 6—12. EDN: https://elibrary.ru/VPPAOU.

5. Федоренко И. В. «Принципы решения физических задач». Экономические и социально-гуманитарные исследования 2 (14) (2017): 81—86. EDN: https://elibrary.ru/YUJKJH.

6. Федоренко И. В. Механика. Молекулярная физика: сб. тестовых заданий по физике. М.: МИЭТ, 2011. 55 с.

7. Федоренко И. В. Механика. Молекулярная физика: сб. тестовых заданий. М.: МИЭТ, 2022. 63 с.

Войти или Создать
* Забыли пароль?