zinet home
home home
home ИНТЕЛЛЕКТ-ПОРТАЛ
home Стартовал прием материалов в сборник XХХIX-й научной конференции. Требования к публикациям - в разделе "Объявления".

На главную | Объявления | Отчеты предыдущих конференций | История Украины | Контакты

РЕСУРСЫ ПОРТАЛА:

Тридцать восьмая научно-практическая конференция
(23 - 28 мая 2016 г.)


Тридцать седьмая научно-практическая конференция
(19 - 22 апреля 2016 г.)


Тридцать шестая научно-практическая конференция
(29 декабря 2015 - 5 января 2016 г.)


Тридцать пятая научно-практическая конференция
(24-27 ноября 2015 г.)


Тридцать четвертая научно-практическая конференция
(13-17 октября 2015 г.)


Тридцать третья научно-практическая конференция
(20-27 мая 2015 г.)


Тридцать вторая научно-практическая конференция
(2-7 апреля 2015 г.)


Тридцать первая научно-практическая конференция
(25 февраля - 1 марта 2015 г.)


Тридцатая научно-практическая конференция
(19-25 января 2015 г.)


Двадцать девятая международная научно-практическая конференция
(19-25 ноября 2014 г.)


Двадцать восьмая международная научно-практическая конференция
(08-13 октября 2014 г.)


Двадцать седьмая научно-практическая конференция
(20-25 мая 2014 г.)


Двадцать шестая научно-практическая конференция
(7-11 апреля 2014 г.)


Двадцать пятая юбилейная научно-практическая конференция
(3-7 марта 2014 г.)


Двадцать четвертая научно-практическая конференция
(20-25 января 2014 г.)


Двадцать третья научно-практическая конференция
(10-15 декабя 2013 г.)


Двадцать вторая научно-практическая конференция
(4-9 ноябя 2013 г.)


Первая международная научно-практическая конференция
(14-18 мая 2013 г.)


Двадцать первая научно-практическая конференция
(14-18 мая 2013 г.)


Двадцатая научно-практическая конференция
(20-28 апреля 2013 г.)


Девятнадцатая научно-практическая конференция
(26 февряля - 3 марта 2013 г.)


Восемнадцатая научно-практическая конференция
(22-26 декабря 2012 г.)


Семнадцатая научно-практическая конференция
(22-26 октября 2012 г.)


Шестнадцатая научно-практическая конференция
(09-14 апреля 2012 г.)


Пятнадцатая научно-практическая конференция
(01 - 07 марта 2012 г.)


Четырнадцатая научно-практическая конференция
(12-20 декабря 2011 г.)


Тринадцатая научно-практическая конференция
(28 октября - 09 ноября 2011 г.)


Двенадцатая научно-практическая конференция
(28 мая - 06 июня 2011 г.)


Одинадцатая научно-практическая конференция
(26 апреля - 04 мая 2011 г.)


Десятая научно-практическая конференция
(15-23 марта 2011 г.)


Девятая научно-практическая конференция
(27-31 декабря 2010 г.)


Восьмая научно-практическая конференция
(05-12 декабря 2010 г.)


Седьмая научно-практическая конференция
(28 мая - 7 июня 2010 г.)


Шестая научно-практическая конференция
(1-15 апреля 2010 г.)


Пятая научно-практическая конференция
(20-27 мая 2009 г.)


Четвертая научно-практическая конференция
(10-17 апреля 2009 г.)


Третья научно-практическая конференция
(20-27 декабря 2008 г.)


Вторая научно-практическая конференция
(1-7 ноября 2008 г.)


Первая научно-практическая конференция
(10-15 мая 2008 г.)



НАШИ ПАРТНЕРЫ:

Студия веб-дизайна www.zinet.info



Студия ландшафтного дизайна Флора-МК


Уникальное предложение!



Сайт-визитка - теперь
всего за 200 грн!

подробнее>>>



РАЗРАБОТКА СПОСОБОВ КАЛИБРОВАНИЯ АВТОМАТИЗИРОВАННЫХ СИСТЕМ ТЕСТИРОВАНИЯ

 

Рожик А.С.

Украина, г. Киев, НТУУ «КПИ»

 

Системы калибрования автоматизированных систем тестирования предназначены для калибрования тестових пространств системы тестирования, что позволяет получать объективные результаты тестирования и характеристику их неопределенности.

Основные причины применения таких системы - создание объективной системы оценивания результатов тестирования студентов и школьников. Существующие системы позволяют провести обработку результатов тестирования, повышают точность и достоверность оценки результата тестирования, упрощает проведение процедуры мониторинга системы тестирования.

Обычно системы калибрования автоматизированных систем тестирования предназначены для обработки результатов тестирования, количество тестовых заданий за один сеанс которого может составлять 5..25 задач. Чем больше количество тестируемых пройдет тест, тем корректнее будут полученные результаты.

Качество тестового материала закладывается на этапах его разработки. Предложено выделять следующих этапы создания теста (рисунок 1):

·       создание тестовых заданий, определение целей и целевой аудитори;

·       определение показателей качетсва;

·       эксплуатация тестового пространства;

·       уточнение показателей качества.

Существует много методов и подходов для калибрования автоматизированных систем, в данной статье рассмотрено два основных подхода – это классическая теория тестов и современная теория создания тестов (IRT). Эти два подхода не могут не взаимодействовать, так как на первом этапе создания теста из набора предтестовых заданий эмпирические данные лучше обрабатывать с помощью более простого, но не менее эффективного математико-статистического аппарата классической теории тестов. А далее, в процессе углубления анализа качества заданий, для объективной оценки их параметров необходимо привлекать аппарат современной теории создания тестов (IRT). Процесс математическо-статистической обработки, как правило, проводится с помощью специального программного обеспечения.

 

Рисунок 1. Этапы создания тестов

 

Для оценивания показателей качества тестовых заданий существует ряд методом, а также множество показателей, с помощью которых можно объективно оценить тестовые задания. Далее рассмотрены два наиболее распространённых подхода оценивания качества тестов – это классическая теория тестов и современная теория IRT.

С помощью классической теории тестов возможно оценить такие статистические показатели, лежащие в основе показателей качества:

·       мода;

·       дисперсия;

·       размах;

·       стандартное отклонение;

·       асимметрия;

·       эксцесс;

·       корреляция;

·       ковариация.

Все эти параметры возможно рассчитать имея лишь исходные данные результатов тестирования в виде суммарных баллов для каждого тестируемого. Но все эти параметры не несут полной информации о качестве тестов, а лишь отображают его способности с разных сторон. Например, размах измеряет на шкале расстоянийя, в пределах которого измеряются все значения показателя в распределении, а это весьма не надежный и приближенный показатель. Также мода – это значение, которое встречается наиболее часто среди выполнения тестов, что также может сказать нам лишь о том, какой приблизительный средний уровень обученности испытуемых или трудность конкретного задания. Для того, чтобы полным образом оценить качество тестовых заданий, стоит использовать более сложные показатели, которые также можно рассчитать с помощью доступных формул.

Классическая теория тестов включает в себя еще такие параметры:

·       надежность;

·       валидность;

·       дискриминативность;

·       трудность;

·       уровень подготовки.

Эта группа показателей дает возможность получить больше информации о качестве тестовых заданий. Например, трудность заданий теста – это характеристика задачи теста, отражающая статистический уровень ее решаемости в данной выборке стандартизации. Трудность является одной из базовых процедур разработки и проверки диагностических качеств тестовой методики.

Каждый из этих показателей подвержен влиянию как внешних, так и внутренних психологических факторов, влияющих на результаты тестирование. Поэтому очень важно получить оценки показателей качества инвариантные к разным влияющим факторам.

Количество параметров, которые можно описать с помощью IRT значительно меньше, чем в классической теории тестов, но это не может сказать о том, что этот метод хуже. В современной теории IRT используется интервальная шкала для характеристики показателей качества, а в классической теории – порядковая.

Возможности двух подходом относительно номенклатуры оцениваемых параметров иллюстрирует рисунок 2.

 

Рисунок 2. Оценка показателей качества тестовых заданий.

 

Основными параметрами, которые стоит оценивать являются трудность заданий и уровень обученности, поэтому классическая теория создания тестов имеет ряд минусов, делая дополнительные расчеты и действия, не несущие смысловой нагрузки. Современная теория имеет ряд преимуществ – хороший математический аппарат, нацеленность на результат, и отсутствие лишних действий. Современная теория на данный момент является лучшей методикой обработки тестовых заданий, но все-таки это аппарат еще не до конца изучен и требуется развитие этой области, так как тестирование это один из лучших методов определения уровня знаний, но он также имеет и недостатки, которые выявить и принять меры для устранения их.

Вывод: проведение сравнительного анализа двух методов показал, что без объединения обоих методов не возможно создать идеальную систему, так как плюсом классической теории является то, что она имеет просто математический аппарат, который в дальнейшем используется в современной теории IRT. Основной минус классической теории является то, что измерения происходят в порядковой шкале, в то время как современная теория использует интервальные шкалы.

 

Література:

1.     Анализ исследований и разработок в области информатизаци и образования М:. ININFO, 1993р.

2.     Беспалько В.П. Педагогика и передовые технологии обучения. -М., 1995.

3.     Булыгин В.Г. Основы автоматизации технологических процессов обучения.- Йошкар-Оле, 2003р.

4.     В.Н. Агеев Электронные учебники и автоматизированные системы обучения.- М., 2001. 79 с.



Первая научно-практическая конференция
"Инновационный потенциал украинской науки - ХХI век"
(10-15 мая 2008 г.)


(отчет)
Вторая научно-практическая конференция
"Инновационный потенциал украинской науки - ХХI век"
(1-7 ноября 2008 г.)
(отчет)
Третья научно-практическая конференция
"Инновационный потенциал украинской науки - ХХI век"
(20-27 декабря 2008 г.)
(отчет)
Четвертая научно-практическая конференция
(10-17 апреля 2009 г.)
(отчет)
Пятая научно-практическая конференция
(20-27 мая 2009 г.)
(отчет)
Шестая научно-практическая конференция
(1-15 апреля 2010 г.)
(отчет)
Седьмая научно-практическая конференция
(28 мая - 7 июня 2010 г.)
(отчет)
Восьмая научно-практическая конференция
(05-12 декабря 2010 г.)
(отчет)
Девятая научно-практическая конференция
(27-31 декабря 2010 г.)
(отчет)
Десятая научно-практическая конференция
(15-23 марта 2011 г.)
(отчет)
Одинадцатая научно-практическая конференция
(26 апреля 04 мая 2011 г.)
(отчет)
Двенадцатая научно-практическая конференция
(28 мая - 06 июня 2011 г.)
(отчет)
Тринадцатая научно-практическая конференция
(28 октября - 09 ноября 2011 г.)
(отчет)
Четырнадцатая научно-практическая конференция
(12-20 декабря 2011 г.)
(отчет)
Пятнадцатая научно-практическая конференция
(01-07 марта 2012 г.)
(отчет)
Шестнадцатая научно-практическая конференция
(09-14 апреля 2012 г.)
(отчет)
Семнадцатая научно-практическая конференция
(22-26 октября 2012 г.)
(отчет)
Восемнадцатая научно-практическая конференция
(22-26 декабря 2012 г.)
(отчет)
Девятнадцатая научно-практическая конференция
(26 февраля - 3 марта 2013 г.)
(отчет)
Двадцатая научно-практическая конференция
(20-28 апреля 2013 г.)
(отчет)
Двадцать первая научно-практическая конференция
(13-18 мая 2013 г.)
(отчет)
Первая международная научно-практическая конференция
"Перспективные направления отечественной науки - ХХI век"
(13-18 мая 2013 г.)
(отчет)
Двадцать вторая научно-практическая конференция
(4-9 ноября 2013 г.)
(отчет)
Двадцать третья научно-практическая конференция
(10-15 декабря 2013 г.)
(отчет)
Двадцать четвертая научно-практическая конференция
(20-25 января 2014 г.)
(отчет)
Двадцать пятая юбилейная научно-практическая конференция
(3-7 марта 2014 г.)
(отчет)
Двадцать шестая научно-практическая конференция
(7-11 апреля 2014 г.)
(отчет)
Двадцать седьмая научно-практическая конференция
(20-25 мая 2014 г.)
(отчет)
Двадцать восьмая научно-практическая конференция
(08-13 октября 2014 г.)
(отчет)
Двадцать девятая научно-практическая конференция"
(19-25 ноября 2014 г.)
(отчет)
Тридцатая научно-практическая конференция
(19-25 января 2015 г.)
(отчет)
Тридцать первая научно-практическая конференция
(25 февраля - 1 марта 2015 г.)
(отчет)
Тридцать вторая научно-практическая конференция
(2 - 7 апреля 2015 г.)
(отчет)
Тридцать третья научно-практическая конференция
(20 - 27 мая 2015 г.)
(отчет)
Тридцать четвертая научно-практическая конференция
(13 - 17 октября 2015 г.)
(отчет)
Тридцать пятая научно-практическая конференция
(24 - 27 ноября 2015 г.)
(отчет)
Тридцать шестая научно-практическая конференция
(29 декабря 2015 - 5 января 2016 г.)
(отчет)
Тридцать седьмая научно-практическая конференция
(19 - 22 апреля 2016 г.)
(отчет)
Тридцать восьмая научно-практическая конференция
(23 - 25 мая 2016 г.)
(отчет)

На главную | Объявления | Отчеты предыдущих конференций | История Украины | Контакты

Copyright © Zinet.info. Разработка и поддержка сайта - Студия веб-дизайна Zinet.info