Педагогический университет

Газета “Информатика” и Педагогический университет “Первое сентября”
(лицензия A225682, № 020503 от 19.07.2006)
представляют новый дистанционный курс
повышения квалификации для учителей информатики

Как готовиться к тестированию по проверке ИКТ-компетенции школьников

	Бурмакина Вероника Федоровна — руководитель проекта “Разработка инструмента для оценки ИКТ-компетентности школьников”, доцент кафедры компьютерной графики и дизайна МПГУ.
	Фалина Ирина Николаевна — кандидат педагогических наук, доцент кафедры информатики СУНЦ МГУ им. М.В. Ломоносова, автор учебных и методических пособий по информатике.

Концепция курса

И как часто мы слышим: стоит ли тратить время на изучение конкретного текстового редактора, если через несколько лет нынешнему ученику придется работать с другим редактором?!

Вопрос в такой формулировке возникает в связи с тем, что мы учим конкретным навыкам работы с конкретным программным средством. И действительно, нужны ли нам сейчас те навыки и умения, которые мы приобрели при работе в Lexicon’е? Но если мы будем учить тому, как представить одну и ту же информацию, например, таблицу изменения цен по коммунальным платежам для разных групп населения, то акцент будет сделан на способах подачи материала. Конечно, ученик в этом случае должен будет знать тот же объем материала об инструментах текстового редактора, но… Текстовый редактор будет выступать в роли инструментария, учить школьника будут другому — способам передачи информации в зависимости от аудитории. Этот пример показывает, что необходимо переходить от подхода выработки ЗУНов к компетентностному подходу.

В рамках проекта “Информатизация системы образования” (ИСО) предусмотрена регулярная (ежегодная) оценка изменения уровня компетентности школьников в области использования ИКТ в регионах проекта ИСО (Красноярский край, Республика Карелия, Пермская область, Челябинская область, Калужская область, Ставропольский край, Хабаровский край).

Цель нашего курса — познакомить учителей информатики с методикой обучения компетентностному подходу овладения информационно-коммуникационными технологиями.

Учебный план

Лекция 1.
Цели и задачи проекта по оценке ИКТ-компетентности девятиклассников

Отличительной чертой современного общества становится все возрастающая изменчивость окружающего мира. Впервые в истории человечества поколения вещей, процессов, идей сменяются быстрее, чем поколения людей. При этом изменчивость проявляет себя через небывалое прежде многообразие, затрагивающее практически все стороны общественной жизни. В качестве примеров можно привести:

1) изменение функциональности, мощности, внешнего вида ЭВМ;

2) изменение функциональных характеристик телефона (или того предмета, который все еще называется телефоном);

3) изменение методов медицинской диагностики;

4) новые технологии в стоматологии.

Все эти примеры обладают по крайней мере одной общей характеристикой: изменения стали возможны (или были вызваны) в результате передачи и обработки специалистами в сжатые сроки больших объемов информации.

Динамичные изменения, происходящие в обществе, во всей окружающей человека среде, породили различные наименования современного общества: “постиндустриальное общество”, “постцивилизация”, “технотронное общество” и т.п. Однако наиболее широко используется термин “информационное общество”.

Необходимость специальной подготовки человека к жизни в информационном обществе

Вхождение человеческой цивилизации в информационное общество предъявляет принципиально новые требования к системе образования. Один из ведущих специалистов по информационной культуре Н.И. Гендина (директор НИИ информационных технологий, Кемеровский государственный университет культуры и искусств) [2] пишет, что характер изменений, происходящих в системе образования, отражается в понятии “новая парадигма образования”. Новая образовательная парадигма — это своего рода стратегия “образования для будущего”. Суть новой парадигмы образования характеризуется следующими факторами:

· смещение основного акцента с усвоения значительных объемов информации, накопленной впрок, на овладение способами непрерывного приобретения новых знаний и умения учиться самостоятельно;

· освоение навыков работы с любой информацией, с разнородными, противоречивыми данными, формирование навыков самостоятельного (критичного), а не репродуктивного типа мышления;

· дополнение традиционного принципа “формировать профессиональные знания, умения и навыки” принципом “формировать профессиональную компетентность”.

Анализ характеристик, присущих информационному обществу, позволяет выделить проблему специальной подготовки человека к жизни в информационном обществе, что, в свою очередь, требует кардинальных изменений в системе образования. Одним из путей решения этой проблемы в нашей стране является проект “Информатизация системы образования” (ИСО), проводимый Правительством Российской Федерации. Реализация проекта возложена на Национальный фонд подготовки кадров (НФПК).

Проект ИСО направлен на поддержку реализации Концепции модернизации российского образования на период до 2010 года и содействие в обеспечении доступности, качества и эффективности образовательных услуг в системе общего и начального профессионального образования на основе использования информационных и коммуникационных технологий (ИКТ).

Одним из индикаторов успешности проекта ИСО является его влияние на формирование информационной и коммуникационной компетентности выпускников девятого класса, которые завершают обучение по программе основной школы. Этот индикатор позволяет косвенно оценить влияние изменений в содержании и методах учебной работы в основной школе, которые связаны с внедрением ИКТ в практику учебной работы, с реальным уровнем использования и востребованности новых информационных технологий в образовательном процессе. Для определения информационной и коммуникационной компетентности девятиклассников в рамках проекта ИСО было выделено новое направление — “Разработка инструмента для оценки компетентности школьников в области ИКТ”. Рабочая группа проекта начала свою деятельность в ноябре 2005 года. Руководителем проекта является Бурмакина Вероника Федоровна, научным консультантом — Марк Зелман. Концепцию проекта и направления его развития определяют следующие нормативные документы:

1. Отчет “ИКТ-компетентность в мировой практике. Показатель ИКТ-компетентности учащихся и работников образования как индикатор результативности Проекта ИСО”, подготовленный экспертно-аналитическим центром НФПК.

2. Отчет “Report on ICT Literacy and Standards”, подготовленный консультантом МБРР Марком Зелманом в апреле 2004 г.

3. Концепция проекта “Информатизация системы образования”. Методические материалы, 2006 г.

В рамках нового проекта предусмотрена регулярная (ежегодная) оценка уровня компетентности девятиклассников в области использования ИКТ в регионах проекта ИСО (Красноярский край, Республика Карелия, Пермская область, Челябинская область, Калужская область, Ставропольский край, Хабаровский край). Первая проверка уровня ИКТ-компетентности была проведена в апреле–мае 2006 года. В семи вышеперечисленных регионах было протестировано около 4 тысяч девятиклассников.

Цели проекта по оценке ИКТ-компетентности девятиклассников

Информационно-коммуникационная компетентность1 школьников в рамках проекта “Информатизация системы образования” определяется как способность учащихся использовать информационные и коммуникационные технологии для доступа (access) к информации, ее опознавания-определения (define), организации (integrate), обработки (manage), оценки (evaluate), а также ее создания-продуцирования (create) и передачи-распространения (communicate), которая достаточна для того, чтобы успешно жить и трудиться в условиях информационного общества, в условиях экономики, которая основана на знаниях (knowledge based economy).

Особо отметим, что формирование информационно-коммуникационной компетентности рассматривается не только (и не столько) как формирование технологических навыков. Одним из результатов процесса информатизации школы должно стать появление у учащихся способности использовать современные информационные и коммуникационные технологии для работы с информацией как в учебном процессе, так и для иных потребностей.

При определении компетентности школьников в области использования ИКТ акцент делается прежде всего на оценке сформированности соответствующих обобщенных познавательных навыков (умственных навыков высокого уровня). Для оценки сформированности таких навыков необходим специализированный инструмент, который позволяет оценить демонстрируемые школьниками способности работать с информацией в ходе решения специально подобранных задач (в контролируемых условиях), автоматизировать процедуру оценки уровня ИКТ-компетентности учащихся.

Таким образом, одной из главных задач нового проекта является разработка программного инструмента, позволяющего оценивать, как девятиклассник умеет работать с информацией, представленной в электронном виде. В этом программном инструменте можно выделить 3 составные части:

1) специально разработанная тестовая среда, имитирующая работу почтовой программы, браузера, текстового редактора и т.п.;

2) банк заданий, позволяющих проверять ИКТ-компетентность;

3) система сбора, хранения и анализа результатов тестирования.

Процедура проведения измерений ИКТ-компетентности называется тестированием. В ходе этой процедуры учащиеся выполняют последовательность контрольных заданий, которые в совокупности образуют тест. Тексты (или описания) заданий естественно называть контрольно-измерительными материалами (КИМ). Тест состоит, как правило, из нескольких типов заданий. Будучи встроены в программную оболочку инструмента, задания превращаются в автоматизированный тест.

На основании результатов тестирования учащимся предполагается выдавать сертификат установленного образца, который будет фиксировать уровень ИКТ-компетентности, достигнутый школьником. В соответствии с распорядительными документами, принятыми в регионах проекта ИСО, сертификат будет учитываться в том числе при поступлении учащегося в учреждения профессионального образования с ИКТ-направленностью, а также при продолжении профильного обучения в классах с ИКТ-направленностью.

Для достижения основной цели проекта — разработки специализированного инструмента для автоматизированной оценки ИКТ-компетентности — были поставлены следующие задачи: анализ аналогичных исследований достижений учащихся, проводимых в России и за рубежом; уточнение понятия ИКТ-компетентности и на основе его уточнение спецификаций на разрабатываемые контрольные (тестовые) задания.

Мониторинг достижений учащихся в России и других странах

Гигантский поток информации, которую сегодня предоставляют системы информации и телекоммуникации, обостряет проблему подготовки учащихся к жизни в информационном обществе. Осознавая это, во многих странах придается приоритетное значение подготовке учащихся для работы с информацией. Для оценки результатов проводимой работы в некоторых странах уже проводятся исследования, подобные проверке ИКТ-компетентности девятиклассников.

США, страны Европы

С 1999 года в США компания ETS проводит оценивание ИКТ-компетентности (ИКТ-грамотности в зарубежной терминологии) у студентов колледжей (16–17 лет). Аналогичное тестирование проводится в Бельгии.

При обсуждении проблемы ИКТ-компетентности зарубежными специалистами широко используется термин “грамотность” (literacy). Отечественные специалисты используют перекрывающиеся по содержанию понятия “грамотность”, “культура”, “компетентность”. Термин “грамотность” в широком смысле слова претерпел кардинальные изменения по своему содержанию. Если раньше “грамотным” был человек, который научился писать и читать, то сегодня этот термин употребляется гораздо шире. В современном обществе уметь читать и писать явно недостаточно, и требования как к юным гражданам, так и ко взрослым все возрастают. Уметь учиться в течение всей жизни становится главным умением и качеством (основой) новой грамотности.

Российские библиотеки

Проблема подготовки учащихся к жизни в веке информации связана не только с приобретением ими новой “информационной” грамотности. Она значительно сложнее. В России традиционно развитием и мониторингом информационной грамотности (информационной культуры) занимались и занимаются библиотеки. В.П. Чудинова (Российская государственная детская библиотека) [1] отмечает значительные изменения таких понятий, как “читательская грамотность”, “медиаграмотность”, “компьютерная” и “информационная” грамотности, что с необходимостью приводит к новым формам работы специалистов библиотечного дела.

Международные исследования PISA

Значимым примером программы оценивания общей компетентности учащихся является “Программа международной оценки обучающихся” (PISA).

Как помнят многие из нас, Советский Союз был довольно закрытым государством. В связи с тем, что наша страна не участвовала в ряде сравнительных международных исследований, многие аспекты нашей жизни было невозможно оценить.

С начала 90-х годов Министерство образования РФ совместно с Российской академией образования принимает участие в сравнительных международных исследованиях качества образования (тестировались девятиклассники в 2000-м и 2003 гг.). Проведение второго цикла международного исследования PISA в 2003 году было направлено на получение данных, необходимых для:

· сравнительной оценки функциональной грамотности 15-летних учащихся разных стран в области математики, чтения, естествознания и решения проблем;

· оценки динамики состояния функциональной грамотности учащихся в области математики, чтения и естествознания за последние три года;

· выявления факторов, позволяющих объяснять различия в результатах учащихся.

Отметим, что в тестировании PISA девятиклассникам предлагаются задания по математике, естествознанию и функциональному чтению. При этом задания по чтению (работа с текстом) проверяют сформированность основных познавательных деятельностей, необходимых для работы с информацией.

Результаты этих исследований показывают [7], что уровень подготовки школьников по естественно-математическим предметам устойчиво превышает средние международные показатели. Российские школьники также не имеют существенных различий в общеобразовательной подготовке со своими сверстниками в большинстве развитых стран мира2.

Вместе с тем в этих исследованиях выявлено, что при наличии достаточно высоких предметных знаний и умений российские школьники испытывают затруднения в применении этих знаний в ситуациях, близких к повседневной жизни, а также в работе с информацией, представленной в различной форме, характерной для средств массовой информации.

Анализ результатов исследования PISA показал, что в практике обучения российские учащиеся не встречаются (или встречаются крайне редко, особенно в рамках одной проверочной работы):

· с заданиями, содержащими большой объем как текстовой информации, так и информации, предъявляемой в виде таблиц, диаграмм, графиков, рисунков, схем;

· с заданиями, составленными на материале из разных предметных областей, для правильного выполнения которых надо интегрировать разнообразные знания, использовать общеучебные умения, отбирать и использовать адекватные описываемой ситуации способы размышления, анализа, обоснований, коммуникации и т.п.;

· с заданиями, в которых неясно, к какой области знаний надо обратиться, чтобы определить способ действий или информацию, необходимые для постановки и решения проблемы;

· с заданиями, требующими привлечения дополнительной информации (в том числе выходящей за рамки описанной в тексте задания ситуации), или, напротив, с заданиями, содержащими избыточную информацию и “лишние данные”;

· с комплексными или структурированными заданиями, состоящими из нескольких взаимосвязанных вопросов;

· с большим числом заданий разной тематики и разных форматов, требующих разных форм записи ответа (выбора ответа, записи слова или числа, краткого или развернутого обоснования и т.п.), в одной работе, которую надо выполнить за ограниченное время.

Тестирование ECDL и Microsoft

О современном состоянии ИКТ-компетентности в России информации недостаточно. Программы тестирования ECDL и Microsoft по определению уровня ИКТ-грамотности позволяют говорить об оценке только технологических навыков владения компьютерными технологиями и знаний конкретных программных продуктов.

Определение ИКТ-компетентности

Развитие проекта по оценке ИКТ-компетентности должно начинаться с понимания, что, прежде чем ИКТ-компетентность можно будет эффективно измерить, надо четко представлять, что же мы хотим измерять, т.е. надо дать четкое определение ИКТ-компетентности.

Вначале рассмотрим, что стоит за термином “компетентность”, который начинает активно использоваться в отечественной педагогике и в официальных документах Министерства образования и науки. Круг компетентностей, которым следует учить сегодняшних школьников, не определен окончательно, как и само понятие компетентности [9]. За основу понятия “компетентностный человек” взяты способность человека брать на себя ответственность при решении возникающих проблем, проявлять самостоятельность в постановке задач и их решении. Для каждого предмета вырабатывается свое понятие компетентности.

Определение ИКТ-компетентности вводится на базе определения ИКТ-грамотности [9].

ИКТ-грамотность — это использование цифровых технологий, инструментов коммуникации и/или сетей для получения доступа к информации, управления ею, ее интеграции, оценки и создания для функционирования в современном обществе.

Под ИКТ-компетентностью подразумевается уверенное владение учащимися всеми составляющими навыками ИКТ-грамотности для решения возникающих вопросов в учебной и иной деятельности, при этом акцент делается на сформированность обобщенных познавательных, этических и технических навыков.

Структуру ИКТ-компетентности составляют следующие познавательные навыки (когнитивные действия):

Пример тестового задания “Языки программирования”

Приведем текст 5-минутного задания на проверку сформированности навыков “сообщение” (“передача”) и “оценка”.

Полный сценарий (его ученик видит на экране)

Ваша любимая учительница по информатике пригласила вас сделать доклад перед семиклассниками на тему “Современные языки программирования”. Вы очень серьезно подошли к поручению, прочитали “горы” литературы, но, как всегда, для подготовки хорошего доклада не хватает нескольких часов. Вы разослали краткий текст своего доклада трем друзьям и попросили сделать один (но хороший!) слайд, который вы планируете вставить в свою презентацию. Друзья не подвели, они прислали по электронной почте ответы. Ваша задача — выбрать лучший слайд, который будет понятен ученикам 7-го класса и поможет вам сделать хороший доклад.

Далее на экране представлено окно электронной почты

Смена экрана (На экране представлены три раскрытых окна электронной почты)

Письмо 1

Письмо 2

Письмо 3

Далее на экране

Выберите вариант слайда и обоснуйте свой ответ.

o Слайд из письма 1

o Слайд из письма 2

o Слайд из письма 3

o Информация представлена полно

o Информация понятна ученикам 7-го класса

o Информация изложена научным языком

o Информация представлена кратко

o Заголовок слайда отражает цель и содержание слайда

Конец задания

Попробуйте выполнить это задание, оцените, смогут ли ваши ученики выполнить это задание успешно. При выполнении теста ученик видел это задание как бы в среде почтовой программы. От него требовались технические навыки работы с почтовой программой (специально разработанная среда имитирует наиболее распространенные почтовые программы, но более дружественна; в ней нет “лишних” кнопок: даже если ученик первый раз работает с “почтовой” программой, то он сможет достаточно быстро понять, как она устроена).

Но цель данного задания (как, впрочем, и всех остальных) — проверить, как ученик может работать с информацией в “цифровом” формате. От него требуется так представить информацию, чтобы семиклассники поняли, о чем идет речь. Кроме того, от него требуется не только выбрать подходящий способ представления информации (слайд), но и обосновать свой выбор. Заметим, что школьники, как правило, с этим заданием справлялись успешно.

Результаты первого проведенного тестирования по оценке ИКТ-компетентности девятиклассников

В соответствии с приведенным выше определением ИКТ-компетентности были разработаны тестовые задания, проверяющие одно или несколько когнитивных умений. Тест был рассчитан на 2 часа, он состоял из 14 вопросов: одиннадцать 5-минутных вопросов (на проверку одного умения), два 15-минутных вопроса (на проверку двух или трех умений) и один 30-минутный вопрос. Примеры вопросов вы можете также посмотреть в [8].

Тестирование было проведено в семи пилотных регионах проекта ИСО, протестировано было 4324 девятиклассника.

Тестирование проходило в помещениях ММЦ, в которых проводится и ЕГЭ. На выходе, после тестирования, члены рабочей группы проводили опрос учащихся. Школьникам задавали следующие вопросы:

· понравилось ли им участвовать в таком тестировании;

· устали они или нет;

· сложные были задания или нет;

· хотели бы они, чтобы их протестировали еще раз?

В целом ребятам участвовать в таком необычном тестировании понравилось. На диаграмме 1 приведена усредненная оценка, данная школьниками самим себе по их субъективным ощущениям, т.е. это усредненный ответ на вопрос “Как вы выполнили данный тест?”.

Однако реальные результаты по оценке ИКТ-компетентности не так радужны. Часто школьники говорили, что задания в тесте были простыми (легкими), но при обсуждении конкретных заданий через систему наводящих вопросов выяснялось, что ученик не понял сути вопроса. На первый план выступает та же причина, что и в неутешительных результатах программы PISA: наши школьники не умеют работать с информацией.

Отметим, что наиболее часто при опросе на выходе с тестирования школьники давали следующие комментарии: “Я никогда не читал так много”, “Очень много приходилось читать”, “Устал читать, часть заданий вообще не читал, пытался угадать ответ” и т.д.

На диаграмме ниже приведены средние результаты всех протестированных школьников с разделением по когнитивным умениям. Каждое умение оценивалось по трехбалльной шкале: low, medium, high (заметим, что в структуре ИКТ-компетентности проверяемые навыки расположены в порядке возрастания когнитивной сложности). Относительно высокие результаты, показанные учащимися по таким умениям, как управление и создание информации, отчасти объясняется тем, что на каждое из этих умений было предложено 1–2 задания, и эти задания оказались легче или понятнее остальных.

Вопросы и задания

1. Приведите примеры идей, и в частности в образовании, которые изменились при вашей жизни.

2. Приведите примеры предметов материальной культуры человека, которые функционально изменились при вашей жизни.

3. Приведите примеры образцов поведения людей, которые изменились в типичных устойчиво-бытовых ситуациях.

4. Существует ли такая жизненная ситуация, в которой для человека принципиально важно (вопрос жизни и смерти) владение ИК-технологиями.

5. Какими технологическими навыками должен обладать школьник для успешного выполнения задания “Языки программирования”? Владеют ли ваши ученики (девятиклассники) этими навыками? Эти навыки при выполнении задания используются явно или косвенно?

Литература

1. Чудинова В.П. Медиа и грамотность личности: процессы и проблемы. Российская государственная детская библиотека. М.: Школьная библиотека, 2004.

2. Сборник материалов “Научно-исследовательский институт информационных технологий социальной сферы Кузбасса, региональный центр реализации программы ЮНЕСКО “Информация для всех”. Сост.: Н.И. Гендина, Н.И. Колкова. М.: Школьная библиотека, 2005.

3. Ковалева Г.С., Красновский Э.А., Краснокутская Л.П., Краснянская К.А. Изучение знаний и умений учащихся в рамках Международной программы PISA. Общие подходы. ИОСО РАО, 1999.

4. Knowledge and skills for life. First results from PISA 2000. OECD, 2001.

5. Knowledge and skills for life. First results from PISA 2000. Executive summary. OECD, 2001.

6. Measuring student knowledge and skills. A new Framework for Assessment. OECD, 1999.

7. www.centeroko.ru (материалы по PISA).

8. Бурмакина В.Ф., Фалина И.Н. Начало проекта по оценке ИКТ-компетентности девятиклассников. Информатика № 2/2006.

9. Фалина И.Н. Компетентностный подход в обучении и стандарт образования по информатике. Информатика № 7/2006.

Продолжение следует