Анализ данных национальной оценки учебных достижений. Книга 4

Анализ данных
национальной оценки
учебных достижений
Analyzing Data
from a National
Assessment of
Educational
Achievement

National Assessments of Educational Achievement
VOLUME 4
Analyzing Data from
a National Assessment
of Educational
Achievement
Gerry Shiel
Fernando Cartwright
Vincent Greaney and
Thomas Kellaghan, Series Editors

Национальная оценка учебных достижений
Джерри Шил, Фернандо Картрайт
Анализ данных 
национальной оценки 
учебных достижений
Винсент Грини и Томас Келлаган, редакторы серии
КНИГА 4
Москва
Логос
2020

УДК 378
ББК  
74.58
Ш58
Издание подготовлено при поддержке
Международного банка реконструкции и развития
в рамках Российской программы содействия образования 
в целях развития – READ (Russia Education Aid for 
Development)
Перевод подготовлен по инициативе Центра 
международного сотрудничества по развитию 
образования Российской академии народного 
хозяйства и государственной службы 
при Президенте Российской Федерации
Ш58  
Шил, Джерри 
    Анализ данных национальной оценки учебных достижений / 
Д. Шил, Ф. Картрайт; ред. серии В. Грини, Т. Келлаган; перевод с 
английского на русский язык под научной редакцией В.И. Звонникова и М.Б. Челышковой. – М.: Логос, 2020. – 336 с. – (Национальная оценка учебных достижений).
 
ISBN 978-5-98704-836-8
Показаны сложности и потенциал анализа данных, полученных в ходе 
проведения широкомасштабной национальной оценки. Рассмотрены вопросы генерации информации по тестовым заданиям и оценкам, установления 
связей между тестовыми оценками и образовательными и социальными факторами. Для того чтобы в полной мере раскрыть то, что сообщают данные 
о качестве, равенстве и иных аспектах достижений в системе образования, 
предлагается применять различные методики, содержащиеся в первой 
части книги. Во второй части книги описана основная аналитическая методика – современная теория тестирования (Item Response Theory – IRT). 
Представлено специально разработанное и удобное в использовании программное обеспечение для IRT под названием «Анализ заданий и 
тестов» (Item and Test Analysis – IATA).
Для специалистов, участвующих в проведении национальной оценки 
учебных достижений обучающихся в средних и других учебных заведениях. 
В первую очередь представляет интерес для аналитиков, обеспечивающих 
интерпретацию данных оценки с целью дальнейшего обобщения для их 
практического использования в ходе решения задач развития и улучшения 
качества образования. Может использоваться при разработке инструментария проведения национальной оценки и обработки полученных данных.
УДК 378
ББК 74.58
ISBN 978-5-98704-836-8
© Международный банк 
реконструкции и развития / 
Всемирный банк, 2020
© Логос, 2020

H Street NW 
Washington DC 20433
Телефон: 202-473-1000
Internet: www.worldbank.org
Все права защищены
1 2 3 4 18 17 16 15
Книга подготовлена сотрудниками Всемирного банка при участии сторонних авторов. 
Представленные в книге факты, их трактовка и выводы не обязательно отражают точку 
зрения Всемирного банка, исполнительных директоров Всемирного банка или правительств 
государств, которые они представляют. Всемирный банк не гарантирует точности данных, 
приведенных в книге. Национальные границы, цвета, обозначения и прочая информация 
на картах, включенных в настоящее издание, не являются выражением мнения Всемирного 
банка относительно правового статуса какой-либо территории либо поддержки или признания границ.
Информация, представленная в настоящей книге, не является и не должна считаться ограничением или отказом от льгот и привилегий Всемирного банка, и все такие льготы и привилегии в прямой форме сохраняются за Всемирным банком.
Авторское право и разрешение на воспроизведение
Настоящая книга предоставляется по лицензии Creative Commons Attribution 3.0 IGO (CC 
BY 3.0 IGO) http:// creativecommons.org/licenses/by/3.0/igo. При наличии лицензии 
Creative Commons Attribution вы вправе свободно копировать, распространять, передавать 
и адаптировать настоящую книгу, в том числе в коммерческих целях, с соблюдением следующих условий.
Ссылка на источник – Ссылки на данную книгу должны быть оформлены в следующем формате: Джерри Шил и Фернандо Картрайт. 2015 год. Анализ данных национальной оценки 
учебных достижений. Книга 4 из серии «Национальная оценка учебных достижений» под 
редакцией Винсента Грини и Томаса Келлагана. Вашингтон, Федеральный округ Колумбия: 
Всемирный банк. doi:10.1596/978-0-8213-9583-7. Лицензия: Creative Commons Attribution CC 
BY 3.0 IGO.
Переводы – Если вы переводите данное издание, просим включать следующую оговорку со 
ссылкой на источник: «Настоящий перевод не был выполнен Всемирным банком и не должен 
рассматриваться как официальный перевод Всемирного банка. Всемирный банк не несет 
ответственность за содержание и любые неточности настоящего перевода».
Адаптации – Если вы адаптируете данное издание, просим включать следующую оговорку 
со ссылкой на источник: «Настоящая работа является адаптацией оригинального издания 
Всемирного банка. Взгляды и мнения, выраженные в данной адаптации, являются единоличной ответственностью автора или авторов данной адаптированной работы, которые не 
подлежали одобрению Всемирным банком».
Согласие третьих лиц – Всемирный банк не обязательно владеет каждым компонентом содержания настоящей книги. Соответственно, Всемирный банк не дает гарантий, что использование любого принадлежащего третьим лицам индивидуального 
компонента настоящей книги не нарушит прав таких третьих лиц. Вы единолично 
несете риск предъявления любых исков и претензий в результате такого нарушения. Если 
вы намерены повторно использовать какой-либо компонент настоящей работы, вы 

отвечаете за установление необходимости получения разрешения у владельца авторских прав 
в отношении такого повторного использования, а также за получение такого разрешения. 
Примеры таких компонентов могут включать, в том числе, таблицы, показатели или рисунки.
Все остальные запросы, связанные с получением прав и лицензий, необходимо направлять в отдел публикаций и просвещения Всемирного банка по адресу: 1818 H Street NW, 
Washington DC 20433, USA; факс: 202-522-2625; адрес электронной почты: pubrights@
worldbank.org.
ISBN (печатный вариант): 978-0-8213-9583-7
ISBN (электронная версия): 978-0-8213-9584-4
DOI: 10.1596/978-0-8213-9583-7
Данные каталогизации перед публикацией Библиотеки Конгресса были запрошены.
Дизайн обложки: Naylor Design (Вашингтон, федеральный округ Колумбия)
Анализ заданий и тестов (IATA) © 2015 год. Фернандо Картрайт. Использовано с разрешения. Для 
повторного использования требуется получение дополнительного разрешения. Microsoft, Access, Excel, 
Office, Windows и Word являются либо зарегистрированными товарными знаками, либо товарными 
знаками корпорации Microsoft Corporation в Соединенных Штатах Америки и/или иных странах. 
SPSS является зарегистрированным товарным знаком компании IBM. WesVar является зарегистрированным товарным знаком компании Westat.

Выражение признательности
Научные консультанты, переводчики, редакторы Издательской 
группы «Логос» выражают признательность Московскому представительству Международного банка реконструкции и развития, особенно Тиграну Шмису и Дмитрию Чугунову, за помощь и поддержку 
в подготовке и выпуске этой книги и всей серии книг «Национальная 
оценка учебных достижений». Мы благодарим В.А. Мау, ректора 
Российской академии народного хозяйства и государственной службы 
при Президенте Российской Федерации, В.А. Болотова, академика 
Российской академии образования, и И.Д. Фрумина, научного руководителя Института образования Национального исследовательского 
университета «Высшая школа экономики», которые направляли 
наши усилия на достижение целей, имеющих исключительное значение для реформирования российской системы образования. Высокой 
оценки заслуживает вклад Центра международного сотрудничества 
по развитию образования, выступившего инициатором перевода книг 
по оценке учебных достижений на русский язык. 

СОДЕРЖАНИЕ
ПРЕДИСЛОВИЕ К РУССКОМУ ИЗДАНИЮ                                       19
ПРЕДИСЛОВИЕ                                                                                                 27
ОБ АВТОРАХ И РЕДАКТОРАХ                                                                 29
БЛАГОДАРНОСТИ                                                                                         31
СПИСОК СОКРАЩЕНИЙ                                                                          33
ВВЕДЕНИЕ                                                                                                          35
Часть I 
Введение в статистический анализ данных
национальной оценки
Джерри Шил
ГЛАВА 1.   БАЗА ДАННЫХ ДЛЯ ПРОВЕДЕНИЯ АНАЛИЗА          43
Сохранение файлов с CD-диска на ваш жесткий диск или 
сервер                                                                                                45
Инструментарий исследования                                               47
Выборочные весовые коэффициенты                                      49
Статистический пакет для социальных наук SPSS            51
Статистический пакет для оценивания вариаций
WesVar                                                                                               55

СОДЕРЖАНИЕ
ГЛАВА 2.   ИССЛЕДОВАНИЕ ДАННЫХ НАЦИОНАЛЬНОЙ
ОЦЕНКИ С ИСПОЛЬЗОВАНИЕМ SPSS                        57
Меры центральной тенденции                                               58
Меры разброса                                                                              58
Меры положения                                                                          59
Меры формы распределения                                                   60
Исследование множества данных
с использованием SPSS                                                               62
ГЛАВА 3.   ВВЕДЕНИЕ В WESVAR                                                            71
Установка файла данных в WesVar                                        71
Добавление подписей к переменным                                    72
Вычисление показателей дескриптивной
статистики в WesVar                                                                    73
Расчет среднего балла и его стандартной ошибки           79
Вычисление средних оценок и стандартных ошибок
для подгрупп в генеральной совокупности                         82
ГЛАВА 4.   СРАВНЕНИЕ УЧЕБНЫХ ДОСТИЖЕНИЙ ДВУХ
И БОЛЕЕ ГРУПП                                                                        85
Поверка различия между двумя средними баллами         85
Исследование различий между тремя и более
средними баллами                                                                        91
ГЛАВА 5.   ВЫЯВЛЕНИЕ УЧАЩИХСЯ С ВЫСОКИМИ
И НИЗКИ 
МИ ДОСТИЖЕНИЯМИ                                   99
Приближенные баллы, соответствующие ключевым
национальным процентильным рангам 
                              99
Оценка процента учащихся в подгруппах
с использованием национальных
процентильных рангов                                                            105
ГЛАВА 6.   СВЯЗЬ МЕЖДУ ПЕРЕМЕННЫМИ: 
КОРРЕЛЯЦИЯ И РЕГРЕССИЯ                                         111
Корреляция                                                                                   111
Регрессия                                                                                       119
Корреляция и причинно-следственная связь                  135