Особенности использования систем компьютерного сурдоперевода в инклюзивном образовании лиц с нарушением слуха

Министерство образования и науки Российской Федерации 

НОВОСИБИРСКИЙ ГОСУДАРСТВЕННЫЙ ТЕХНИЧЕСКИЙ УНИВЕРСИТЕТ 

 
 
 
 
 
 
 
 
ОСОБЕННОСТИ ИСПОЛЬЗОВАНИЯ 
СИСТЕМ КОМПЬЮТЕРНОГО 
СУРДОПЕРЕВОДА  
В ИНКЛЮЗИВНОМ ОБРАЗОВАНИИ 
ЛИЦ С НАРУШЕНИЕМ СЛУХА 
 
 
 
 
Утверждено  
Редакционно-издательским советом университета  
в качестве учебного пособия 
 
 
 
 
 
 
 
 
 
 
 
НОВОСИБИРСК 
2014 

УДК 004.822(075.8) 
   О-754 
 
Коллектив авторов: 
М.Г. Гриф, О.О. Королькова,  
Г.С. Птушкин, Е.В. Траулько 
 
 
Рецензенты: 
канд. техн. наук, доц. В.С. Поздняков 
канд. пед. наук, доц. О.Е. Рощенко 
 
 
Работа подготовлена на кафедре  
общих и естественно-научных дисциплин института  
социальной реабилитации НГТУ для студентов всех специальностей 
среднего и высшего профессионального образования 
 
 
О-754  
Особенности использования систем компьютерного сурдоперевода в инклюзивном образовании лиц с нарушением 
слуха : учеб. пособие / М.Г. Гриф, О.О. Королькова, Г.С. Птушкин, Е.В. Траулько. – Новосибирск: Изд-во НГТУ, 2014. – 71 с.  

ISBN 978-5-7782-2579-4 

Пособие раскрывает методические, педагогические и другие необходимые 
условия организации инклюзивного образования лиц с ограниченными возможностями здоровья по слуху с использованием систем компьютерного сурдоперевода. 
Адресовано студентам, обучающимся по направлениям 09.03.01 «Информатика и вычислительная техника», 09.02.01 «Программирование в компьютерных 
системах», а также специалистам, связанным с использованием технических 
средств в реабилитационно-образовательном процессе лиц с нарушением слуха. 
 
 
УДК 004.822(075.8) 
 
 
 
ISBN 978-5-7782-2579-4 
 Гриф М.Г., Королькова О.О., 
 
    Птушкин Г.С., Траулько Е.В., 2014 
 
 Новосибирский государственный 
 
     технический университет, 2014  

 
 
 
 
 
 
ОГЛАВЛЕНИЕ 
 

Введение ................................................................................................................... 4 

1. Особенности обучения лиц с ограниченными возможностями  
здоровья по слуху ................................................................................................ 6 

2. Подходы к инклюзивному обучению ............................................................... 19 

3. Применение систем компьютерного сурдоперевода  
в реабилитационно-образовательном процессе .............................................. 28 

3.1. Перевод русской речи (текста) на русский жестовый язык ................... 32 
3.2. Сравнительный анализ программно-аппаратных средств  
распознавания жестовой речи ................................................................. 48 
3.3. Лексические основы формирования базы жестов систем  
компьютерного сурдоперевода ............................................................... 52 

Библиографический список .................................................................................. 65 

 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 

ВВЕДЕНИЕ 

В настоящее время большое внимание уделяется программноаппаратным средствам поддержки инклюзивного образования лиц с 
ограниченными возможностями здоровья по слуху. К таким средствам 
относятся и системы компьютерного сурдоперевода, которые уже в 
ближайшей перспективе позволят успешно преодолевать существующие барьеры в коммуникации между глухими и слышащими гражданами (студентами), а также ослабить проблему нехватки переводчиков 
русского жестового языка (РЖЯ).  
Актуальность данных задач определена Федеральным законом от 
30 декабря 2012 г. № 296-ФЗ «О внесении изменений в статьи 14 и 19 
Федерального закона "О социальной защите инвалидов в Российской 
Федерации"», в котором сказано: «Внести в Федеральный закон от 24 
ноября 1995 года № 181-ФЗ «О социальной защите инвалидов в Российской Федерации» (Собрание законодательства Российской Федерации, 1995, № 48, ст. 4563; 2004, № 35, ст. 3607; 2007, № 49, ст. 6070; 
2011, № 47, ст. 6608) следующие изменения: 1) в статье 14: а) часть 
вторую изложить в следующей редакции: «Русский жестовый язык 
признается языком общения при наличии нарушений слуха и (или) речи, в том числе в сферах устного использования государственного 
языка Российской Федерации. Вводится система субтитрирования или 
сурдоперевода телевизионных программ, кино- и видеофильмов. Перевод русского жестового языка (сурдоперевод, тифлосурдоперевод) 
осуществляют переводчики русского жестового языка (сурдопереводчики, тифлосурдопереводчики), имеющие соответствующие образование и квалификацию. Порядок предоставления услуг по переводу  
русского жестового языка (сурдопереводу, тифлосурдопереводу) определяется Правительством Российской Федерации»; б) в части третьей 
слова «услуг по сурдопереводу» заменить словами «услуг по сурдопереводу, тифлосурдопереводу»; в) дополнить частью четвертой следующего содержания: «Органы государственной власти и органы  
местного самоуправления создают условия в подведомственных  

учреждениях для получения инвалидами по слуху услуг по переводу с 
использованием русского жестового языка»; г) дополнить частью пятой следующего содержания: «Обеспечиваются подготовка, повышение квалификации и профессиональная переподготовка преподавателей и переводчиков русского жестового языка, развитие русского 
жестового языка» [1]. 
С целью корректного внедрения в реабилитационно-образовательный процесс систем компьютерного сурдоперевода в настоящем учебном пособии даются необходимые теоретические основы построения 
образовательного процесса для данной категории обучающихся с учетом индивидуальных психолого-педагогических особенностей и создания особой образовательной среды, которая включает в себя широкий спектр условий, нормативов, обязательств, технических средств, 
архитектурной и технической доступности и т. п.; освещаются подходы к инклюзивному обучению; рассматриваются формы и способы 
применения систем компьютерного сурдоперевода. Кроме того, данный вопрос недостаточно освещен в имеющейся учебной литературе. 
Авторы в значительной части привлекают новые результаты, в частности, технологии распознавания жестовой речи и перевода русского 
текста на РЖЯ. Рассматриваемые подходы к применению систем компьютерного сурдоперевода в инклюзивном образовании будут полезны 
как студентам, так и специалистам, связанным с использованием технических средств в реабилитационно-образовательном процессе лиц с 
нарушением слуха. 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 

1. ОСОБЕННОСТИ ОБУЧЕНИЯ ЛИЦ  
С ОГРАНИЧЕННЫМИ ВОЗМОЖНОСТЯМИ  
ЗДОРОВЬЯ ПО СЛУХУ  

Основной задачей, стоящей перед российским профессиональным 
образованием, является «подготовка квалифицированного работника 
соответствующего уровня и профиля, конкурентоспособного на рынке 
труда, компетентного, ответственного, свободно владеющего своей 
профессией и ориентированного в смежных областях деятельности, 
способного к эффективной работе по специальности на уровне мировых стандартов, готового к постоянному профессиональному росту, 
социальной и профессиональной мобильности». Решение этой задачи в 
полной мере относится к профессиональной подготовке лиц из числа 
инвалидов, в том числе инвалидов по слуху. 
Многочисленные научные исследования специалистов института 
социальной реабилитации НГТУ по проблемам, связанным с профессиональной подготовкой студентов из числа инвалидов и лиц с ограниченными возможностями здоровья по слуху, выполненные в рамках 
таких проектов, как «Исследование теоретических основ и разработка 
систем организации и управления реабилитационно-образовательным 
процессом в условиях государственного образовательного учреждения 
(для инвалидов)», «Разработка нормативно-правовых и модельных 
средств поддержки специального непрерывного многоуровневого 
профессионального образования для инвалидов», «Разработка научнометодического и программного обеспечения профессионального образования ЛОВ», «Научное и научно-методическое обеспечение функционирования и развития системы образования», «Разработка научнометодического обеспечения комплекса непрерывного образования и 
реабилитации лиц с ограниченными возможностями здоровья», «Построение региональной системы профессионального образования инвалидов в условиях Сибирского Федерального Округа», а также мно

голетний опыт работы, подтверждают необходимость построения образовательного процесса для данной категории обучающихся с учетом 
индивидуальных психолого-педагогических особенностей и создания 
особой образовательной среды, которая включает в себя широкий 
спектр условий, нормативов, обязательств, технических средств, архитектурной и технической доступности и т. п. Это обусловлено особенностями психического и психофизиологического развития лиц с нарушениями слуха, основными из которых являются следующие:  
– из-за поражения слуха объем внешних воздействий на глухого 
сужен, общение с окружающими значительно ограничено. Поэтому 
компоненты психики у глухих и слабослышащих студентов развиваются в иных, по сравнению со слышащими, пропорциях. Наблюдается 
несоразмерность в развитии наглядно-образного и словесно-логического мышления, письменная речь в обеих формах (импрессивной и 
экспрессивной) приобретает большую роль по сравнению с устной; 
импрессивная форма речи превалирует над экспрессивной; 
– наблюдается отличие в темпах психического развития у лиц с 
нарушенным слухом по сравнению с нормально слышащими. Поэтому 
необходимо создание специальных условий для обучения и воспитания глухих и слабослышащих на всех этапах образовательного процесса, в том числе и на этапе профессиональной подготовки. В то же время теория сурдопедагогики утверждает, что молодые люди, имеющие 
нарушения слуха, в результате коррекционного воздействия в специальной школе к юношескому возрасту преодолевают все вторичные 
дефекты и становятся вровень в своем развитии со слышащими  
сверстниками. Точка зрения практически о неограниченных возможностях развития глухих и слабослышащих прослеживается в исследованиях ученых на протяжении всей истории существования сурдопедагогики и сурдопсихологии [2–4].  
Но исследования потенциальных возможностей глухих и слабослышащих подчеркивают необходимость поиска и разработки обходных коррекционно-компенсаторных путей в обучении лиц со слуховой депривацией [5, 6]. Анализ знаний, умений, навыков и 
компетенций выпускников школ первого и второго вида, проводимый 
специалистами ИСР НГТУ на протяжении всех лет обучения, показывает, что их уровень развития часто не соответствует требованиям 
профессионального образования. У абитуриентов, выпускников специальных (коррекционных) школ для глухих и слабослышащих детей 

наблюдаются значительные трудности в формировании учебной деятельности, ее основных компонентов: 
– учебно-познавательные мотивы не занимают ведущего места в 
системе мотивации учебной деятельности; 
– наблюдаются трудности в формировании учебных действий; 
– отмечаются затруднения в использовании теоретических знаний 
при решении практических задач, при переносе учебных действий в 
новые условия;  
– прослеживается несформированность действий контроля в учебной деятельности.  
Несомненно, одним из важных аспектов успешного обучения является сформированность у выпускников специальных школ общеучебных умений и навыков. Комплексное психолого-педагогическое обследование, проводимое специалистами ИСР НГТУ, показывает, что у 
38 % первокурсников недостаточно развиты навыки самостоятельной 
работы, 29 % не умеют планировать предстоящую работу и осуществлять ее контроль, 33 % не владеют приемами логического мышления 
(сравнением, классификацией, обобщением, приемами доказательств, 
абстрагированием). Из числа студентов, имеющих нарушения слуха, 
70 % затрудняются при конспектировании учебного материала на лекциях и во время самостоятельной работы, 30 % слабо владеют умениями и навыками работы с учебной и научной литературой. 
В связи с этим возникают педагогические и психологические трудности при обучении студентов с нарушением слуха: 
– студенты не могут одновременно воспринимать и фиксировать 
предлагаемый преподавателями материал; 
– у них отсутствуют навыки записей теоретического материала; 
– восприятие и понимание учебного материала неполное,  
– не развито умение работать с текстом, вычленять главное в прочитанном; 
– плохо развито восприятие непривычных формулировок,  
– имеются затруднения в формулировании вопросов и ответов; 
– недостаточно навыков чтения художественной и технической литературы. 
Наибольшие трудности в обучении глухих студентов вызывают 
теоретические разделы дисциплин с большим количеством понятий, 
условий, абстрактных представлений, выражений, технической терминологии. Все это доказывает необходимость дифференцированного 
подхода в организации учебного процесса в образовательных организациях системы профессионального образования.