До недавних пор для перехода через коммуникативный барьер между глухим человеком и нормально слышащим требовался третий участник, который бы учил слышащего человека понимать язык жестов. Но теперь он стал не столь важен. Появился революционный переводчик – он способен конвертировать жесты немого и глухого человека в письменную и даже устную речь для людей с нормальным слухом. Работает система и в обратном направлении. Это решение значительно облегчит жизнь людям без слуха и тем, кто не может выразить свои мысли вслух: у них появится новый круг общения, куда войдут и те, кто не понимает язык жестов. Над этим инновационным решением трудилась группа исследователей из Китая. Она разработала специальный переводчик, базой для которого служит обычный настольный компьютер, камера и устройство Kinect. Эти составляющие способны точно определять жесты человека и строить из них правильные предложения устной и письменной речи. Сейчас этот переводчик работает на двух языках – китайском и английском. Характерно, что система работает и в обратном направлении – она может превращает речь в жесты. Данное решение успешно работает в режиме реального времени – аппаратная «начинка» с легкостью с этим справляется. Напомним, что ранее Kinect распознавал движения рук и переводил их в команды, понятные игровым консолям. А в 2011 году Microsoft выпустила SDK-набор, который сделал доступным «исходники» сторонним разработчикам софта. Китайские ученые провели кропотливую работу по сбору данных о значении того или иного жеста, а также выполнили точную калибровку каждого движения. В этом им помогали учащиеся и преподаватели Пекинского объединенного университета. А вот участница проекта Даньдань Инь, которая показала себя как талантливая студентка, сказала, что разработчики выполнили мечту ее детства – дали людям с нарушением слуха возможность говорить. Силинь Чэнь, профессор Китайской академии наук, последние десять лет занимался одним делом – изучал язык жестов. Профессор: «Сейчас мы стоим на пороге новых открытий. Прогресс технологий позволяет развивать индустрию подобных устройств очень быстро. Мне кажется, что сейчас самое время использовать появившиеся возможности в качестве реальной помощи людям. Наша система постоянно совершенствуется. Мы учитываем не только сами жесты, но и общие движения, позы, в которых находится человек – все это позволяет более точно выразить смысл его жестов». Отметим, что сейчас новая система перевода –это только прототип. У разработчиков еще очень много работы по доведению устройства до «разговорного» состояния. Сейчас система определяет только 300 жестов, то есть всего триста слов. В планах создателей переводчика - достичь цифры в 4 тысячи слов. На Земле живут порядка 360 миллионов глухих людей. Ученые всего мира готовы помочь китайским коллегам в скорейшем внедрении их системы в массовое производство. Основными местами применения нового типа переводчиков станут те зоны, в которых контакты глухих людей со слышащими нормально неизбежны – аэропорты, информационные стенды, врачебные кабинеты. У тех, чей слуховой аппарат по каким-то причинам не работает, появится масса новых возможностей для взаимодействия и общения с новыми людьми.
Наука
Язык жестов для каждого – новая разработка
До недавних пор для перехода через коммуникативный барьер между глухим человеком и нормально слышащим требовался третий участник, который бы учил слышащего человека понимать язык жестов. Но теперь он стал не столь важен. Появился революционный переводчик – он способен конвертировать жесты немого и глухого человека в письменную и даже устную речь для людей с нормальным слухом. Работает система и в обратном направлении. Это решение значительно облегчит жизнь людям без слуха и тем, кто не может выразить свои мысли вслух: у них появится новый круг общения, куда войдут и те, кто не понимает язык жестов.
Над этим инновационным решением трудилась группа исследователей из Китая. Она разработала специальный переводчик, базой для которого служит обычный настольный компьютер, камера и устройство Kinect. Эти составляющие способны точно определять жесты человека и строить из них правильные предложения устной и письменной речи. Сейчас этот переводчик работает на двух языках – китайском и английском. Характерно, что система работает и в обратном направлении – она может превращает речь в жесты. Данное решение успешно работает в режиме реального времени – аппаратная «начинка» с легкостью с этим справляется.
Напомним, что ранее Kinect распознавал движения рук и переводил их в команды, понятные игровым консолям. А в 2011 году Microsoft выпустила SDK-набор, который сделал доступным «исходники» сторонним разработчикам софта.
Китайские ученые провели кропотливую работу по сбору данных о значении того или иного жеста, а также выполнили точную калибровку каждого движения. В этом им помогали учащиеся и преподаватели Пекинского объединенного университета. А вот участница проекта Даньдань Инь, которая показала себя как талантливая студентка, сказала, что разработчики выполнили мечту ее детства – дали людям с нарушением слуха возможность говорить.
Силинь Чэнь, профессор Китайской академии наук, последние десять лет занимался одним делом – изучал язык жестов. Профессор: «Сейчас мы стоим на пороге новых открытий. Прогресс технологий позволяет развивать индустрию подобных устройств очень быстро. Мне кажется, что сейчас самое время использовать появившиеся возможности в качестве реальной помощи людям. Наша система постоянно совершенствуется. Мы учитываем не только сами жесты, но и общие движения, позы, в которых находится человек – все это позволяет более точно выразить смысл его жестов».
Отметим, что сейчас новая система перевода –это только прототип. У разработчиков еще очень много работы по доведению устройства до «разговорного» состояния. Сейчас система определяет только 300 жестов, то есть всего триста слов. В планах создателей переводчика - достичь цифры в 4 тысячи слов.
На Земле живут порядка 360 миллионов глухих людей. Ученые всего мира готовы помочь китайским коллегам в скорейшем внедрении их системы в массовое производство. Основными местами применения нового типа переводчиков станут те зоны, в которых контакты глухих людей со слышащими нормально неизбежны – аэропорты, информационные стенды, врачебные кабинеты. У тех, чей слуховой аппарат по каким-то причинам не работает, появится масса новых возможностей для взаимодействия и общения с новыми людьми.