Поиск по сайту
О журналеПроектыОформить подпискуКонтакты

Информационно-аналитический журнал

Новости образовательных организаций. Аналитические материалы. Мнение экспертов.
Читайте нас в
социальных сетях
ВУЗы
НовостиВузыБолонский процессНегосударственное образованиеФГОСУМОФедеральные вузыВнеучебная работа
Образование в России
ШколаСПОДПОЗаконодательствоРегионыМеждународное сотрудничествоОтраслевое образованиеСтуденчество
Качество образования
АккредитацияРейтингиТехнологии образованияМеждународный опыт
Рынок труда
АнализРаботодателиТрудоустройство
Наука
Молодые ученыеТехнологииКонкурсы
Вузы России

Российские ученые улучшили метод глубокого обучения нейросетей

В Институте интеллектуальных кибернетических систем НИЯУ МИФИ предложили новый метод для обучения ограниченной машины Больцмана (вид нейросети), позволяющий оптимизировать процессы семантического кодирования, визуализации и распознавания данных.

Просмотров: 16

В Институте интеллектуальных кибернетических систем НИЯУ МИФИ предложили новый метод для обучения ограниченной машины Больцмана (вид нейросети), позволяющий оптимизировать процессы семантического кодирования, визуализации и распознавания данных. Результаты исследования опубликованы в журнале «Optical Memoryand Neural Networks».

В настоящее время большую популярность приобретает изучение глубоких нейронных сетей различной архитектуры: сверточных, рекуррентных, автоэнкодерных. Ряд высокотехнологичных компаний, среди которых – Microsoft и Google, используют глубокие нейронные сети для проектирования различных интеллектуальных систем. Вместе с глубокими нейронными сетями приобрел популярность термин «глубокое» обучение.

В системах глубокого обучения автоматизируется сам процесс выбора и настройки признаков. То есть, сеть самостоятельно определяет и использует наиболее эффективные алгоритмы для иерархического извлечения признаков. Для метода глубокого обучения характерно обучение на больших выборках при помощи единого оптимизационного алгоритма. Типичные алгоритмы оптимизации настраивают параметры всех операций одновременно и эффективно оценивают влияние каждого параметра нейросети на ошибку с помощью так называемого метода обратного распространения.

«Способность искусственных нейронных сетей обучаться является наиболее интригующим их свойством. Подобно биологическим системам, нейронные сети сами моделируют себя, стремясь достичь лучшей модели поведения», — отметил профессор Института кибернетических систем НИЯУ МИФИ Владимир Головко.

Прорыв в обучении нейросетей произошел в 2006 году, после научной публикации Джеффри Хинтона с описанием техники предварительной тренировки нейросети. В статье говорилось, что можно эффективно предобучать многослойную нейронную сеть, если обучать каждый слой отдельно при помощи ограниченной машины Больцмана, а затем дообучать методом обратного распространения ошибки. Эти сети получили название нейронных сетей глубокого доверия (Deep Belief Networks, DBN).

Профессор ИИКС НИЯУ МИФИ Владимир Головко проанализировал проблематику и основные парадигмы глубокого машинного обучения, предложив новый метод для обучения ограниченной машины Больцмана. Ученый показал, что классическое правило обучения этой нейросети является частным случаем предложенного им метода.

«Американские ученые Минский и Пейперт в свое время выявили, что однослойный персептрон с пороговой функцией активации формирует линейную разделяющую поверхность с точки зрения классификации образов и поэтому не может решить задачу «исключающее или». Это провоцировало пессимистические выводы насчет дальнейшего развития нейронных сетей. Однако последнее утверждение справедливо только для однослойного персептрона с пороговой или монотонной непрерывной функцией активации – например, сигмоидной. При использовании сигнальной функции активации однослойный персептрон может решить задачу «исключающее или», так как он разбивает входное пространство образов на классы при помощи двух прямых», – рассказал Владимир Головко.

В работе также были проанализированы перспективы применения глубоких нейронных сетей для сжатия, визуализации и распознавания данных. Кроме того, Головко предложил подход к реализации семантического кодирования (хеширования) с помощью глубоких автоассоциативных нейронных сетей. Этот метод глубокого обучения может быть очень полезен в поисковиках для нейросетей, которые, по утверждению автора, будут показывать высокую скорость поиска релевантных изображений.

Практическую ценность данных научных разработок сложно переоценить: они уже нашли применение в таких областях, как компьютерное зрение, распознавание речи и биоинформатика.

Ссылка на оригинал статьи

Нашли ошибку на сайте? Выделите фрагмент текста и нажмите ctrl+enter

Теги: МИФИ, технологии

Похожие материалы:
Пионер нанотехнологий включил студентов МИФИ в разработку «умных» лекарств
Нейросеть обучили определять пол человека по написанному тексту
Фотоника и бионанотехнологии – новые направления развития для НИЯУ МИФИ
ICPPA-2018: хороший старт для молодых учёных
Студент ВИТИ НИЯУ МИФИ стал победителем выставки проектов на кубке Клуба робототехники
Первый эксперимент на установке МАВР
Будущее атомной энергетики – AtomFuture 2018 в Обнинске
Ученые придумали, как удешевить электронику за счет «водородных пузырей»
В НИЯУ МИФИ разрабатывают инновационный материал для биоразлагаемого имплантата
МКС и коллайдер: Нобелевский лауреат Тинг рассказал о своих экспериментах

При использовании любых материалов сайта akvobr.ru необходимо поставить гиперссылку на источник

Комментарии пользователей: 0 Оставить комментарий
Эту статью ещё никто не успел прокомментировать. Хотите стать первым?
Читайте в новом номере«Аккредитация в образовании»
№ 4 (112) 2019

Коммуникация. Как много в этом слове для нас с вами, уважаемые читатели, слилось. Что даёт последовательное и системное планирование, а, затем, и реализация коммуникативной составляющей своей деятельности? Человеку – чувство удовлетворенности своей жизнью; компании – культуру доверия и открытости; образовательной организации – успешное развитие информационной политики. Здесь, правда, без сюрпризов не обходится…
Анонс журнала

Партнеры
Популярные статьи
В рамках форума «Открытые инновации» пройдет конференция Sooner Than You Think
МОСКВА, 14 октября 2019года. — Глобальная технологическая конференция Sooner Than You Think:...
Южная Корея выступит страной-партнером форума «Открытые инновации 2020»
МОСКВА, 9 октября 2019. — Республика Корея приняла приглашение выступить страной-партнером IX...
В «Сколково» впервые пройдут иммерсивные экскурсии
МОСКВА, 10 октября 2019. —С 21 по 23 октября в Инновационном центре «Сколково» специально для...
Из журнала
#103Воронежский государственный университет отметил столетний юбилей
#108Ярославский градостроительный колледж готовит специалистов будущего
#105В Москве прошла V Глобальная конференция по технологиям в образовании EdCrunch
#102Студенты Раменского колледжа за три года получили 100 медалей WorldSkills
#103Владислав Бородачев о первоочередных задачах развития НСК
Информационная лента
11:41В России планируется проведение исследования «PISA для школ»
09:36Якутия – один из центров развития цифровых технологий
15:20RusNanoNet: ученые АлтГУ и ИВМ СО РАН реализуют уникальный проект
14:48РФФИ объявит конкурс на лучшие проекты фундаментальных научных исследований
12:27ВГУЭС участвует в дискуссии о школьном образовании на ВЭФ