Рассказываем, кто и почему ими занимается.
/ фото Paweł Czerwiński Unsplash
Что такое нейроморфный чип
Это — процессор, работа которого основана на принципах действия человеческого . Такие устройства моделируют работу нейронов и их отростков — аксонов и дендритов — отвечающих за передачу и восприятие данных. Связи между нейронами образуются за счет синапсов — специальных контактов, по которым транслируются электрические сигналы.
Одна из задач нейроморфных устройств — ускорить обучение сверточных нейронных сетей для распознавания изображений. Системам искусственного интеллекта на базе этой технологии не нужно обращаться к массивному хранилищу с тренировочными данными по сети — вся информация постоянно содержится в искусственных нейронах. Такой подход дает возможность реализовывать алгоритмы машинного обучения локально. Поэтому ожидается, что нейроморфные чипы найдут применение в мобильных устройствах, IoT-гаджетах, а также дата-центрах.
Почему инженеры вдохновляются человеческим мозгом
Инженеры, занимающиеся разработкой нейроморфных чипов (подробнее о них мы поговорим далее), в первую очередь отмечают высокие вычислительные способности человеческого .
По данным ряда исследований, наш обладает потенциальной производительностью в один эксафлопс. Традиционные суперкомпьютеры такой вычислительной мощности пока только разрабатываются — первые машины ожидают не раньше 2021 года.
При этом обладает крайне высокой энергоэффективностью, что является вторым важным фактором для тех, кто занимается разработкой нейроморфных систем.
/ фото jesse orrico Unsplash
Конечно, искусственные системы обладают существенными ограничениями. Нейронные сети отличаются от биологических аналогов неспособностью «запомнить» прошлые навыки при обучении новой задаче. Алгоритм, натренированный на распознавание собак, не сможет различать людей. Но эксперты из этой сферы надеются, что нейроморфные чипы откроют новые возможности для обучения «многозадачных» нейронных сетей и решат подобные проблемы.
Первые нейроморфные чипы
Первые попытки создать искусственные нейроны предпринимались еще в 60-х годах прошлого века. Тогда один из будущих изобретателей микропроцессора Тэд Хофф (Ted Hoff) вместе с профессором из Стэнфорда Бернардом Уидроу (Bernard Widrow) создали одноуровневую нейросеть на основе мемисторов — электрохимических резисторов с функцией памяти. Считается, что эта разработка положила начало нейроморфной инженерии.
В 80-х годах инженер Карвер Мид (Carver Mead) предложил использовать транзисторы в качестве аналоговых компонентов, а не цифровых переключателей. В 90-х команда во главе с Мидом представила искусственный синапс, способный хранить информацию продолжительное время, и нейроморфный процессор на основе транзисторов с плавающим затвором.
В то же время американский президент Джордж Буш-старший объявил о начале «Десятилетия мозга» и призвал спонсировать программы, направленные на изучение этого органа. Все это дало толчок к развитию нейроинформатики и вычислительной нейробиологии и привело к созданию инфраструктуры для дальнейшего изучения темы.
За последние десять лет знания человечества о работе достигли новых высот. С 2013 года Швейцария занимается развитием проекта Human Brain Project (HBP). В том же году Америка запустила программу BRAIN Initiative. Эти инициативы оказали серьезное влияние на сферу систем искусственного интеллекта и привели к появлению новых нейроморфных технологий.
Что разрабатывают сегодня
Сегодня над созданием нейрочипов работают в IBM. Еще в 2008 году инженеры компании при поддержке DARPA приняли участие в программе SyNAPSE, в рамках которой разрабатывались компьютерные архитектуры, отличные от фон Неймановских. За три года IBM удалось разработать ядро с 256 искусственными нейронами (у каждого из них были 256 синапсов). Еще через три года компания представила процессор TrueNorth, состоящий из 4096 таких ядер — это более миллиона нейронов. И его уже применяют в задачах распознавания жестов и речи. Разработчики компании заявляют, что вычислительные системы на основе TrueNorth смогут успешно смоделировать работу кошки. Однако ряд экспертов считает такие заявления явным преувеличением.
Еще одна крупная ИТ-компания, занимающаяся разработкой нейроморфных вычислительный систем, — это Intel. В прошлом году они представили чип Loihi. В его составе имеются 128 нейроморфных ядер, каждое из которых симулирует 1024 нейрона. Программировать процессор можно с помощью API, написанного на Python. Первые экземпляры этих устройств уже отправили в дата-центры нескольких ведущих университетов для проведения тестов на реальных задачах.
К слову об университетах, над нейроморфными чипами работают и инженеры из Манчестерского вуза. В прошлом году они представили архитектуру SpiNNaker, состоящую из миллиона ядер, способных эмулировать работу ста миллионов нейронов. Потребляет такая установка 100 кВт. Программировать компьютер можно с помощью языка PyNN. На сегодняшний день машина используется для симуляции процессов, происходящих в мышином .
Несмотря на прогресс последних лет, можно сказать, что нейроморфное железо находится на ранних этапах своего развития. Задачи, которые ставят перед системами ИИ на его основе в основном ограничиваются распознаванием объектов. Тем не менее представители ИТ-индустрии убеждены, что в будущем нейроморфное аппаратное обеспечение позволит проводить полноценные симуляции и откроет совершенно новые вычислительные возможности.
О чем мы пишем в нашем блоге:
- Почему vGPU не уступают по производительности «железным» решениям
- VMware EMPOWER 2019: делимся впечатлениями и рассказываем о самом интересном
- Перспективы дата-центров: технологии, которые повысят производительность серверов
- Процессоры для серверов: обсуждаем новинки
- Развитие дата-центров: технологические тренды
- Как повысить энергоэффективность дата-центра
Автор: it_man
