Реализация сигмоидной функции активации с помощью концепции перестраиваемых вычислительных сред

Шашев, Дмитрий Вадимович; Шатравин, Владислав Владимирович

Реализация сигмоидной функции активации с помощью концепции перестраиваемых вычислительных сред

Шашев, Дмитрий Вадимович, Шатравин, Владислав Владимирович

Дата публикации: 2022

Дата публикации в реестре: 2023-02-06T15:01:56Z

Аннотация:

Рассматривается вариант реализации сигмоидной функции активации для ускорителей нейронных сетей, целиком реализованных на перестраиваемых вычислительных средах (ПВС). Показаны преимущества применения подобных ускорителей в маломощных интеллектуальных системах. Предложены модели ускорителей на основе распределенной кусочно-линейной аппроксимации сигмоиды. Приведены результаты временной симуляции Verilog-модулей разработанных моделей.

Ключевые слова:
сигмоида, функции активации, нейронные сети, перестраиваемые вычислительные среды, аппроксимация

Тип: статьи в журналах

Источник: Вестник Томского государственного университета. Управление, вычислительная техника и информатика. 2022. № 61. С. 117-127