Багатокритеріальна Оптимізація в Задачах Структурно-Параметричного Синтезу Згорткових Нейронних Мереж

Анотація

В роботі визначено перспективний клас згорткових нейронних мереж, а також розглянуті їх ключові параметри для подальшого структурно-параметричного синтезу. Показано, що ці мережі повинні включати крім традиційних компонентів (згорточні шари, об'єднуючі шари, шари прямого поширення, додаткові шари: шар пакетної нормалізації, згортковий шар 1х1, шар відсіву, залишковий блок, тощо) також і функціональні структірні блоки (SRU, CRU, блок щільної залишкової уваги, тощо). Пропонується застосування генетичного алгоритму для структурнопараметричного синтезу з використанням розглянутих шарів та структурних блоків.