Нейроалгоритмические рассуждения: перенос классических вычислений в глубокие нейронные сети
Нейроалгоритмические рассуждения направлены на наделение глубоких нейронных сетей свойствами классических алгоритмов: доказуемой корректностью, сильной обобщаемостью, интерпретируемостью и композиционностью. В этой статье рассматривается, как графовые нейронные сети (Graph Neural Networks, GNN) могут быть спроектированы для согласования с алгоритмами, такими как Беллман-Форд, что позволяет обучаться выполнению таких алгоритмов и обобщаться на большие входные данные. Ключевые инновации включают парадигму «кодирование-обработка-декодирование», максимальную агрегацию и пошаговое супервизорное обучение.
Статья посвящена нейроалгоритмическим рассуждениям, сфокусированным на воплощении классических вычислений (например, поиск кратчайшего пути, сортировка) в глубоких нейронных сетях. Подчеркивается важность алгоритмического выравнивания: проектирования нейроархитектур, структурно соответствующих потоку данных алгоритма. На примере алгоритма Беллмана-Форда и графовых нейронных сетей (ГНС) автор
Показать ещё ↓
Источник: The Gradient —
оригинал
