arXiv · Neural and Evolutionary Computing· Ruoyu Zhao, Jiaqi Wu, Chenyu Zhu, Zhichao Lu·· 3 小时前AI 评分38
大语言模型引导的脉冲神经网络原生架构进化发现
Large Language Model-Guided Evolutionary Discovery of Native Neural Architectures for Spiking Sequence Modeling
AI 导读
OpenArchEvo 利用大语言模型在开放程序空间中进化可执行的脉冲神经网络架构代码,通过三视图表示评估新颖性与性能,以 132 V100 GPU 天的训练成本发现多个原生 SNN 架构。NeuroGate 在 WikiText-103 上超越 ANN DeltaNet,LoopMem 等架构将架构级算术能耗较密集 Transformer 基线降低最多 50.6x。所有代码与发现的架构将公开。
来源:arXiv · Neural and Evolutionary Computing · arxiv.org