‪Petar Veličković

范畴深度学习框架统一AI架构

一个名为范畴深度学习（Categorical Deep Learning, CDL）的新理论框架被提出，用于统一各种深度学习架构。该框架由Gavranović等人发表的论文详细介绍，利用范畴论为描述Transformer、RNN和CNN等模型提供了一种通用语言。CDL旨在弥合指定模型约束与其实现之间的差距，特别是通过函数式编程概念。该理论被呈现为深度学习不同子领域的高层概述，包括架构、优化和函数理论，而CDL侧重于架构方面。