PulseAugur
实时 08:40:52
English(EN) Federated Topic Model and Model Pruning Based on Variational Autoencoder

基于变分自编码器的联邦主题模型使用剪枝技术加速训练

研究人员开发了一种新颖的联邦主题建模方法,使用变分自编码器来解决跨方文档分析中的隐私问题。该方法结合了神经网络模型剪枝技术,以加速训练和推理时间。提出了两种剪枝策略:一种是在训练过程中逐步剪枝,以获得更高的准确性和更短的推理时间;另一种是在训练早期快速达到目标剪枝率,以更快地完成训练,但可能存在一些信息损失。实验表明,这种组合方法在保持模型性能的同时,显著加快了训练速度。 AI

影响 这项研究提供了一种在隐私敏感的联邦学习场景中加速主题模型训练和推理的方法。

排序理由 该集群包含一篇详细介绍联邦主题建模新方法的 istudy 论文。[lever_c_demoted from research: ic=1 ai=1.0]

在 arXiv cs.LG 阅读 →

AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →

基于变分自编码器的联邦主题模型使用剪枝技术加速训练

报道来源 [1]

  1. arXiv cs.LG TIER_1 English(EN) · Chengjie Ma, Yawen Li, Meiyu Liang, Ang Li ·

    Federated Topic Model and Model Pruning Based on Variational Autoencoder

    arXiv:2311.00314v2 Announce Type: replace Abstract: Topic modeling has emerged as a valuable tool for discovering patterns and topics within large collections of documents. However, when cross-analysis involves multiple parties, data privacy becomes a critical concern. Federated …