logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

拜占庭鲁棒Krum聚合算法

将梯度与其它梯度的范数距离的和作为该梯度的得分,然后选取得分最低,即“和大多数梯度都相似”的梯度作为聚合梯度。Krum不会影响模型的正常收敛,并且在攻击者控制worker的占比不超过50%的情况下能保证模型的鲁棒性。...

#算法#机器学习#数据挖掘
CNN模型量化压缩降低分布式通信开销

想要在移动端部署CNN,需要模型大小比较小、时耗比较低,才能适用于算力和内存受限的移动设备。空域滤波从通信的内容出发,尽量减少要通信的数据量,对传输的内容进行过滤、压缩或者量化,减少每一次传输所需的时间。模型过滤比较直观的方法是对模型参数进行过滤。如果一次迭代过程中某些参数没有明显变化,则可以将其过滤掉,从而减少通信量。实践中,在训练的后期,众多的参数会趋于收敛,只需要保留少量的参数更新信息,整个

#cnn#分布式#人工智能
到底了