w*******x 发帖数: 489 | 1 【 以下文字转载自 Computation 讨论区 】
发信人: woshialex (Qi), 信区: Computation
标 题: 有人知道浮点数的压缩算法吗?有损也没关系
发信站: BBS 未名空间站 (Sat Oct 23 10:12:16 2010, 美东)
我的问题里头内存严重不够用,所以需要把很多浮点数数组(单精度吧)压缩,然后调
用的时候在内存里头一个数组一个数
组的解压缩。
有人知道有效的算法吗?能压缩几倍?即使适当的loss也没关系。数据有大片区域比较
平滑。
谢谢! |
m*****r 发帖数: 3822 | 2 spline?
【在 w*******x 的大作中提到】 : 【 以下文字转载自 Computation 讨论区 】 : 发信人: woshialex (Qi), 信区: Computation : 标 题: 有人知道浮点数的压缩算法吗?有损也没关系 : 发信站: BBS 未名空间站 (Sat Oct 23 10:12:16 2010, 美东) : 我的问题里头内存严重不够用,所以需要把很多浮点数数组(单精度吧)压缩,然后调 : 用的时候在内存里头一个数组一个数 : 组的解压缩。 : 有人知道有效的算法吗?能压缩几倍?即使适当的loss也没关系。数据有大片区域比较 : 平滑。 : 谢谢!
|
b******n 发帖数: 80 | 3 现代内存还有这个问题?
我估计你是没有释放内存的缘故吧。 |
w*******x 发帖数: 489 | 4 我目前跑的程序用4T内存跑。4K node 每个node 1G
并且越多越好。即将出马的机器有16T,我够用了。
所以我这个问题不再是问题了,也不压缩了。谢谢回复。
【在 b******n 的大作中提到】 : 现代内存还有这个问题? : 我估计你是没有释放内存的缘故吧。
|