必须用len(dst)计算压缩比,因snappy.Encode返回切片的cap可能远大于len(缓冲池复用导致),误用cap会将未使用容量计入分母,使压缩比严重失真;空字符串等极短输入压缩后固定为7字节。

snappy 本身不提供压缩比计算函数,压缩比必须手动算:用原始数据长度除以压缩后有效长度。
为什么不能直接用 len(snappy.Encode(nil, src))?
snappy.Encode 返回的 []byte 的 cap 可能远大于 len,尤其在复用缓冲池时。如果误用 cap 或未截取有效部分,算出来的压缩比会严重失真(比如显示“压缩后变大几十倍”,其实只是多算了未使用的内存容量)。
- ✅ 正确做法:始终用
len(dst),其中dst := snappy.Encode(nil, src) - ❌ 错误做法:用
cap(dst)、或对复用切片未做buf[:0]清空就直接传入 - ⚠️ 注意:空字符串或极短输入(如
"a")可能被压缩成 7 字节,此时压缩比
怎么写一个安全可靠的压缩比函数?
核心是确保输入和输出都取真实字节长度,并处理边界情况(nil、零长)。
- 输入为
nil时,len(nil)是 0,需提前判断避免除零 panic - 输出用
snappy.Encode(nil, src)最简方式,不复用缓冲池可省去状态管理 - 压缩比建议保留小数点后两位,用
float64(len(src)) / float64(len(compressed))
示例:
立即学习“go语言免费学习笔记(深入)”;
func snappyCompressionRatio(src []byte) float64 {
if len(src) == 0 {
return 1.0 // 无数据,视为 1:1
}
compressed := snappy.Encode(nil, src)
if len(compressed) == 0 {
return 0 // 理论上不会发生,但防呆
}
return float64(len(src)) / float64(len(compressed))
}
压缩比低或为负值?先检查这三件事
实际压测中发现压缩比异常,大概率不是算法问题,而是使用姿势不对。
- 传入的是指针或结构体序列化前的原始对象?确认你压的是
[]byte,不是unsafe.Pointer或未 Marshal 的 struct - 是否在复用
dst切片时忘了重置长度?例如buf = append(buf[:0], ...)没做,导致旧数据残留干扰len() - 解压后再压缩?Snappy 不适合已压缩过的数据(如 gzip 后再 snappy),二次压缩往往膨胀
真正影响压缩比的,是数据本身的重复模式和长度。Snappy 对 ≥100B、含局部重复的 payload 效果最好;随机字节、加密数据、小 JSON 片段基本不压缩甚至略膨胀——这不是 bug,是设计使然。


















