news 2026/6/10 23:47:29

磁盘空间清理 dd+rm 方案原理分析

作者头像

张小明

前端开发工程师

1.2k 24
文章封面图
磁盘空间清理 dd+rm 方案原理分析

在导出.ova(Open Virtual Appliance,开源虚拟化镜像格式)前执行dd if=/dev/zero of=/empty bs=1M; rm /empty能大幅压缩镜像体积,核心原理是将虚拟机磁盘中的空闲扇区用0填充,让压缩算法能对连续0块进行高效压缩(甚至直接标记为空白跳过),解决了虚拟化环境中“空闲扇区数据杂乱导致压缩率低”的核心问题。

一、先搞懂:虚拟机磁盘的「伪空闲」问题

虚拟机的磁盘文件(如vmdk、qcow2,最终会被打包进.ova)有一个关键特性:删除文件后,磁盘的空闲扇区并非真正空白,而是保留了原文件的随机数据/碎片
原因在于:

  1. 操作系统删除文件时,仅修改文件系统的元数据(标记扇区为“可用”),不会擦除扇区中的实际数据;
  2. 虚拟机磁盘是「稀疏文件」(Sparse File)时,虽然未写入的扇区不会占用物理空间,但已写入后又释放的扇区,会保留原有数据并占据物理空间,且这些数据是随机的(如原文件的内容、缓存、日志碎片)。

而常规的压缩算法(如.ova默认的gzip压缩)对随机杂乱数据的压缩率极低(几乎压不动),但对连续的0字节压缩率接近100%(算法可直接用“N个0”的标记替代实际字节)。这是该清理方案的核心前提。

二、命令逐行解析:做了什么?

该命令是两步组合操作,核心是填充0→删除文件释放扇区,最终让虚拟机磁盘的空闲区域全为连续0。

1.dd if=/dev/zero of=/empty bs=1M

  • dd:Linux下的块设备数据拷贝工具,用于按指定大小读写数据;
  • if=/dev/zero:输入文件为/dev/zero(Linux特殊字符设备,无限输出0字节,无实际存储,仅在读取时生成0);
  • of=/empty:输出文件为当前根目录的empty,作用是用0字节填充这个文件
  • bs=1M:块大小为1MB,指定每次读写的字节数,决定填充速度(可根据磁盘性能调整,如4M、8M)。

执行效果:该命令会持续创建/empty文件,直到占满虚拟机磁盘的所有空闲空间(无可用扇区时自动停止),此时虚拟机磁盘中所有原本的空闲扇区都被0字节覆盖,原有的随机碎片数据被彻底替换。

2.rm /empty

  • rm /empty:删除刚创建的超大/empty文件;
  • 执行效果:操作系统标记/empty占用的扇区为“空闲”,但这些扇区的内容已经是连续的0字节,而非原来的随机数据。

三、核心逻辑:为什么填充0再删除,压缩率会暴增?

.ova的打包过程本质是将虚拟机磁盘文件、配置文件等打包并压缩,关键差异体现在填充0前后,空闲扇区的内容形态

状态空闲扇区内容压缩算法处理方式压缩后体积
未填充0随机碎片/原文件数据逐字节压缩,杂乱数据无规律,压缩率极低接近磁盘实际占用体积
填充0后删除连续0字节识别连续0块,用极简标记替代(如gzip的LZ77算法),几乎不占空间仅保留实际有数据的部分

简单来说:压缩算法对0的“压缩效率”是天花板级别的,而对随机数据几乎无效,该方案的本质是「将无意义的随机空闲扇区,转化为可被压缩算法极致优化的0扇区」。

总结

dd if=/dev/zero of=/empty bs=1M; rm /empty的核心原理可概括为「以空间换效率」:用0覆盖空闲扇区的随机数据,让压缩算法对连续0实现极致压缩,从而大幅降低.ova镜像的体积。

版权声明: 本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系邮箱:809451989@qq.com进行投诉反馈,一经查实,立即删除!
网站建设 2026/6/10 0:41:55

运维老哥熬的夜受的气,转网安全给你补回来!

运维老哥,你熬的夜、受的气,转行网安真的能“找补”回来 前几天和一哥们儿喝酒,他吐槽:“我在机房守了8年,大年初一被叫回来修数据库,凌晨三点处理过服务器宕机,现在头发秃了,腰也废…

作者头像 李华
网站建设 2026/6/10 20:09:14

大模型训练全解析:从预训练到微调,一篇搞定收藏备用

文章系统梳理了大模型训练流程,包括预训练(获取基座模型)和后训练(监督微调SFT与强化学习RL)。SFT通过标注数据集调整参数使模型更贴合特定场景;RL则利用奖励模型引导模型优化方向。通过DeepSeek和Qwen两个…

作者头像 李华
网站建设 2026/6/10 16:27:38

收藏!什么是AI应用开发工程师?(大模型入门必看)

在规划大模型学习路线前,先搞懂AI应用开发工程师的核心定义,快速建立对这个岗位的清晰认知,是避免走弯路、高效入门的关键一步。尤其对于想转行或入门大模型的程序员、小白来说,先明确岗位本质,才能针对性发力。 AI应…

作者头像 李华
网站建设 2026/6/10 20:33:52

争议!IF涨至11.5,却被降至2区!

🔥 🔥 🔥 🔥《IEEE Wireless Communications》创刊于2002年,由IEEE通信学会(ComSoc)主办,专注于传播无线通信系统、网络、服务和应用的前沿进展、核心技术与新兴趋势&#xff…

作者头像 李华
网站建设 2026/6/10 16:19:12

Thinkphp和Laravel基于Web的电子产品商城销售系统设计与实现

目录 基于ThinkPHP和Laravel的电子产品商城系统设计与实现系统目标技术架构核心功能对比分析应用价值 项目开发技术介绍PHP核心代码部分展示系统结论源码获取/同行可拿货,招校园代理 基于ThinkPHP和Laravel的电子产品商城系统设计与实现 系统目标 设计并实现一个功能完善的电…

作者头像 李华