百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术分析 > 正文

如何使用Linux强大的磁盘数据管理工具dd

liebian365 2024-10-14 22:23 23 浏览 0 评论

请关注本头条号,每天坚持更新原创干货技术文章。

如需学习视频,请在微信搜索公众号“智传网优”直接开始自助视频学习

1. dd命令简介

dd在linux中是 一个非常强大的工具,常用于复制大量数据,测试读写性能 ,清空硬盘数据(不可恢复),由于dd 命令允许以二进制方式读写,所以特别适合在原始设备上输入、输出。dd命令用于复制文件并对原文件的内容进行转换和格式化处理。dd命令功能很强大的,对于一些比较底层的问题,使用dd命令往往可以得到出人意料的效果。用的比较多的还是用dd来备份裸设备。但是不推荐,如果需要备份oracle裸设备,可以使用rman备份,或使用第三方软件备份,使用dd的话,管理起来不太方便。建议在有需要的时候使用dd 对物理磁盘操作,如果是文件系统的话还是使用tar backup cpio等其他命令更加方便。另外,使用dd对磁盘操作时,最好使用块设备文件。

dd命令简介

2. dd命令与cp命令的区别

两个命令都用于复制数据。cp仅仅是复制文件,全程全部经由操作系统处理,而dd则是底层数据的复制,复制到目标块设备时,数据是连接的,而cp可能不是连续的。dd可以复制分区信息等等底层信息,而cp只能复制可读文件。

3. dd选项

dd指令使用

语法格式

dd [option]

dd指令选项详解

if=file:输入文件名,缺省为标准输入

if =输入文件(或设备名称)。

of =输出文件(或设备名称)。

ibs = bytes 一次读取bytes字节,即读入缓冲区的字节数。

skip = blocks 跳过读入缓冲区开头的ibs*blocks块。

obs = bytes 一次写入bytes字节,即写入缓冲区的字节数。

bs = bytes 同时设置读/写缓冲区的字节数(等于设置ibs和obs)。

cbs = byte 一次转换bytes字节。

count=blocks 只拷贝输入的blocks块。

conv = ASCII 把EBCDIC码转换为ASCIl码。

conv = ebcdic 把ASCIl码转换为EBCDIC码。

conv = ibm 把ASCIl码转换为alternate EBCDIC码。

conv = block 把变动位转换成固定字符。

conv = ublock 把固定位转换成变动位。

conv = ucase 把字母由小写转换为大写。

conv = lcase 把字母由大写转换为小写。

conv = notrunc 不截短输出文件。

conv = swab 交换每一对输入字节。

conv = noerror 出错时不停止处理。

conv = sync 把每个输入记录的大小都调到ibs的大小(用NUL填充)。

4. dd常用选项

if=inputfile

指定源文件,即指定输入文件、缺省为标准输入,在LINUX中一切皆文件,因此可指定一些特殊的文件(如设备文件)用于特殊用途

of=outputfile

指定目标文件,即指定输出文件,缺省为标准输出

bs=N bytes

同时指定读入/输出的块大小为N个字节,N为数字

count=N blocks

指定拷贝的块数量,块大小由bs指定。N为数字

以上4个dd参数为最常用的选项。

5. 常用案例

5.1 备份整个盘(分区)的数据

以sda为源,sdb为目标

[root@zcwyou ~]# dd if=/dev/sda of=/dev/sdb

5.2 备份整个盘(分区)数据到文件

把sda的数据备份到/root/backup/sda.raw

[root@zcwyou ~]# dd if=/dev/sda of=/root/backup/sda.raw

5.3 根据备份文件恢复到某分区

比如:把/root/backup/sda.raw恢复到/dev/sda

[root@zcwyou ~]# dd if=/root/backup/sda.raw of=/dev/sda

5.4 备份整个盘(分区)并压缩后保存至指定路径

备份/dev/sda,并使用gzip压缩后保存为/root/sda.raw.gz

[root@zcwyou ~]# dd if=/dev/sda | gzip > /root/sda.raw.gz

5.5 将备份的压缩文件还原到分区

把文件/root/sda.raw.gz还原到分区

[root@zcwyou ~]# gzip -dc /root/sda.raw.gz | dd of=/dev/sda

5.6 备份MBR

备份sda的MBR,保存到

[root@zcwyou ~]# dd if=/dev/sda of=/root/sda.mbr bs=512 count=1

使用dd命令备份MBR

bs用于指定备份的块大小,单位为字节,MBR存放的位置的分区的前512字节,count用于指定块的数量。块大小可以使用的计量单位表

单元大小 代码

字节(1B) c

字节(2B) w

块(512B) b

千字节(1024B) k

兆字节(1024KB) M

吉字节(1024MB) G

5.7 还原MBR

把保存的MBR恢复到sda

[root@zcwyou ~]# dd if=/root/sda.mbr of=/dev/sda

5.8 拷贝内存内容到硬盘

[root@zcwyou ~]# dd if=/dev/mem of=/root/backup/mem.mem bs=1024

5.9 拷贝光盘内容到硬盘

[root@zcwyou ~]# dd if=/dev/cdrom of=/var/backup/cdrom.iso

5.10 增加swap分区文件大小

创建一个空白文件,用于SWAP空间,大小按需求

[root@zcwyou ~]# dd if=/dev/zero of=/swapfile bs=1024 count=100000

用/dev/zero填充0,输出文件swapfile,

使用dd命令创建swap空间

指定文件为swap文件

[root@zcwyou ~]# mkswap /swapfile

挂载swap文件

[root@zcwyou ~]# swapon /swapfile

修改/etc/fstab,开机自动挂载

增加一行

/swapfile swap swap default 0 0

5.11 销毁硬盘数据(慎用)

利用随机数填充硬盘,用于销毁数据

[root@zcwyou ~]# dd if=/dev/urandom of=/dev/sdb

5.12 测试磁盘写能力

[root@zcwyou ~]# time dd if=/dev/zero of=/test.dbf bs=8k count=300000

使用dd命令测试磁盘写能力

因为/dev/zero是一个伪设备,它只产生空字符流,对它不会产生IO,所以,IO都会集中在of文件中,of文件只用于写,所以这个命令相当于测试磁盘的写能力。

5.13 测试磁盘读能力

[root@zcwyou ~]# time dd if=/dev/sdb1 of=/dev/null bs=8k

使用dd命令测试磁盘读能力

因为/dev/sdb1是一个物理分区,对它的读取会产生IO,/dev/null是伪设备,相当于黑洞,of到该设备不会产生IO,所以,这个命令的IO只发生在/dev/sdb1上,也相当于测试磁盘的读能力。

5.14 查找性能最佳的块大小

测试4个数值,找到执行时间最短的即为最佳

[root@zcwyou ~]# dd if=/dev/zero bs=1024 count=1000000 of=/path/to/test.1GB
[root@zcwyou ~]# dd if=/dev/zero bs=2048 count=500000 of=/path/to/test.1GB
[root@zcwyou ~]# dd if=/dev/zero bs=4096 count=250000 of=/path/to/test.1GB
[root@zcwyou ~]# dd if=/dev/zero bs=8192 count=125000 of=/path/to/test.1GB

5.15 某种程度上修复硬盘

当硬盘较长时间(比如1,2年)放置不使用后,磁盘上会产生magnetic flux point。当磁头读到这些区域时会遇到困难,并可能导致I/O错误。当这种情况影响到硬盘的第一个扇区时,可能导致硬盘报废。使用以下命令有可能使这些数据起死回生, 且这个过程是安全,高效的。

[root@zcwyou ~]# dd if=/dev/sda of=/dev/sda

5.16 从raw设备备份到raw设备

[root@zcwyou ~]# dd if=/dev/rsd1b of=/dev/rsd2b bs=8k skip=8 seek=8 count=3841 

5.17 裸设备到文件系统

dd if=/dev/rsd1b of=/backup/df1.dbf bs=8k skip=8 count=3841

6. 结合nc进行远程备份

[root@zcwyou ~]# dd if=/dev/sda bs=16065b | nc 192.168.1.100 1234

源数据服务器,把dd数据重定向到nc

[root@zcwyou ~]# netcat -l -p 1234 | dd of=/dev/sdc bs=16065b

目标备份服务器,通过nc接收数据,把数据重定向到dd

可以把接收到的数据使用bzip2压缩后保存

[root@zcwyou ~]# netcat -l -p 1234 | bzip2 > partition.img

可以把接收到的数据使用gzip压缩后保存

[root@zcwyou ~]# netcat -l -p 1234 | gzip > partition.img

7. 修改数据某处

将一个很大的视频文件中的第i个字节的值改成0x41(也就是大写字母A的ASCII值)

[root@zcwyou ~]# echo A | dd of=bigfile seek=$i bs=1 count=1 conv=notrunc

8. 总结

dd是一个强大的数据备份管理工具,包括备份,恢复,读写速度测试等等,是Linux上非常强大的一个工具,使用时,要注意对目前业务的影响,不建议在磁盘IO高的情况使用dd,也不建议在业务繁忙时间使用dd。

本文已同步至博客站:

https://www.linuxrumen.com/cyml/714.html

点击了解更多,快速查看更多的技术文章列表。

相关推荐

“版本末期”了?下周平衡补丁!国服最强5套牌!上分首选

明天,酒馆战棋就将迎来大更新,也聊了很多天战棋相关的内容了,趁此机会,给兄弟们穿插一篇构筑模式的卡组推荐!老规矩,我们先来看10职业胜率。目前10职业胜率排名与一周前基本类似,没有太多的变化。平衡补丁...

VS2017 C++ 程序报错“error C2065:“M_PI”: 未声明的标识符"

首先,程序中头文件的选择,要选择头文件,在文件中是没有对M_PI的定义的。选择:项目——>”XXX属性"——>配置属性——>C/C++——>预处理器——>预处理器定义,...

东营交警实名曝光一批酒驾人员名单 88人受处罚

齐鲁网·闪电新闻5月24日讯酒后驾驶是对自己和他人生命安全极不负责的行为,为守护大家的平安出行路,东营交警一直将酒驾作为重点打击对象。5月23日,东营交警公布最新一批饮酒、醉酒名单。对以下驾驶人醉酒...

Qt界面——搭配QCustomPlot(qt platform)

这是我第一个使用QCustomPlot控件的上位机,通过串口精确的5ms发送一次数据,再将读取的数据绘制到图表中。界面方面,尝试卡片式设计,外加QSS简单的配了个色。QCustomPlot官网:Qt...

大话西游2分享赢取种族坐骑手办!PK趣闻录由你书写

老友相聚,仗剑江湖!《大话西游2》2021全民PK季4月激燃打响,各PK玩法鏖战齐开,零门槛参与热情高涨。PK季期间,不仅各种玩法奖励丰厚,参与PK趣闻录活动,投稿自己在PK季遇到的趣事,还有机会带走...

测试谷歌VS Code AI 编程插件 Gemini Code Assist

用ClaudeSonnet3.7的天气测试编码,让谷歌VSCodeAI编程插件GeminiCodeAssist自动编程。生成的文件在浏览器中的效果如下:(附源代码)VSCode...

顾爷想知道第4.5期 国服便利性到底需优化啥?

前段时间DNF国服推出了名为“阿拉德B计划”的系列改版计划,截至目前我们已经看到了两项实装。不过关于便利性上,国服似乎还有很多路要走。自从顾爷回归DNF以来,几乎每天都在跟我抱怨关于DNF里面各种各样...

掌握Visual Studio项目配置【基础篇】

1.前言VisualStudio是Windows上最常用的C++集成开发环境之一,简称VS。VS功能十分强大,对应的,其配置系统较为复杂。不管是对于初学者还是有一定开发经验的开发者来说,捋清楚VS...

还嫌LED驱动设计套路深?那就来看看这篇文章吧

随着LED在各个领域的不同应用需求,LED驱动电路也在不断进步和发展。本文从LED的特性入手,推导出适合LED的电源驱动类型,再进一步介绍各类LED驱动设计。设计必读:LED四个关键特性特性一:非线...

Visual Studio Community 2022(VS2022)安装图文方法

直接上步骤:1,首先可以下载安装一个VisualStudio安装器,叫做VisualStudioinstaller。这个安装文件很小,很快就安装完成了。2,打开VisualStudioins...

Qt添加MSVC构建套件的方法(qt添加c++11)

前言有些时候,在Windows下因为某些需求需要使用MSVC编译器对程序进行编译,假设我们安装Qt的时候又只是安装了MingW构建套件,那么此时我们该如何给现有的Qt添加一个MSVC构建套件呢?本文以...

Qt为什么站稳c++GUI的top1(qt c)

为什么现在QT越来越成为c++界面编程的第一选择,从事QT编程多年,在这之前做C++界面都是基于MFC。当时为什么会从MFC转到QT?主要原因是MFC开发界面想做得好看一些十分困难,引用第三方基于MF...

qt开发IDE应该选择VS还是qt creator

如果一个公司选择了qt来开发自己的产品,在面临IDE的选择时会出现vs或者qtcreator,选择qt的IDE需要结合产品需求、部署平台、项目定位、程序猿本身和公司战略,因为大的软件产品需要明确IDE...

Qt 5.14.2超详细安装教程,不会来打我

Qt简介Qt(官方发音[kju:t],音同cute)是一个跨平台的C++开库,主要用来开发图形用户界面(GraphicalUserInterface,GUI)程序。Qt是纯C++开...

Cygwin配置与使用(四)——VI字体和颜色的配置

简介:VI的操作模式,基本上VI可以分为三种状态,分别是命令模式(commandmode)、插入模式(Insertmode)和底行模式(lastlinemode),各模式的功能区分如下:1)...

取消回复欢迎 发表评论: