如何使用Linux强大的磁盘数据管理工具dd
liebian365 2024-10-14 22:23 23 浏览 0 评论
请关注本头条号,每天坚持更新原创干货技术文章。
如需学习视频,请在微信搜索公众号“智传网优”直接开始自助视频学习
1. dd命令简介
dd在linux中是 一个非常强大的工具,常用于复制大量数据,测试读写性能 ,清空硬盘数据(不可恢复),由于dd 命令允许以二进制方式读写,所以特别适合在原始设备上输入、输出。dd命令用于复制文件并对原文件的内容进行转换和格式化处理。dd命令功能很强大的,对于一些比较底层的问题,使用dd命令往往可以得到出人意料的效果。用的比较多的还是用dd来备份裸设备。但是不推荐,如果需要备份oracle裸设备,可以使用rman备份,或使用第三方软件备份,使用dd的话,管理起来不太方便。建议在有需要的时候使用dd 对物理磁盘操作,如果是文件系统的话还是使用tar backup cpio等其他命令更加方便。另外,使用dd对磁盘操作时,最好使用块设备文件。
dd命令简介
2. dd命令与cp命令的区别
两个命令都用于复制数据。cp仅仅是复制文件,全程全部经由操作系统处理,而dd则是底层数据的复制,复制到目标块设备时,数据是连接的,而cp可能不是连续的。dd可以复制分区信息等等底层信息,而cp只能复制可读文件。
3. dd选项
dd指令使用
语法格式
dd [option]
dd指令选项详解
if=file:输入文件名,缺省为标准输入
if =输入文件(或设备名称)。
of =输出文件(或设备名称)。
ibs = bytes 一次读取bytes字节,即读入缓冲区的字节数。
skip = blocks 跳过读入缓冲区开头的ibs*blocks块。
obs = bytes 一次写入bytes字节,即写入缓冲区的字节数。
bs = bytes 同时设置读/写缓冲区的字节数(等于设置ibs和obs)。
cbs = byte 一次转换bytes字节。
count=blocks 只拷贝输入的blocks块。
conv = ASCII 把EBCDIC码转换为ASCIl码。
conv = ebcdic 把ASCIl码转换为EBCDIC码。
conv = ibm 把ASCIl码转换为alternate EBCDIC码。
conv = block 把变动位转换成固定字符。
conv = ublock 把固定位转换成变动位。
conv = ucase 把字母由小写转换为大写。
conv = lcase 把字母由大写转换为小写。
conv = notrunc 不截短输出文件。
conv = swab 交换每一对输入字节。
conv = noerror 出错时不停止处理。
conv = sync 把每个输入记录的大小都调到ibs的大小(用NUL填充)。
4. dd常用选项
if=inputfile
指定源文件,即指定输入文件、缺省为标准输入,在LINUX中一切皆文件,因此可指定一些特殊的文件(如设备文件)用于特殊用途
of=outputfile
指定目标文件,即指定输出文件,缺省为标准输出
bs=N bytes
同时指定读入/输出的块大小为N个字节,N为数字
count=N blocks
指定拷贝的块数量,块大小由bs指定。N为数字
以上4个dd参数为最常用的选项。
5. 常用案例
5.1 备份整个盘(分区)的数据
以sda为源,sdb为目标
[root@zcwyou ~]# dd if=/dev/sda of=/dev/sdb
5.2 备份整个盘(分区)数据到文件
把sda的数据备份到/root/backup/sda.raw
[root@zcwyou ~]# dd if=/dev/sda of=/root/backup/sda.raw
5.3 根据备份文件恢复到某分区
比如:把/root/backup/sda.raw恢复到/dev/sda
[root@zcwyou ~]# dd if=/root/backup/sda.raw of=/dev/sda
5.4 备份整个盘(分区)并压缩后保存至指定路径
备份/dev/sda,并使用gzip压缩后保存为/root/sda.raw.gz
[root@zcwyou ~]# dd if=/dev/sda | gzip > /root/sda.raw.gz
5.5 将备份的压缩文件还原到分区
把文件/root/sda.raw.gz还原到分区
[root@zcwyou ~]# gzip -dc /root/sda.raw.gz | dd of=/dev/sda
5.6 备份MBR
备份sda的MBR,保存到
[root@zcwyou ~]# dd if=/dev/sda of=/root/sda.mbr bs=512 count=1
使用dd命令备份MBR
bs用于指定备份的块大小,单位为字节,MBR存放的位置的分区的前512字节,count用于指定块的数量。块大小可以使用的计量单位表
单元大小 代码
字节(1B) c
字节(2B) w
块(512B) b
千字节(1024B) k
兆字节(1024KB) M
吉字节(1024MB) G
5.7 还原MBR
把保存的MBR恢复到sda
[root@zcwyou ~]# dd if=/root/sda.mbr of=/dev/sda
5.8 拷贝内存内容到硬盘
[root@zcwyou ~]# dd if=/dev/mem of=/root/backup/mem.mem bs=1024
5.9 拷贝光盘内容到硬盘
[root@zcwyou ~]# dd if=/dev/cdrom of=/var/backup/cdrom.iso
5.10 增加swap分区文件大小
创建一个空白文件,用于SWAP空间,大小按需求
[root@zcwyou ~]# dd if=/dev/zero of=/swapfile bs=1024 count=100000
用/dev/zero填充0,输出文件swapfile,
使用dd命令创建swap空间
指定文件为swap文件
[root@zcwyou ~]# mkswap /swapfile
挂载swap文件
[root@zcwyou ~]# swapon /swapfile
修改/etc/fstab,开机自动挂载
增加一行
/swapfile swap swap default 0 0
5.11 销毁硬盘数据(慎用)
利用随机数填充硬盘,用于销毁数据
[root@zcwyou ~]# dd if=/dev/urandom of=/dev/sdb
5.12 测试磁盘写能力
[root@zcwyou ~]# time dd if=/dev/zero of=/test.dbf bs=8k count=300000
使用dd命令测试磁盘写能力
因为/dev/zero是一个伪设备,它只产生空字符流,对它不会产生IO,所以,IO都会集中在of文件中,of文件只用于写,所以这个命令相当于测试磁盘的写能力。
5.13 测试磁盘读能力
[root@zcwyou ~]# time dd if=/dev/sdb1 of=/dev/null bs=8k
使用dd命令测试磁盘读能力
因为/dev/sdb1是一个物理分区,对它的读取会产生IO,/dev/null是伪设备,相当于黑洞,of到该设备不会产生IO,所以,这个命令的IO只发生在/dev/sdb1上,也相当于测试磁盘的读能力。
5.14 查找性能最佳的块大小
测试4个数值,找到执行时间最短的即为最佳
[root@zcwyou ~]# dd if=/dev/zero bs=1024 count=1000000 of=/path/to/test.1GB [root@zcwyou ~]# dd if=/dev/zero bs=2048 count=500000 of=/path/to/test.1GB [root@zcwyou ~]# dd if=/dev/zero bs=4096 count=250000 of=/path/to/test.1GB [root@zcwyou ~]# dd if=/dev/zero bs=8192 count=125000 of=/path/to/test.1GB
5.15 某种程度上修复硬盘
当硬盘较长时间(比如1,2年)放置不使用后,磁盘上会产生magnetic flux point。当磁头读到这些区域时会遇到困难,并可能导致I/O错误。当这种情况影响到硬盘的第一个扇区时,可能导致硬盘报废。使用以下命令有可能使这些数据起死回生, 且这个过程是安全,高效的。
[root@zcwyou ~]# dd if=/dev/sda of=/dev/sda
5.16 从raw设备备份到raw设备
[root@zcwyou ~]# dd if=/dev/rsd1b of=/dev/rsd2b bs=8k skip=8 seek=8 count=3841
5.17 裸设备到文件系统
dd if=/dev/rsd1b of=/backup/df1.dbf bs=8k skip=8 count=3841
6. 结合nc进行远程备份
[root@zcwyou ~]# dd if=/dev/sda bs=16065b | nc 192.168.1.100 1234
源数据服务器,把dd数据重定向到nc
[root@zcwyou ~]# netcat -l -p 1234 | dd of=/dev/sdc bs=16065b
目标备份服务器,通过nc接收数据,把数据重定向到dd
可以把接收到的数据使用bzip2压缩后保存
[root@zcwyou ~]# netcat -l -p 1234 | bzip2 > partition.img
可以把接收到的数据使用gzip压缩后保存
[root@zcwyou ~]# netcat -l -p 1234 | gzip > partition.img
7. 修改数据某处
将一个很大的视频文件中的第i个字节的值改成0x41(也就是大写字母A的ASCII值)
[root@zcwyou ~]# echo A | dd of=bigfile seek=$i bs=1 count=1 conv=notrunc
8. 总结
dd是一个强大的数据备份管理工具,包括备份,恢复,读写速度测试等等,是Linux上非常强大的一个工具,使用时,要注意对目前业务的影响,不建议在磁盘IO高的情况使用dd,也不建议在业务繁忙时间使用dd。
本文已同步至博客站:
https://www.linuxrumen.com/cyml/714.html
点击了解更多,快速查看更多的技术文章列表。
相关推荐
- “版本末期”了?下周平衡补丁!国服最强5套牌!上分首选
-
明天,酒馆战棋就将迎来大更新,也聊了很多天战棋相关的内容了,趁此机会,给兄弟们穿插一篇构筑模式的卡组推荐!老规矩,我们先来看10职业胜率。目前10职业胜率排名与一周前基本类似,没有太多的变化。平衡补丁...
- VS2017 C++ 程序报错“error C2065:“M_PI”: 未声明的标识符"
-
首先,程序中头文件的选择,要选择头文件,在文件中是没有对M_PI的定义的。选择:项目——>”XXX属性"——>配置属性——>C/C++——>预处理器——>预处理器定义,...
- 东营交警实名曝光一批酒驾人员名单 88人受处罚
-
齐鲁网·闪电新闻5月24日讯酒后驾驶是对自己和他人生命安全极不负责的行为,为守护大家的平安出行路,东营交警一直将酒驾作为重点打击对象。5月23日,东营交警公布最新一批饮酒、醉酒名单。对以下驾驶人醉酒...
- Qt界面——搭配QCustomPlot(qt platform)
-
这是我第一个使用QCustomPlot控件的上位机,通过串口精确的5ms发送一次数据,再将读取的数据绘制到图表中。界面方面,尝试卡片式设计,外加QSS简单的配了个色。QCustomPlot官网:Qt...
- 大话西游2分享赢取种族坐骑手办!PK趣闻录由你书写
-
老友相聚,仗剑江湖!《大话西游2》2021全民PK季4月激燃打响,各PK玩法鏖战齐开,零门槛参与热情高涨。PK季期间,不仅各种玩法奖励丰厚,参与PK趣闻录活动,投稿自己在PK季遇到的趣事,还有机会带走...
- 测试谷歌VS Code AI 编程插件 Gemini Code Assist
-
用ClaudeSonnet3.7的天气测试编码,让谷歌VSCodeAI编程插件GeminiCodeAssist自动编程。生成的文件在浏览器中的效果如下:(附源代码)VSCode...
- 顾爷想知道第4.5期 国服便利性到底需优化啥?
-
前段时间DNF国服推出了名为“阿拉德B计划”的系列改版计划,截至目前我们已经看到了两项实装。不过关于便利性上,国服似乎还有很多路要走。自从顾爷回归DNF以来,几乎每天都在跟我抱怨关于DNF里面各种各样...
- 掌握Visual Studio项目配置【基础篇】
-
1.前言VisualStudio是Windows上最常用的C++集成开发环境之一,简称VS。VS功能十分强大,对应的,其配置系统较为复杂。不管是对于初学者还是有一定开发经验的开发者来说,捋清楚VS...
- 还嫌LED驱动设计套路深?那就来看看这篇文章吧
-
随着LED在各个领域的不同应用需求,LED驱动电路也在不断进步和发展。本文从LED的特性入手,推导出适合LED的电源驱动类型,再进一步介绍各类LED驱动设计。设计必读:LED四个关键特性特性一:非线...
- Visual Studio Community 2022(VS2022)安装图文方法
-
直接上步骤:1,首先可以下载安装一个VisualStudio安装器,叫做VisualStudioinstaller。这个安装文件很小,很快就安装完成了。2,打开VisualStudioins...
- Qt添加MSVC构建套件的方法(qt添加c++11)
-
前言有些时候,在Windows下因为某些需求需要使用MSVC编译器对程序进行编译,假设我们安装Qt的时候又只是安装了MingW构建套件,那么此时我们该如何给现有的Qt添加一个MSVC构建套件呢?本文以...
- Qt为什么站稳c++GUI的top1(qt c)
-
为什么现在QT越来越成为c++界面编程的第一选择,从事QT编程多年,在这之前做C++界面都是基于MFC。当时为什么会从MFC转到QT?主要原因是MFC开发界面想做得好看一些十分困难,引用第三方基于MF...
- qt开发IDE应该选择VS还是qt creator
-
如果一个公司选择了qt来开发自己的产品,在面临IDE的选择时会出现vs或者qtcreator,选择qt的IDE需要结合产品需求、部署平台、项目定位、程序猿本身和公司战略,因为大的软件产品需要明确IDE...
- Qt 5.14.2超详细安装教程,不会来打我
-
Qt简介Qt(官方发音[kju:t],音同cute)是一个跨平台的C++开库,主要用来开发图形用户界面(GraphicalUserInterface,GUI)程序。Qt是纯C++开...
- Cygwin配置与使用(四)——VI字体和颜色的配置
-
简介:VI的操作模式,基本上VI可以分为三种状态,分别是命令模式(commandmode)、插入模式(Insertmode)和底行模式(lastlinemode),各模式的功能区分如下:1)...
你 发表评论:
欢迎- 一周热门
- 最近发表
-
- “版本末期”了?下周平衡补丁!国服最强5套牌!上分首选
- VS2017 C++ 程序报错“error C2065:“M_PI”: 未声明的标识符"
- 东营交警实名曝光一批酒驾人员名单 88人受处罚
- Qt界面——搭配QCustomPlot(qt platform)
- 大话西游2分享赢取种族坐骑手办!PK趣闻录由你书写
- 测试谷歌VS Code AI 编程插件 Gemini Code Assist
- 顾爷想知道第4.5期 国服便利性到底需优化啥?
- 掌握Visual Studio项目配置【基础篇】
- 还嫌LED驱动设计套路深?那就来看看这篇文章吧
- Visual Studio Community 2022(VS2022)安装图文方法
- 标签列表
-
- wireshark怎么抓包 (75)
- qt sleep (64)
- cs1.6指令代码大全 (55)
- factory-method (60)
- sqlite3_bind_blob (52)
- hibernate update (63)
- c++ base64 (70)
- nc 命令 (52)
- wm_close (51)
- epollin (51)
- sqlca.sqlcode (57)
- lua ipairs (60)
- tv_usec (64)
- 命令行进入文件夹 (53)
- postgresql array (57)
- statfs函数 (57)
- .project文件 (54)
- lua require (56)
- for_each (67)
- c#工厂模式 (57)
- wxsqlite3 (66)
- dmesg -c (58)
- fopen参数 (53)
- tar -zxvf -c (55)
- 速递查询 (52)