Linux下分割、合並文件——dd和cat

dd的作用是轉換和拷貝文件，我們可以利用它來分割文件，相關的選項如下：

if=filename：輸入的文件名

of=finename：輸出的文件名

bs=bytes：一次讀寫的字節數，默認是512bytes

skip=blocks:拷貝前，跳過的輸入文件的前blocks塊，塊的大小有bs決定

count=blocks：只拷貝輸入文件的前blocks塊

例如，現在有一個文件file，大小為116616字節：

1. [root]# du -b file
2. 116616 file

將其分割為兩文件file1和file2，那我們就設置每塊為1024字節，將file的前60塊放入file1，余下的放入file2：

1. [root]# dd if=file bs=1024 count=60 skip=0 of=file1
2. [root]# dd if=file bs=1024 count=60 skip=60 of=file2

然後用cat將兩個文件合並為file.bak，要注意文件的順序：

1. [root]# cat file1 file2 > file.bak

可以用md5sum驗證一下file和file.bak：

1. [root]# md5sum file
2. 3ff53f7c30421ace632eefff36148a70 file
3. [root]# md5sum file.bak
4. 3ff53f7c30421ace632eefff36148a70 file.bak

可以證明兩個文件時完全相同的。

為了方便分割、合並文件，我寫了兩個腳本：

ddf.sh：

1. #ddf.sh：分割文件，分割後的文件以數字結尾，例如file分割為兩個文件：file1和file2
2. #!/bin/sh
4. #使用腳本是第一參數是要分割的文件名
5. Filename=$1
6. Filesize=0
8. Path=`pwd`
10. #驗證文件名是否正確，然後計算文件的大小
11. if [ -z $Filename ];then
12. echo "Error:The file name can not be empty"
13. exit
14. fi
15. if [ -e $Filename ];then
16. Filesize=`du -b $Filename | awk '{print $1}'`
17. if [ $Filesize == 0 ];then
18. echo "Error:The File size is zero!"
19. exit
20. fi
21. echo "The file size is $Filesize Byte"
22. echo "Plese enter the subfile size(KB):"
23. else
24. echo "Error:$Filename does not exist!"
25. exit
26. fi
28. #輸入分割後每個文件的大小，單位是KB
29. read Subfilesize
30. if [ -z $Subfilesize ];then
31. echo "Error:Input can not be empty"
32. exit
33. fi
35. echo $Subfilesize | grep '^[0-9]\+$' >> /dev/null
36. if [ $? -ne 0 ];then
37. echo "Error:The Input is not a number!"
38. exit
39. elif [ $Subfilesize -eq 0 ];then
40. echo "Error:The Subfile size is zero!"
41. exit
42. fi
44. #計算需要分割為幾個文件
45. SubfileByte=`expr $Subfilesize \* 1024`
46. Subfilenum=`expr $Filesize / $SubfileByte`
47. if [ `expr $Filesize % $Subfilesize` -ne 0 ];then
48. Subfilenum=`expr $Subfilenum + 1`
49. fi
51. #將文件分割
52. echo "$Filename will be divided into $Subfilenum"
53. i=1
54. skipnum=0
55. while [ $i -le $Subfilenum ]
56. do
57. echo "$Filename$i"
58. dd if=$Filename of="$Path/$Filename$i" bs=1024 count=$Subfilesize skip=$skipnum
59. i=`expr $i + 1`
60. skipnum=`expr $skipnum + $Subfilesize`
61. done
62. echo "$Filename has been divided into $Subfilenum"
63. echo "Done !"

caf.sh：

1. #caf.sh:合並文件，需要合並的文件要放在一個文件夾裡
2. # 文件名分為兩個部分，第一部分都相同，第二部分必須是從1開始的連續數字，例如file1，file2，file3
3. # 合並後的文件名為file.bak
4. #!/bin/sh
6. #輸入文件名的第一部分
7. echo "Please enter file name:"
8. read Filename
9. if [ -z $Filename ];then
10. echo "Error:File name can not be empty"
11. exit
12. fi
14. #輸入待合並文件的個數
15. echo "Please enter the number of subfiles:"
16. read Subfilenum
17. if [ -z $Subfilenum ];then
18. echo "Error:The number of subfiles can not be empty"
19. exit
20. fi
21. echo $Subfilenum | grep '^[0-9]\+$' > /dev/null
22. if [ $? -ne 0 ];then
23. echo "Error:Input must be a number"
24. exit
25. fi
26. if [ $Subfilenum -eq 0 ];then
27. echo "Error:The number of subfiles can not be zero"
28. exit
29. fi
32. #合並文件
33. i=1
34. Newfile=$Filename\.bak
35. while [ $i -le $Subfilenum ]
36. do
37. Subfilename=$Filename$i
38. if [ -e $Subfilename ];then
39. echo "$Subfilename done!"
40. cat $Subfilename >> $Newfile
41. i=`expr $i + 1`
42. else
43. echo "Error:$Subfilename does not exist"
44. rm -rf $Newfile
45. exit
46. fi
47. done
50. echo "Subfiles be merged into $Newfile"
51. echo "Success!"

用這兩個腳本完成對file的分割、合並：

1. [root]# ./ddf.sh file
2. The file size is 116616 Byte
3. Plese enter the subfile size(KB):
4. 60
5. file will be divided into 2
6. file1
7. 記錄了60+0 的讀入
8. 記錄了60+0 的寫出
9. 61440字節(61 kB)已復制，0.0352612 秒，1.7 MB/秒
10. file2
11. 記錄了53+1 的讀入
12. 記錄了53+1 的寫出
13. 55176字節(55 kB)已復制，0.0316272 秒，1.7 MB/秒
14. file has been divided into 2
15. Done !
16. [root]# ls
17. caf.sh ddf.sh file file1 file2
18. [root]# ./caf.sh
19. Please enter file name:
20. file
21. Please enter the number of subfiles:
22. 2
23. file1 done!
24. file2 done!
25. Subfiles be merged into file.bak
26. Success!
27. [root]# ls
28. caf.sh ddf.sh file file1 file2 file.bak