Linux下分割、合並文件——dd和cat

dd的作用是轉換和拷貝文件，我們可以利用它來分割文件，相關的選項如下：

if=filename：輸入的文件名

of=finename：輸出的文件名

bs=bytes：一次讀寫的字節數，默認是512bytes

skip=blocks:拷貝前，跳過的輸入文件的前blocks塊，塊的大小有bs決定

count=blocks：只拷貝輸入文件的前blocks塊 

例如，現在有一個文件file，大小為116616字節：

1. [root]# du -b file  
2. 116616  file  

將其分割為兩文件file1和file2，那我們就設置每塊為1024字節，將file的前60塊放入file1，余下的放入file2：

1. [root]# dd if=file bs=1024 count=60 skip=0  of=file1  
2. [root]# dd if=file bs=1024 count=60 skip=60 of=file2  

然後用cat將兩個文件合並為file.bak，要注意文件的順序：

1. [root]# cat file1 file2 > file.bak  

可以用md5sum驗證一下file和file.bak：

1. [root]# md5sum file  
2. 3ff53f7c30421ace632eefff36148a70  file  
3. [root]# md5sum file.bak  
4. 3ff53f7c30421ace632eefff36148a70  file.bak  

可以證明兩個文件時完全相同的。

為了方便分割、合並文件，我寫了兩個腳本：

ddf.sh：

1. #ddf.sh：分割文件，分割後的文件以數字結尾，例如file分割為兩個文件：file1和file2   
2. #!/bin/sh   
3.   
4. #使用腳本是第一參數是要分割的文件名   
5. Filename=$1     
6. Filesize=0  
7.   
8. Path=`pwd`  
9.   
10. #驗證文件名是否正確，然後計算文件的大小   
11. if [ -z $Filename ];then  
12.     echo "Error:The file name can not be empty"  
13.     exit  
14. fi  
15. if [ -e $Filename ];then  
16.     Filesize=`du -b $Filename | awk '{print $1}'`  
17.     if [ $Filesize == 0 ];then  
18.         echo "Error:The File size is zero!"  
19.         exit  
20.     fi  
21.     echo "The file size is $Filesize Byte"  
22.     echo "Plese enter the subfile size(KB):"  
23. else  
24.     echo "Error:$Filename does not exist!"  
25.     exit   
26. fi  
27.   
28. #輸入分割後每個文件的大小，單位是KB   
29. read Subfilesize  
30. if [ -z $Subfilesize ];then  
31.     echo "Error:Input can not be empty"  
32.     exit  
33. fi  
34.   
35. echo $Subfilesize | grep '^[0-9]\+$' >> /dev/null  
36. if [ $? -ne 0 ];then  
37.     echo "Error:The Input is not a number!"  
38.     exit  
39. elif [ $Subfilesize -eq 0 ];then  
40.     echo "Error:The Subfile size is zero!"  
41.     exit  
42. fi  
43.   
44. #計算需要分割為幾個文件   
45. SubfileByte=`expr $Subfilesize \* 1024`  
46. Subfilenum=`expr $Filesize / $SubfileByte`  
47. if [ `expr $Filesize % $Subfilesize` -ne 0 ];then  
48.     Subfilenum=`expr $Subfilenum + 1`  
49. fi  
50.   
51. #將文件分割   
52. echo "$Filename will be divided into $Subfilenum"   
53. i=1  
54. skipnum=0  
55. while [ $i -le $Subfilenum ]  
56. do  
57.     echo "$Filename$i"  
58.     dd if=$Filename of="$Path/$Filename$i" bs=1024 count=$Subfilesize skip=$skipnum  
59.     i=`expr $i + 1`  
60.     skipnum=`expr $skipnum + $Subfilesize`  
61. done  
62. echo "$Filename has been divided into $Subfilenum"  
63. echo "Done !"  

caf.sh：

1. #caf.sh:合並文件，需要合並的文件要放在一個文件夾裡   
2. #       文件名分為兩個部分，第一部分都相同，第二部分必須是從1開始的連續數字，例如file1，file2，file3   
3. #       合並後的文件名為file.bak   
4. #!/bin/sh   
5.   
6. #輸入文件名的第一部分   
7. echo "Please enter file name:"  
8. read Filename  
9. if [ -z $Filename ];then  
10.     echo "Error:File name can not be empty"  
11.     exit  
12. fi  
13.   
14. #輸入待合並文件的個數   
15. echo "Please enter the number of subfiles:"   
16. read Subfilenum  
17. if [ -z $Subfilenum ];then  
18.     echo "Error:The number of subfiles can not be empty"  
19.     exit  
20. fi  
21. echo $Subfilenum | grep '^[0-9]\+$' > /dev/null  
22. if [ $? -ne 0 ];then  
23.         echo "Error:Input must be a number"  
24. exit  
25. fi  
26. if [ $Subfilenum -eq 0 ];then  
27.         echo "Error:The number of subfiles can not be zero"  
28. exit  
29. fi  
30.   
31.   
32. #合並文件   
33. i=1  
34. Newfile=$Filename\.bak  
35. while [ $i -le $Subfilenum ]  
36. do  
37.     Subfilename=$Filename$i  
38.         if [ -e $Subfilename ];then  
39.             echo "$Subfilename done!"  
40.             cat $Subfilename >> $Newfile  
41.             i=`expr $i + 1`  
42.         else  
43.             echo "Error:$Subfilename does not exist"  
44.             rm -rf $Newfile  
45.             exit  
46.         fi  
47. done  
48.   
49.   
50. echo "Subfiles be merged into $Newfile"  
51. echo "Success!"  

用這兩個腳本完成對file的分割、合並：

1. [root]# ./ddf.sh file    
2. The file size is 116616 Byte  
3. Plese enter the subfile size(KB):  
4. 60  
5. file will be divided into 2  
6. file1  
7. 記錄了60+0 的讀入  
8. 記錄了60+0 的寫出  
9. 61440字節(61 kB)已復制，0.0352612 秒，1.7 MB/秒  
10. file2  
11. 記錄了53+1 的讀入  
12. 記錄了53+1 的寫出  
13. 55176字節(55 kB)已復制，0.0316272 秒，1.7 MB/秒  
14. file has been divided into 2  
15. Done !  
16. [root]# ls   
17. caf.sh  ddf.sh  file  file1  file2  
18. [root]# ./caf.sh    
19. Please enter file name:  
20. file  
21. Please enter the number of subfiles:  
22. 2  
23. file1 done!  
24. file2 done!  
25. Subfiles be merged into file.bak  
26. Success!  
27. [root]# ls   
28. caf.sh  ddf.sh  file  file1  file2  file.bak