linux下scp远程拷贝包含空格的目录或者文件的解决方法 |
本文标签:远程拷贝,空格 今天遇到个白痴问题,用了linux 这么久了,竟然还出现如此低级的错误 。 记录下,免得又忘记 。 描述: 今天需要远程拷贝一些文件到电脑上,ubuntu的 。 远程电脑是debian的 。 文件和目录包含大量的空格,采用scp拷贝,例: scp -r root@192.168.0.51:/home/xxj/Documents/files/xx xx jj.tar.gz ./ 最开始就意识到了是空格问题,就采用了 文件空格前加“\”,死活不行, scp -r root@192.168.0.51:/home/xxj/Documents/files/xx\ xx\ jj.tar.gz ./ 然后又使用 引号,单引号,双引号都用了,还是不行 。 scp -r root@192.168.0.51:/home/xxj/Documents/files/xx xx jj.tar.gz ./ scp -r root@192.168.0.51:"/home/xxj/Documents/files/xx xx jj.tar.gz" ./ 最后同时 在空格前加 斜杠,整个文件目录加引号才行 scp -r root@192.168.0.51:"/home/xxj/Documents/files/xx\ xx\ jj.tar.gz" ./ linux下带空格文件批量cp和scp补充: 背景:主备机同步文件失败,现在需要人工手动的在备机上补齐文件,但是发现文件名竟然有空格 主机的IP:192.168.0.90 主机文件清单名称:src_file.txt,备机文件清单名称:dst_file.txt, 从下面可以知道,主备机的文件路径和文件的名称是不一样的,同步的时候,从src_file.txt copy到dst_file.txt需要一一对应,另备机上的目录并不能保证都存在,所以需要先把备机上的目录结构先创建出来 [root@station90 file]# cat src_file.txt /home/src/10329/g0197/k/19xiazai h264.3gp /home/src/10327/g0194/10ng h264 xiazai.3gp /home/src/10329/g0196/lh/10xiazai h263.3gp /home/src/101117/060/090/1011.3gp /home/src/10520/056/0590/99833/10x_04 0_0_3.3gp [root@station90 file]# cat dst_file.txt /home/dst/1038/g07/k/3/10290upload h264.3gp /home/dst/10327/g04/10ng h264 upload.3gp /home/dst/1038/g06/lhppww/10upload h263.3gp /home/dst/101117/06g090/1011.3gp /home/dst/1052g056/0590/33/10x_04 0_0_3.3gp 从dst_file.txt(备机文件)可以知道,目录的级别不是一样的,也就是说第一行为6级目录,第二行却为4级目录,如何取出目录结构,先创建出目录结构呢?执行如下命令即可: [root@station90 file]# awk -F / {for (i=1;i<NF;i++) {printf $i "/"}printf "\n"} dst_file.txt //注意i<NF,即不需要循环到最后一列,printf $i是不打印回车的,一行循环完毕后,printf "\n"会打印回车,这样的结果刚好是我们需要的 /home/dst/1038/g07/k/3/ /home/dst/10327/g04/ /home/dst/1038/g06/lhppww/ /home/dst/101117/06g090/ /home/dst/1052g056/0590/33/ [root@station90 file]# awk {print $1} dst_file.txt | awk -F / {print substr($0,1,(length($0)-length($NF)))} > /tmp/dst_dir.txt //根据dst_file.txt的特点,先执行awk {print $1} dst_file.txt 以空格作为分隔符,取出第一列,这样取出的就没有空格,$0为文本里面包含的所有内容,再通过截取字符串的方式,substr($0(去除空格的文本本身),1(从第一个字符开始),(length($0)-length($NF))所有字符的长度减去最后一列的字符长度,就等于我们需要的字符长度,也就是从1,我们需要的字符长度,结果就是我们需要的了 [root@station90 file]# cat /tmp/dst_dir.txt /home/dst/1038/g07/k/3/ /home/dst/10327/g04/ /home/dst/1038/g06/lhppww/ /home/dst/101117/06g090/ /home/dst/1052g056/0590/33/ [root@station90 file]# mkdir -p $(cat /tmp/dst_dir.txt) [root@station90 file]# ls -ld $(cat /tmp/dst_dir.txt) /目录结构已经创建出来了 drwxr-xr-x 2 root root 4096 11-10 17:37 /home/dst/101117/06g090/ drwxr-xr-x 2 root root 4096 11-10 17:37 /home/dst/10327/g04/ drwxr-xr-x 2 root root 4096 11-10 17:37 /home/dst/1038/g06/lhppww/ drwxr-xr-x 2 root root 4096 11-10 17:37 /home/dst/1038/g07/k/3/ drwxr-xr-x 2 root root 4096 11-10 17:37 /home/dst/1052g056/0590/33/ part1:单纯的从本机copy到本机的其他目录,会比较简单,如下所示: [root@station90 file]# sed -i -e "s/^/cp \"/g" -e "s/$/\"/g" src_file.txt //在文本中的开头和结尾添加双引号 [root@station90 file]# cat src_file.txt cp "/home/src/10329/g0197/k/19xiazai h264.3gp" cp "/home/src/10327/g0194/10ng h264 xiazai.3gp" cp "/home/src/10329/g0196/lh/10xiazai h263.3gp" cp "/home/src/101117/060/090/1011.3gp" cp "/home/src/10520/056/0590/99833/10x_04 0_0_3.3gp" [root@station90 file]# sed -i -e "s/^/\"/g" -e "s/$/\"/g" dst_file.txt //在文本中的开头和结尾添加双引号 [root@station90 file]# cat dst_file.txt "/home/dst/1038/g07/k/3/10290upload h264.3gp" "/home/dst/10327/g04/10ng h264 upload.3gp" "/home/dst/1038/g06/lhppww/10upload h263.3gp" "/home/dst/101117/06g090/1011.3gp" "/home/dst/1052g056/0590/33/10x_04 0_0_3.3gp" [root@station90 file]#paste -d src_file.txt dst_file.txt > cp.sh //src_file.txt和dst_file.txt文本以空格作为分隔符合成一个文件 [root@station90 file]#cat cp.sh cp "/home/src/10329/g0197/k/19xiazai h264.3gp" "/home/dst/1038/g07/k/3/10290upload h264.3gp" cp "/home/src/10327/g0194/10ng h264 xiazai.3gp" "/home/dst/10327/g04/10ng h264 upload.3gp" cp "/home/src/10329/g0196/lh/10xiazai h263.3gp" "/home/dst/1038/g06/lhppww/10upload h263.3gp" cp "/home/src/101117/060/090/1011.3gp" "/home/dst/101117/06g090/1011.3gp" cp "/home/src/10520/056/0590/99833/10x_04 0_0_3.3gp" "/home/dst/1052g056/0590/33/10x_04 0_0_3.3gp" [root@station90 file]# sed -i "1,1s/^/\#\!\/bin\/bash\n/g" cp.sh //在脚本中添加#!/bin/bash [root@station90 file]# cat cp.sh #!/bin/bash cp "/home/src/10329/g0197/k/19xiazai h264.3gp" "/home/dst/1038/g07/k/3/10290upload h264.3gp" cp "/home/src/10327/g0194/10ng h264 xiazai.3gp" "/home/dst/10327/g04/10ng h264 upload.3gp" cp "/home/src/10329/g0196/lh/10xiazai h263.3gp" "/home/dst/1038/g06/lhppww/10upload h263.3gp" cp "/home/src/101117/060/090/1011.3gp" "/home/dst/101117/06g090/1011.3gp" cp "/home/src/10520/056/0590/99833/10x_04 0_0_3.3gp" "/home/dst/1052g056/0590/33/10x_04 0_0_3.3gp" [root@station90 file]# chmod +x cp.sh [root@station90 file]# ls -l "/home/dst/1038/g07/k/3/10290upload h264.3gp" //执行cp.sh脚本前,文件是不存在的 ls: /home/dst/1038/g07/k/3/10290upload h264.3gp: 没有那个文件或目录 [root@station90 file]# ./cp.sh [root@station90 file]# ls -l "/home/dst/1038/g07/k/3/10290upload h264.3gp" //ok,copy成功 -rw-r--r-- 1 root root 0 11-10 17:44 /home/dst/1038/g07/k/3/10290upload h264.3gp part2 从远成主机scp文件过来,先举例一错误的例子,正确的总是慢慢的总结出来的 执行rm.sh,删除刚才copy过来的文件 [root@station90 file]# cat rm.sh #!/bin/bash rm -f "/home/dst/1038/g07/k/3/10290upload h264.3gp" rm -f "/home/dst/10327/g04/10ng h264 upload.3gp" rm -f "/home/dst/1038/g06/lhppww/10upload h263.3gp" rm -f "/home/dst/101117/06g090/1011.3gp" rm -f "/home/dst/1052g056/0590/33/10x_04 0_0_3.3gp" [root@station90 file]# ./rm.sh [root@station90 file]# sed -i -e "s/^/scp\ root\@192\.168\.0\.90\:\"/g" -e "s/$/\"/g" src_file.txt //在src_file.txt文件的开头和结尾添加双引号,同时添加root@192.168.0.90:,最终如下所示 [root@station90 file]# cat src_file.txt scp root@192.168.0.90:"/home/src/10329/g0197/k/19xiazaih264.3gp" scp root@192.168.0.90:"/home/src/10327/g0194/10ngh264 xiazai.3gp" scp root@192.168.0.90:"/home/src/10329/g0196/lh/10xiazaih263.3gp" scp root@192.168.0.90:"/home/src/101117/060/090/1011.3gp" scp root@192.168.0.90:"/home/src/10520/056/0590/99833/10x_040_0_3.3gp" [root@station90 file]# sed -i -e "s/^/\"/g" -e "s/$/\"/g" dst_file.txt //在文本中的开头和结尾添加双引号 [root@station90 file]# cat dst_file.txt "/home/dst/1038/g07/k/3/10290upload h264.3gp" "/home/dst/10327/g04/10ng h264 upload.3gp" "/home/dst/1038/g06/lhppww/10upload h263.3gp" "/home/dst/101117/06g090/1011.3gp" "/home/dst/1052g056/0590/33/10x_04 0_0_3.3gp" [root@station90 file]# paste -d src_file.txt dst_file.txt > scp.sh //合成shell脚本步骤一 [root@station90 file]# cat scp.sh scp root@192.168.0.90:"/home/src/10329/g0197/k/19xiazaih264.3gp" "/home/dst/1038/g07/k/3/10290upload h264.3gp" scp root@192.168.0.90:"/home/src/10327/g0194/10ngh264 xiazai.3gp" "/home/dst/10327/g04/10ng h264 upload.3gp" scp root@192.168.0.90:"/home/src/10329/g0196/lh/10xiazaih263.3gp" "/home/dst/1038/g06/lhppww/10upload h263.3gp" scp root@192.168.0.90:"/home/src/101117/060/090/1011.3gp" "/home/dst/101117/06g090/1011.3gp" scp root@192.168.0.90:"/home/src/10520/056/0590/99833/10x_040_0_3.3gp" "/home/dst/1052g056/0590/33/10x_04 0_0_3.3gp" [root@station90 file]# sed -i "1,1s/^/\#\!\/bin\/bash\n/g" scp.sh //合成shell脚本步骤二 [root@station90 file]# cat scp.sh //看过去没有问题是吧,借鉴上面的part1部分cp得到scp嘛,其实是有问题的 #!/bin/bash scp root@192.168.0.90:"/home/src/10329/g0197/k/19xiazaih264.3gp" "/home/dst/1038/g07/k/3/10290upload h264.3gp" scp root@192.168.0.90:"/home/src/10327/g0194/10ngh264 xiazai.3gp" "/home/dst/10327/g04/10ng h264 upload.3gp" scp root@192.168.0.90:"/home/src/10329/g0196/lh/10xiazaih263.3gp" "/home/dst/1038/g06/lhppww/10upload h263.3gp" scp root@192.168.0.90:"/home/src/101117/060/090/1011.3gp" "/home/dst/101117/06g090/1011.3gp" scp root@192.168.0.90:"/home/src/10520/056/0590/99833/10x_040_0_3.3gp" "/home/dst/1052g056/0590/33/10x_04 0_0_3.3gp" [root@station90 file]# chmod +x scp.sh [root@station90 file]# ./scp.sh //发现了吧,从远程主机找不到这些文件,只有没有空格的文件名称才可以复制过来 scp: /home/src/10329/g0197/k/19xiazai: No such file or directory scp: h264.3gp: No such file or directory scp: /home/src/10327/g0194/10ng: No such file or directory scp: h264: No such file or directory scp: xiazai.3gp: No such file or directory scp: /home/src/10329/g0196/lh/10xiazai: No such file or directory scp: h263.3gp: No such file or directory 1011.3gp 100% 0 0.0KB/s 00:00 scp: /home/src/10520/056/0590/99833/10x_04: No such file or directory scp: 0_0_3.3gp: No such file or directory 继续错误的里程,想想,肯定是空格没有进行转义,遂src_file.txt文件和src_file.txt文件中的空格都进行转义,于是下面错误的过程来了: [root@station90 file]# cat src_file.txt //原文件内容格式 /home/src/10329/g0197/k/19xiazai h264.3gp /home/src/10327/g0194/10ng h264 xiazai.3gp /home/src/10329/g0196/lh/10xiazai h263.3gp /home/src/101117/060/090/1011.3gp /home/src/10520/056/0590/99833/10x_04 0_0_3.3gp [root@station90 file]# sed -i -e "s/^/\"/g" -e "s/$/\"/g" src_file.txt //文件的开头和结尾加上双引号 [root@station90 file]# cat src_file.txt "/home/src/10329/g0197/k/19xiazai h264.3gp" "/home/src/10327/g0194/10ng h264 xiazai.3gp" "/home/src/10329/g0196/lh/10xiazai h263.3gp" "/home/src/101117/060/090/1011.3gp" "/home/src/10520/056/0590/99833/10x_04 0_0_3.3gp" [root@station90 file]# sed -i "s/ /\\\ /g" src_file.txt //对空格进行转义 [root@station90 file]# cat src_file.txt "/home/src/10329/g0197/k/19xiazai\ h264.3gp" "/home/src/10327/g0194/10ng\ h264\ xiazai.3gp" "/home/src/10329/g0196/lh/10xiazai\ h263.3gp" "/home/src/101117/060/090/1011.3gp" "/home/src/10520/056/0590/99833/10x_04\ 0_0_3.3gp" [root@station90 file]# cat dst_file.txt ///原文件内容格式 /home/dst/1038/g07/k/3/10290upload h264.3gp /home/dst/10327/g04/10ng h264 upload.3gp /home/dst/1038/g06/lhppww/10upload h263.3gp /home/dst/101117/06g090/1011.3gp /home/dst/1052g056/0590/33/10x_04 0_0_3.3gp [root@station90 file]# sed -i -e "s/^/\"/g" -e "s/$/\"/g" -e "s/ /\\\ /g" dst_file.txt //在文件开头和结尾加双引号和空格进行转义 [root@station90 file]# cat dst_file.txt "/home/dst/1038/g07/k/3/10290upload\ h264.3gp" "/home/dst/10327/g04/10ng\ h264\ upload.3gp" "/home/dst/1038/g06/lhppww/10upload\ h263.3gp" "/home/dst/101117/06g090/1011.3gp" "/home/dst/1052g056/0590/33/10x_04\ 0_0_3.3gp" [root@station90 file]# sed -i "s/^/scp\ root\@192\.168\.0\.90\:/g" src_file.txt //对远程文件(192.168.0.90)src_file.txt加上scp root@192.168.0.90: [root@station90 file]# cat src_file.txt scp root@192.168.0.90:"/home/src/10329/g0197/k/19xiazai\h264.3gp" scp root@192.168.0.90:"/home/src/10327/g0194/10ng\h264\ xiazai.3gp" scp root@192.168.0.90:"/home/src/10329/g0196/lh/10xiazai\h263.3gp" scp root@192.168.0.90:"/home/src/101117/060/090/1011.3gp" scp root@192.168.0.90:"/home/src/10520/056/0590/99833/10x_04\0_0_3.3gp" [root@station90 file]# sed -i "1,1s/^/\#\!\/bin\/bash\n/g" scp.sh //对文件加上#!/bin/bash [root@station90 file]# cat scp.sh #!/bin/bash scp root@192.168.0.90:"/home/src/10329/g0197/k/19xiazai\h264.3gp" "/home/dst/1038/g07/k/3/10290upload\ h264.3gp" scp root@192.168.0.90:"/home/src/10327/g0194/10ng\h264\ xiazai.3gp" "/home/dst/10327/g04/10ng\ h264\ upload.3gp" scp root@192.168.0.90:"/home/src/10329/g0196/lh/10xiazai\h263.3gp" "/home/dst/1038/g06/lhppww/10upload\ h263.3gp" scp root@192.168.0.90:"/home/src/101117/060/090/1011.3gp" "/home/dst/101117/06g090/1011.3gp" scp root@192.168.0.90:"/home/src/10520/056/0590/99833/10x_04\0_0_3.3gp" "/home/dst/1052g056/0590/33/10x_04\ 0_0_3.3gp" [root@station90 file]# chmod +x scp.sh [root@station90 file]# ./scp.sh //执行脚本,看过去是都成功了吧,但是…… 19xiazai h264.3gp 100% 0 0.0KB/s 00:00 10ng h264 xiazai.3gp 100% 0 0.0KB/s 00:00 10xiazai h263.3gp 100% 0 0.0KB/s 00:00 1011.3gp 100% 0 0.0KB/s 00:00 10x_04 0_0_3.3gp 100% 0 0.0KB/s 00:00 [root@station90 file]# [root@station90 file]# cd /home/dst/1038/g07/k/3/ [root@station90 3]# ls //看到没有,复制到本地的文件有了\ 10290upload\ h264.3gp [root@station90 dst]# pwd /home/dst [root@station90 dst]# find ./ -type f ./10327/g04/10ng\ h264\ upload.3gp ./1038/g07/k/3/10290upload\ h264.3gp ./1038/g06/lhppww/10upload\ h263.3gp ./1052g056/0590/33/10x_04\ 0_0_3.3gp [root@station90 dst]# find ./ -type f -exec rm {} \; //删除复制过来错误的文件 [root@station90 dst]# find ./ -type f [root@station90 file]# cat src_file.txt //下面的步骤是正确的,其实只需要对src_file.txt文件的空格加上\进行转义,对本地 dst_file.txt文件只需要在文件的开头结尾加上双引号,就好了 /home/src/10329/g0197/k/19xiazai h264.3gp /home/src/10327/g0194/10ng h264 xiazai.3gp /home/src/10329/g0196/lh/10xiazai h263.3gp /home/src/101117/060/090/1011.3gp /home/src/10520/056/0590/99833/10x_04 0_0_3.3gp [root@station90 file]# sed -i "s/ /\\\ /g" src_file.txt [root@station90 file]# cat src_file.txt /home/src/10329/g0197/k/19xiazai\ h264.3gp /home/src/10327/g0194/10ng\ h264\ xiazai.3gp /home/src/10329/g0196/lh/10xiazai\ h263.3gp /home/src/101117/060/090/1011.3gp /home/src/10520/056/0590/99833/10x_04\ 0_0_3.3gp [root@station90 file]# sed -i -e "s/^/scp\ root\@192\.168\.0\.90\:\"/g" -e "s/$/\"/g" src_file.txt [root@station90 file]# cat src_file.txt scp root@192.168.0.90:"/home/src/10329/g0197/k/19xiazai\h264.3gp" scp root@192.168.0.90:"/home/src/10327/g0194/10ng\h264\ xiazai.3gp" scp root@192.168.0.90:"/home/src/10329/g0196/lh/10xiazai\h263.3gp" scp root@192.168.0.90:"/home/src/101117/060/090/1011.3gp" scp root@192.168.0.90:"/home/src/10520/056/0590/99833/10x_04\0_0_3.3gp" [root@station90 file]# cat dst_file.txt /home/dst/1038/g07/k/3/10290upload h264.3gp /home/dst/10327/g04/10ng h264 upload.3gp /home/dst/1038/g06/lhppww/10upload h263.3gp /home/dst/101117/06g090/1011.3gp /home/dst/1052g056/0590/33/10x_04 0_0_3.3gp [root@station90 file]# sed -i -e "s/^/\"/g" -e "s/$/\"/g" dst_file.txt [root@station90 file]# cat dst_file.txt "/home/dst/1038/g07/k/3/10290upload h264.3gp" "/home/dst/10327/g04/10ng h264 upload.3gp" "/home/dst/1038/g06/lhppww/10upload h263.3gp" "/home/dst/101117/06g090/1011.3gp" "/home/dst/1052g056/0590/33/10x_04 0_0_3.3gp" [root@station90 file]# sed -i "1,1s/^/\#\!\/bin\/bash\n/g" scp.sh [root@station90 file]# cat scp.sh //最终的脚本样本 #!/bin/bash scp root@192.168.0.90:"/home/src/10329/g0197/k/19xiazai\h264.3gp" "/home/dst/1038/g07/k/3/10290upload h264.3gp" scp root@192.168.0.90:"/home/src/10327/g0194/10ng\h264\ xiazai.3gp" "/home/dst/10327/g04/10ng h264 upload.3gp" scp root@192.168.0.90:"/home/src/10329/g0196/lh/10xiazai\h263.3gp" "/home/dst/1038/g06/lhppww/10upload h263.3gp" scp root@192.168.0.90:"/home/src/101117/060/090/1011.3gp" "/home/dst/101117/06g090/1011.3gp" scp root@192.168.0.90:"/home/src/10520/056/0590/99833/10x_04\0_0_3.3gp" "/home/dst/1052g056/0590/33/10x_04 0_0_3.3gp" [root@station90 file]# chmod +x scp.sh [root@station90 file]# ./scp.sh 19xiazai h264.3gp 100% 0 0.0KB/s 00:00 10ng h264 xiazai.3gp 100% 0 0.0KB/s 00:00 10xiazai h263.3gp 100% 0 0.0KB/s 00:00 1011.3gp 100% 0 0.0KB/s 00:00 10x_04 0_0_3.3gp 100% 0 0.0KB/s 00:00 [root@station90 file]# cd /home/dst [root@station90 dst]# find ./ -type f //现在OK了,linux水平不行,被折磨了2天呐 ./10327/g04/10ng h264 upload.3gp ./101117/06g090/1011.3gp ./1038/g07/k/3/10290upload h264.3gp ./1038/g06/lhppww/10upload h263.3gp ./1052g056/0590/33/10x_04 0_0_3.3gp |