windows上传linux脚本，执行报错：需要去除^M

绝地灬酷狼 2022-04-24 01:44 362阅读 0赞

注： Windows系统下输入的换行符在UNIX/Linux下不会显示为“换行”，而是显示为 ^M 这个符号 ( Ctrl +v, Ctrl+m 或者Ctrl +v +m )

*  去除^M 这个符号 ： `sed -i 's@\r@@g' a.sh`

### 文章目录 ###

*  1, windows上传shell文件：脚本不能执行
 *  2, 粘贴windows写的shell脚本：执行报错

# 1, windows上传shell文件：脚本不能执行 #

原因：linux文件需要无bom格式，必须去除^M元字符号  
(在windows下编辑一个脚本文件，上传到linux上，出现^M字符导致shell命令不能正常执行)  
解决办法：

*  1， sed -i s/Ctrl + v + m//g 文件名
 *  2， vi 文件名==》 :set ff=unix , 保存退出
 *  3， 去除文件的bom头： sed -i -e ‘1s/^\\xEF\\xBB\\xBF//’ 文件名

数据源：windows下的文件, utf8 编码  
![在这里插入图片描述][20190411155308889.png]  
目标端：上传到centos服务器，执行脚本  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2V5ZW9mZWFnbGU_size_16_color_FFFFFF_t_70]

错误排查：脚本是没有写错的，直接手敲命令到控制台，结果正常，如下图  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2V5ZW9mZWFnbGU_size_16_color_FFFFFF_t_70 1]

最终解决：

[hdfs@s101 /]$ cat test_pom.txt  -v
    ls / -a^M
    ^M
    
    sqoop list-tables \^M
    --connect jdbc:mysql://localhost:3306/scm \^M
    --username root \^M
    --password 123456 \^M
    --driver com.mysql.jdbc.Driver^M

发现，命令的后面多了个^M == > Ctl + v + m  
于是想到消除该字符：

[hdfs@s101 ~]$ sed -i 's/^M//' test_pom.txt  
    [hdfs@s101 ~]$ ls
    derby.log  metastore_db  test_pom.txt
    [hdfs@s101 ~]$ cat test_pom.txt -v
    ls / -a
    
    sqoop list-tables \
    --connect jdbc:mysql://localhost:3306/scm \
    --username root \
    --password 123456 \
    --driver com.mysql.jdbc.Driver
    
    [hdfs@s101 ~]$ ./test_pom.txt
    .    .autorelabel  dev  home   lost+found  my-cdh-rpm.tar  root     soft  test_pom.txt  var
    ..    bin           dfs  lib    media       opt             sbin     srv   tmp           yarn
    .autofsck  boot          etc  lib64  mnt         proc            selinux  sys   usr
    
    Warning: /opt/cloudera/parcels/CDH-5.12.0-1.cdh5.12.0.p0.29/bin/../lib/sqoop/../accumulo does not exist! Accumulo imports will fail.
    Please set $ACCUMULO_HOME to the root of your Accumulo installation.
    19/04/11 16:05:05 INFO sqoop.Sqoop: Running Sqoop version: 1.4.6-cdh5.12.0
    19/04/11 16:05:05 WARN tool.BaseSqoopTool: Setting your password on the command-line is insecure. Consider using -P instead.
    19/04/11 16:05:05 WARN sqoop.ConnFactory: Parameter --driver is set to an explicit driver however appropriate connection manager is not being set (via --connection-manager). Sqoop is going to fall back to org.apache.sqoop.manager.GenericJdbcManager. Please specify explicitly which connection manager should be used next time.
    19/04/11 16:05:05 INFO manager.SqlManager: Using default fetchSize of 1000
    AUDITS
    CLIENT_CONFIGS
    CLIENT_CONFIGS_TO_HOSTS
    CLUSTERS
    CLUSTERS_AUD

# 2, 粘贴windows写的shell脚本：执行报错 #

#把命令固化为文件，确认语法没问题
    [root@jenkins ~]# cat a.sh  -n
         1	docker run  -d  --name mysql \
         2	-p 3306:3306 　\
         3	-e MYSQL_ROOT_PASSWORD=123456  \
         4	--restart=always \ 
         5	mysql:5.5 --character-set-server=utf8
         
    [root@jenkins ~]# ./a.sh
    docker: invalid reference format.
    See 'docker run --help'.
    ./b.txt:行5: mysql:5.5: 未找到命令
    
    #查看文件的元字符：　发现多了M-cM-^@M-^@，并且倒数第5行\ 后面还有一个空格
    [root@jenkins ~]# cat -A b.txt 
    docker run  -d  --name mysql \$
    -p 3306:3306 M-cM-^@M-^@\$
    -e MYSQL_ROOT_PASSWORD=123456  \$
    --restart=always \ $
    mysql:5.5 --character-set-server=utf8$
    
    #于是删除　windows下形成的缩进和空格, 就可以正常执行了
    [root@jenkins ~]# cat b.txt -A
    docker run  -d  --name mysql\$
    -p 3306:3306\$
    -e MYSQL_ROOT_PASSWORD=123456\$
    --restart=always\$
    mysql:5.5 --character-set-server=utf8$

[20190411155308889.png]: /images/20220221/f590714e616f452a960f9070b82f201f.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2V5ZW9mZWFnbGU_size_16_color_FFFFFF_t_70]: /images/20220221/3fd3c9885b6f4ed792b1c1b3d1ab58d4.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2V5ZW9mZWFnbGU_size_16_color_FFFFFF_t_70 1]: /images/20220221/fa63967382234d39a86c61a4ba67c433.png