skypaladin 发表于 2018-8-27 08:32:22

Shell 相关技巧的总结应用(1)

  1、以指定用户的身份运行命令
  runuser - work -c "cd /home/work/uc/bin&& sh start.sh"
  runuser - push -c "cd /home/push/mucs/bin&& sh start.sh"
  或者:
  daemon --user mongod "mongod --config conf/mongod.conf"
  daemon 是一个函数名,在使用前需要 source /etc/rc.d/init.d/functions
  2、关于rsync数据同步的相关应用:
  同步公司UC数据
  rsync -avzptogl --progress uc --exclude "uc/logs"zayhu05-mb:/home/work/
  同步mucs数据
  rsync -avzpogtl --progress mucs --exclude "mucs/logs" --exclude "mucs/saved" --exclude "mucs/ttscache"mucs06-fk:/home/push
  更换磁盘时 本地同步
  rsync -avztopgl --progress /data/    /data03/
  说明:如果没有-l参数,将不会同步soft link ;--exclude 可以排除一些不希望同步的子目录
  3、防御方法新的挑战应答极限***:
  采用sysctl将挑战应答极限值提高到较大范围,使得***者不能合理地达到它,因此不能推断出客户服务器连接的任何附加数据,以此达到防御目的。
  1)设置 /etc/sysctl.conf 中的net.ipv4.tcp_challenge_ack_limit 到一个较大的值(如999999999):
  net.ipv4.tcp_challenge_ack_limit = 999999999
  2)加载设置:
  sysctl -p
  4、在umount 一块磁盘时,系统总是提示busy,排错如下:
  # lsof +D /data2/

  COMMANDPID USER   FD   TYPE DEVICE>  bash    6646 pushcwd    DIR 202,80   4096 3145731 /data2/mucs/logs
  # ps -ef | grep 6646
  root      586615670 14:56 pts/1    00:00:00 grep --color=auto 6646
  push      664666450 Nov23 pts/0    00:00:00 -bash
  # kill 6646
  # 然后再umount , 卸载成功
  补充:如果/data2中包含swap分区的扩展文件,然后在没有swapoff的情况下,直接将文件move到其它磁盘,然后再查看/data2时系统会提示busy
  
  5、统计公司应用 错误日志的分布比例:
  $grep -i error mucs.err.log.2016-12-09 | awk -F'[\\[\\]]' '{state[$4]+=1;line+=1}END{for(i in state)printf ("%-35s%10d\t%-8f%\n",i,state,state*100/line)}'

  注意:awk 在定义分隔符时可以定义多个,例如:df -h | awk -F"[ %]" '/data/{if($(NF-2)>50)print $0}'就是以空格或百分号为分隔符;但如果分隔符需要定义成中括号时,就必须使用转义符。awk 转义中括号时需要使用 '\\' 。
  6、从/var/log/nginx/error.log文件中过滤近十分钟的error日志:
  # tail -c 10m/var/log/nginx/error.log | grep -a "error" | awk -F '[''BEGIN{"date +%s" | getline nowTS}{"date -d \""$1"\" +%s" | getline ts; if((nowTS - ts) < 600) print $0 }'

  说明:首先从日志中取出最后10M的日志,然后过滤带有"error"的行;然后取当前时间戳,用getline将当前时候戳放入newTS变量;然后使用 date -d 将每行日志中的固定时间 转换成%s (时间戳)格式,并放入变量ts中;最后判断当前时间戳减去日志时间戳是否大于600s,并输出最终结果。
  7、Shell函数返回值常用的两种方式:return,echo
  1) return 语句
  shell函数的返回值,可以和其他语言的返回值一样,通过return语句返回
  注意:return只能用来返回整数值,且和c的区别是0返回为正确,其他的值为错误。
  2)echo 返回值
  其实在shell中,函数的返回值有一个非常安全的返回方式,即通过输出到标准输出返回。因为子进程会继承父进程的标准输出,因此,子进程的输出也就直接反应到父进程。一定要注意,不要向标准输出传送一些不是结果的信息(也就是说,不要随便echo一些不需要的信息),比如调试信息 (这些调度信息可以重定向到一个文件中解决),所以在使用类似grep 的命令时 要记得加上 >/dev/null 2>&1 来接收这些输出信息,避免这些命令的输出
  8、公司升级jdk总结
  # tar xfz jdk-9-ea+146_linux-x64_bin.tar.gz
  # ls
  jdk-9   jdk-9-ea+146_linux-x64_bin.tar.gz
  # cp -r jdk-9 /usr/java/
  # cd /usr/java/
  # ll
  total 16
  lrwxrwxrwx 1 root root   16 Jan 192016 default -> /usr/java/latest
  drwxr-xr-x 8 root root 4096 Jan 192016 jdk1.7.0_80
  drwxr-xr-x 9 root root 4096 Nov8 13:53 jdk1.8.0_112
  drwxr-xr-x 9 root root 4096 Nov7 16:48 jdk1.8.0_77
  drwxr-xr-x 8 root root 4096 Dec8 12:10 jdk-9
  lrwxrwxrwx 1 root root   22 Nov8 13:53 latest -> /usr/java/jdk1.8.0_112
  # rm latest -f
  # ln -s /usr/java/jdk-9 latest
  # ll
  total 16
  lrwxrwxrwx 1 root root   16 Jan 192016 default -> /usr/java/latest
  drwxr-xr-x 8 root root 4096 Jan 192016 jdk1.7.0_80
  drwxr-xr-x 9 root root 4096 Nov8 13:53 jdk1.8.0_112
  drwxr-xr-x 9 root root 4096 Nov7 16:48 jdk1.8.0_77
  drwxr-xr-x 8 root root 4096 Dec8 12:10 jdk-9
  lrwxrwxrwx 1 root root   15 Dec8 12:10 latest -> /usr/java/jdk-9
  # java -version
  java version "9-ea"
  Java(TM) SE Runtime Environment (build 9-ea+146)
  Java HotSpot(TM) 64-Bit Server VM (build 9-ea+146, mixed mode)
  # 如果此时查看到的当前版本不正确,需要使用alternatives设置当前版本指向latest
  # alternatives --configjava
  There are 4 programs which provide 'java'.
  Selection    Command
  -----------------------------------------------
  1         /usr/lib/jvm/jre-1.7.0-openjdk.x86_64/bin/java
  *2         /usr/java/jdk1.8.0_91/jre/bin/java
  + 3         /usr/java/latest/bin/java
  4         /usr/java/jdk-9/bin/java
  Enter to keep the current selection[+], or type selection number: 3
  #
  注意:在解压 jdk-9-ea+146_linux-x64_bin.tar.gz 文件时尽量避免 使用-C参数直接解压到/usr/java目录中,也尽量避免把解压后的 jdk-9 目录直接使用mv 命令移动到/usr/java 目录,以上两种操作方法会导致 /usr/java/jdk-9/ 目录下内容owner和group的异常,如下图所示:

  9、关于awk 引用shell 变量的应用
  关于awk 调用shell变量的方法很多,个人习惯使用-v选项,如下所示:
  # df -h | awk -v threshold=$threshold -F"[ %]" '/data/{if($(NF-2)>threshold)print $0}'

  
  10、关于php 的缓存技术
  早期的php需要借助eAccelerate或Xcache相关软件实现opcode缓存,从而提高速度;针对PHP5.5等高级版本,编译时需要加上--enable-opcache参数,PHP就会自带opcode 缓存功能。相关配置如下:
  # vim /usr/local/php-5.5.20/php.ini
  opcache.enable=1
  zend_extension=/usr/local/php-5.5.20/lib/php/extensions/no-debug-non-zts-20121212/opcache.so
  opcache.memory_consumption=128
  opcache.interned_strings_buffer=8
  opcache.max_accelerated_files=4000
  opcache.revalidate_freq=60
  opcache.fast_shutdown=1
  opcache.enable_cli=1
  # service php-fpm restart
  11、磁盘空间未释放
  近期nginx03-fk总是提示磁盘已满,但已经把相关数据及log清除,系统还是提示磁盘已满。仔细查看发现删除文件后磁盘空间并未释放。解决方法:重启相关app ,例 servicenginx restart

页: [1]
查看完整版本: Shell 相关技巧的总结应用(1)