在Shell命令行处理JSON数据的方法

2016年08月01日 22 阅读

因为最近要处理一些 JSON 数据格式，所以在经过一番搜索后 最终找到了 jq 这个很棒的工具。jq 允许你直接在命令行下对 JSON 进行操作，包括分片、过滤、转换等等。让我们通过几个例子来说明 jq 的功能：一、输出格式化，漂亮的打印效果如果我们用文本编辑器打开 JSON，有时候可能看起来会一团糟，但是通过 jq 的 .（点）过滤器就可以立马让 JSON 的格式规整起来。1.用文本编辑器打开后的样子2.用 jq 显示的结果复制代码 代码如下:% jq ...

MAC中用Shell脚本批量裁剪各种尺寸的App图标

2016年08月01日 13 阅读

在APP上架前，一次一次自己剪裁上架需要的各个尺寸的Icon不是程序员该干的事，使用Mac中自带的sips工具可以解决这个需求。关于sips，在终端中直接执行可以出现以下信息：复制代码 代码如下:sips 10.4.4 - scriptable image processing system.This tool is used to query or modify raster image files and ColorSync ICC profiles....

Shell脚本判断IP地址是否合法的方法

2016年08月01日 11 阅读

使用shell校验IP地址合法性使用方法：复制代码 代码如下:[root@yang python]# bash check_ip.sh IP地址执行结果：返回值0校验合法，非0不合法。shell代码：复制代码 代码如下:[root@yang python]# vi check_ip.sh #！/usr/bin/shCheckIPAddr（）{echo $1|grep "^[0-9]{1,3}.（[0-9]{1,3}.）{2}[0-9]{1,3}$" >...

Shell脚本监控服务器在线状态和邮件报警的方法

2016年08月01日 13 阅读

对于服务器来说在线率很重要，出现问题要能及时解决，但系统管理员不能一直守在电脑旁边，通过脚本监控网站出现问题及时通过mail通知管理员，如果是139邮箱还可免费手机短信通知。注：通过系统直接发送mail容易被拦截，可使用mail连接第三方smtp发送邮件。shell脚本实现代码：复制代码 代码如下:#！/bin/bash#set -xwhile truedolist=（www.jb51.net s.jb51.net）mail=jmj@jb51.netdat...

25个好用的Shell脚本常用命令分享

2016年08月01日 10 阅读

1.列出所有目录使用量，并按大小排序。复制代码 代码如下:ls|xargs du -h|sort -rn #不递归下级目录使用du -sh2.查看文件排除以#开关和空白行，适合查看配置文件。复制代码 代码如下:egrep -v "^#|^$" filenamesed "/#.*$/d; /^ *$/d"3.删除空格和空行。复制代码 代码如下:sed "/^$/d" filename #删除空行sed "s/ //g" filenamesed "s/[[:s...

svn服务器启动和svn服务器重启、停止等操作脚本分享

2016年08月01日 13 阅读

复制代码 代码如下:#！/bin/bashcase "$1" instart） svnserve -d -r /svndata svnport=`netstat -natp | grep svnserve | awk -F: "{print $4}" | awk "NR==1"` if [ $svnport -eq 3690 ] then echo "SVN Server Already Runnning. Port:3690" else echo "SV...

定时导出mysql本地数据替换远程数据库数据脚本分享

2016年08月01日 19 阅读

复制代码 代码如下:需求在每天的5点将192.168.3.5上ser_a库中的tb_a表导入到192.168.3.6上的ser_b库中，表名还叫tb_a服务端脚本/usr/shell_clubs/auto_sql/server.sh#！/bin/sh#code by scpman/usr/bin/find /usr/shell_clubs/auto_sql/ -name "*.sql" -mtime +3|xargs rm #del old sql#get...

使用shell检查并修复mysql数据库表的脚本

2016年08月01日 15 阅读

复制代码 代码如下:#！/bin/sh#code by scpman#功能:检查并修复mysql数据库表#将此脚本加到定时中，脚本执行时，等会读库,列出要修复的所有表，然后计时，开始修复#修复过程中将损坏的表记录下来，修复完成后，将损坏的表，发邮件通知。fix_logs="/tmp/fix.log"user=""pass=""check_fix（）{dblist=`/usr/bin/find /usr/dlm_db/mysql/ -type d | gre...

shell使用mysqld_multi自动做多实例从库脚本

2016年08月01日 13 阅读

复制代码 代码如下:# cat doallslave.sh#！/bin/sh#code by scpman#mail:scpman@live.com#blog:http://www.scpman.com#name:"doallslave.sh"helpinfo（）{echo -e " help 查看帮助信息"echo -e " 自动做allslave从库脚本使用帮助"echo -e " slavename 只能是xxx_xxx这种命令例如:zq201...

shell对比文件内容脚本分享

2016年08月01日 11 阅读

复制代码 代码如下:#！/bin/shfunction _diffab（）{x=0for i in `cat $1`;do for j in `cat $2`;do if [ $i == $j ];then x=1 break; fi done if [ $x -ne 1 ];then echo $i fi x=0done}if [ "$1" == "" ] || [ "$2" == "" ];thenecho "use like this: $0 fil...

shell脚本操作oracle删除表空间、创建表空间、删除用户

2016年08月01日 19 阅读

oracle下表空间的导出，用户的删除，表空间删除，用户新建，表空间新建，数据导入的shell使用非oracle用户执行该脚本参数说名$1：base表空间的用户名$2：同步表空间的用户名使用场景测试用，base表空间用于升级建立一些固化数据。同步表空间用于测试用，每次去和base表空间拉平数据复制代码 代码如下:#！/bin/shoraclehome=$ORACLE_HOMEecho $oraclehomelocaldir="/oracle/data"ec...

shell替换文件中的文件路径脚本分享

2016年08月01日 13 阅读

用法参数1、写有需要替换路径记录的文本，格式：老路径 老名称 新路径 新名称参数2、需要替换的文件的目录参数3、需要替换的文件的类型复制代码 代码如下:#！/bin/shfunction _replace（）{basepath=$0> $basepath.logi=1while read linedo echo "start================================================================...

shell中删除文件中重复行的方法

2016年08月01日 10 阅读

Linux下文本处理工具很丰富很强大，例如这样一个文件：复制代码 代码如下:cat log www.jb51.net 192.168.1.1www.jb51.net 192.168.1.1www.jb51.net 192.168.1.2ffffffffffffffffffffffffffffffffffffeeeeeeeeeeeeeeeeeeeefffffffffffffffffffeeeeeeeeeeeeeeeeeeeeeeeeeeeeeeeeeeeee...

centos中mysql备份数据库脚本分享

2016年08月01日 19 阅读

复制代码 代码如下:#！/bin/bash#backup mysql dataDBDIR=/data/mysqlBACKDIR=/data/bak/mysqlTIME=`date -d "today" +%F`DB=$（ls -p $DBDIR | grep / |tr -d / | grep -Ev "information_schema|performance_schema|mysql|test"）/etc/init.d/mysqld stopif [...

shell脚本转发80端口数据包给Node.js服务器

2016年08月01日 20 阅读

注意：千万不要图省事直接使用ROOT用户运行Node.js服务！这将带来无法预计的安全问题！但是使用80端口作为HTTP默认端口这一习惯是从MS时代就延续至今的，怎么办呢？网上有人滔滔不绝地说用NginX做反向代理之类的，其实我觉得没必要这么夸张，只需要使用ROOT用户做一个普通端口与80端口的数据转发就好了，使用iptables语句如下：复制代码 代码如下:iptables -t nat -A PREROUTING -p tcp --dport 80 -...

获取站点的各类响应时间（dns解析时间,响应时间,传输时间）

2016年08月01日 14 阅读

有时候为了测试网络情况，需要返回每个阶段的耗时时间，比如DNS解析耗时，建立连接所消耗的时间，从建立连接到准备传输所使用的时间，从建立连接到传输开始所使用的时间，整个过程耗时，下载的数据量，下载速度，上传数据量，上传速度等等。下面的脚本获取以上信息：CURL的资料参见： http://curl.haxx.se/libcurl/c/curl_easy_getinfo.html复制代码 代码如下:################################...

vtune自动安装脚本分享

2016年08月01日 12 阅读

复制代码 代码如下:#！/bin/bash#！/usr/bin/expect -f#！/usr/bin/env bashyum install -y expect wgetcd /rootwget http://172.16.92.99/share/tar/vtune_amplifier_xe_2013_update15.tar.gzwget http://172.16.92.99/share/tar/EVAL_L_VT__VGXB-RDCJPN8X.li...

shell获取命令行参数示例分享

2016年08月01日 10 阅读

复制代码 代码如下:#！ /bin/bashwhile getopts a:bc optdocase $opt ina）echo "aaa"echo $OPTARGb）echo "bb"c）echo "ccc"*）echo "error"esacdone...

把mysql查询结果保存到文件的shell脚本

2016年08月01日 13 阅读

该脚本是先删除已经存在的文件，然后后台执行SQL语句将其执行结果以一定的格式写入文件复制代码 代码如下:#！/bin/bashif [ -f "/var/lib/mysql/hell.txt" ]; thenrm -f /var/lib/mysql/hell.txtecho "delete /var/lib/mysql/hell.txt" >> hell.txtfimysql -uroot -plab <<EOFuse home;s...

利用管道实现sudo命令免输入密码的方法

2016年08月01日 10 阅读

笔者由于学习php，在linux下边也装了一个xampp的集成环境包。但是每次启动的时候都要进入终端，然后依次点开/opt/lampp/，然后sudo执行manager-linux-x64.run操作，才能打开xampp的图形化控制台，显得非常不方便。于是我便写了一个脚本，意图一键即可打开这个控制台程序。最初是这样的：复制代码 代码如下:#！/bin/bash#执行xampp控制台cd /opt/lampp/sudo ./manager-linux-x64...