xmllint命令处理xml与html

2014-02-26

xmllint是一个很方便的处理及验证xml、处理html的工具，linux下只要安装libxml2就可以使用这个命令。首先看下其结合–html 、–xpath参数处理html时的例子： 1curl http://www.123cha.com/ip/?q=8.8.8.8 2>/dev/null | xmllint --html --xpath "//ul[@id='csstb']" - 2>/dev/null | sed -e 's/<[^>]*>//g' 上例中主要是通过在123cha上查询的IP地……

shell字符串操作小结

2013-11-12

| shell脚本学习

在写shell脚本时，经常会涉及到字符串相关操作。有很多命令语句，如：awk,sed都可以做字符串各种操作。其实shell内置一系列操作符号，可以达到类似效果，大家知道，使用内部操作符会省略启动外部程序的等待时间，因此速度会非常的快。一、判断读取字符串值表达式含义 ${var} 变量var的值……

${string::N}和${string:N}字符提取

2013-10-20

| shell脚本学习

有文件file，内容为1234567898453613025（n个数字），编写程序实现每隔4个数字就换行。脚本编写如下： ${string::N}提取前N个字符，${string:N}提取N个之后的字符。 1# cat ./test.sh 2#!/bin/bash 3test=1234567898453613025 4num_test=`echo ${#test}` 5num=$[num_test/4 + 1 ] 6for i in `seq $num` 7do 8 echo -ne "${test::4}" 9 test=`echo ${test:4}` 10 echo 11done 执行后的结果是： 1# ./test.sh 21234 35678……

shell贪婪匹配

2013-10-07

| shell脚本学习

有时候对一段文字只提取其中的一部分，可以借助shell的贪婪匹配实现，%是从右向左匹配，#则是从左向右匹配，如下实例： 1[root@www ~]# qq=www.qq.com 2[root@www ~]# echo ${qq#*.} //排除第一个 3qq.com 4[root@www ~]# echo ${qq##*.} //排除前两个 5com 6[root@www ~]# echo ${qq%.*} //排除后一个 7www.qq 8[root@www ~]# echo ${qq%%.*} //排除后两个 9www 10[root@www ~]# 上例中是以点为分割的，不是以“qq”做为分割。下面结合实……

windows下rsysnc提示password file must be owned by root when running as root的解决办法

2013-05-16

| shell脚本学习 windows

这算是个老问题了，每次在windows主机上通过cwrsync向服务端同步数据的时候都会遇到，这次总结记录下吧。错误代码为： 1password file must be owned by root when running as root 在linux上设置rsync的时候，需要将passwordfile设置为600权限。所以在windows上我们也可以用其自带的chmo……

vim 查找时忽略大小写

2013-03-12

| perl/php/python/gawk/sed shell脚本学习

默认情况下 vim 的查找都是区分大小写的, 这种查找方式有利于准确快速的定位到目标, 但是有时候vim的使用者也不一定能够确认那个单词的大小写情况, 这种情况下就要用到大小写忽略了. 实现这个操作有两种方式. 方式1 指令设定: 1:set ic(ignorecase 的缩写) 忽略大小写 2:set noic(noignorecase 的缩写) 不忽略大小写输入了上述指令, 当每次的……

linux下删除空行的几种方法

2013-01-21

| Linux/unix/mac shell脚本学习

在查看linux下的配置文件时，为了便于一目了然的查看，经常会删除空行和#头的行。而linux在删除空行的方法很多，grep、sed、awk、tr等工具都能实现。现总结如下： 1、grep 1grep -v '^$' file 2、sed 1sed '/^$/d' file 或 sed -n '/./p' file 3、awk 1awk '/./ {print}' file 或 awk '{if($0!=" ") print}' 4、tr 1tr -s "n" 除此之外，vim也……