今天为了做那个验证百度站长平台抓取诊断工具能否收录二级URL的SEO实验,我批量搞了一批页面,大概有200个左右,然而在源文件里,每个html文件顶部都有一句无用的代码,又不能用正则表达式给批量删除掉...
shell分析日志教程1:快速批量提取404错误页面URL
2014年6月21日补充 刚在文章留言里看到有朋友指出,下面提到的这些,只能在windows系统实现,用linux系统的朋友可能没这么复杂了,因为linux直接内置这些命令的,根本不需要这个cygwi...
网站竞争对手分析教程(1):用shell快速挖掘同行网站
我们在做SEO的时候免不了要进行一些分析竞争对手网站的工作,通常做法是搜索一些核心关键词,通过这些核心关键词来判断哪些网站具体有很强的竞争力,以及跟他相比,我们网站的优势和劣势在哪。 这是一个不错的思...
shell分析日志常命令快速入门
学会用shell分析日志只要一上午!!! 很多地方分享了日志分析的shell脚本,但是基本没说每个命令符的具体含义,学习成本还是很高,在这里总结下,方便大家快速入门。 1、在W...
夜息:Shell学习笔记(长期更新)
其实已经积攒了不少心得,之前都没记下来。现在打算慢慢更新 获取每个IP访问量,并且排序 老的做法 cat log | awk ‘{print $1}’ | sort | uniq -c | sort ...
夜息:Shell学习笔记(长期更新)
其实已经积攒了不少心得,之前都没记下来。现在打算慢慢更新 获取每个IP访问量,并且排序 老的做法 cat log | awk ‘{print $1}’ | sort | uniq -c | sort ...
用shell找出两个文本文件的不同的行
亲自实验过的方法如下: 第一种:comm命令法 命令如下:comm -3 file1 file2 有一个问题就是,如果两个文件排序不一样的话,会出问题 第二种:grep命令法 命令如下:grep -v...

