方法播客

SEO好文章

【张亚楠】[翻]使用requests和lxml进行web抓取

web抓取 web站点是由HTML语言编写，这意味着每个网页都是结构化文档。有时，我们可利用当前结构获取所需数据并保留数据格式，但通常都不能以合适的结构获取数据（不像csv和json）。 web抓取适...

11月18日906评论

SEO好文章

1. 前言前几天在做日志分析系统，需要处理几十G的文件，我尝试用原来的for line in open(filepath).readlines()处理，但停顿好久也没变化，可见占用不小的内存。在网上...

11月18日9491

SEO好文章

1. 前言为了做一些报表，最近需要每日从爱站上抓取竞争对手的百度流量和移动流量，从我能实现的技术来看，大致有三种实现形式：火车头定时抓取； python+crontab定时抓取，保存在txt或ca...

11月18日2,5821

SEO好文章

SEO需要经常看网站各种数据，如Visits，Keywords，landing page等，但总要登录Google Analytics（之后简称GA）查看，而且无法与其他系统数据结合。这时，就需要GA...

11月18日1,3331

Centos大多数情况下是用来做服务器的，但是由于各种原因我现在要用Centos做开发机，所以当然要安装开发神奇Sublime textle. 注意：安装目录因人而异，我的安装目录是/opt/subl...

11月16日shell学习笔记3,4961

shell学习笔记

一. 安装gnome图形化桌面 #yum groupinstall -y "X Window System" #yum groupinstall -y "Desktop" #yum groupinst...

11月16日7,838评论

SEO工作