采集安居客
今天采集https://chengdu.anjuke.com/community/p1/的时候，遭遇了反爬虫。
即使使用scrapy shell https://chengdu.anjuke.com/community/p1/也无法访问。
互联网
关于互联网上七大姑，八大姨的一些九卦。
采集高德地图POI
方法：
1.通过Python的urllib模块来处理网络请求和响应，向高德地图发送请求，并接收响应
2.高德地图的响应是xml文件，通过Python的DOM来解析xml，并保存POI数据
3.高德地图api使用说明，http://lbs.amap.com/api/webservice/reference/search/
4.强调一点...
Scrpy的第五个爬虫（爬取详细页面写入SQLite）
学习目标：
掌握采集时翻页功能的实现。
掌握采集详细页面内容的方法
掌握运用Navicat可视化界面建立Sqlite数据库、数据表的方法。
掌握运用Scrapy从建立爬...
Scrpy的第四个爬虫（数据入库）
测试环境：
win7 旗舰版
Python 2.7.14(Anaconda2 2 5.0.1 64-bit)
学习目标：
掌握利用Ipython的命令行模式新建Sqlite数据库、数据表的方法
掌握PyCharm关...
Scrpy的第三个爬虫（抓取WordPress博客）
学习目标：
学习获得下一篇文章的url的方法
利用“下一篇”功能抓取wordpress全部文章
测试环境：
win7 旗舰版
Python 2.7.14(Anaconda2 2 5.0.1 64-bit)
一...
Scrpy的第二个爬虫（爬取博客）
学习目标：
通过抓取一个博客的标题，进一步了解利用Scrapy抓取数据的流程
测试环境：
win7 旗舰版
Python 2.7.14(Anaconda2 2 5.0.1 64-bit)
一、创建项...
WordPress备忘
一、Wordpress启用新模板导致网站无法访问的问题
有一次在Wordpress后台启用一个新的模板之后，可能是模板的版本与Wordpress版本不兼容的原因，出错了，结果网站无法打开，网站后台也无法进入。
解决方案：利用FTP登陆后台，进入到网站的/wp-content/theme...
强奸百度
在SEO早期，时常会出现强奸百度的情况，这么多年过去了，没想到现在强奸百度还是这么容易！
先看几张图吧：
一、先来看看mnvbox.com
2017年06月20日注册，...
WordPress网站MIP改造备忘
今天新上了一个网站，由于今年MIP比较火，所以打算将这个网站改造成MIP。
在网上看到改造的方法有两种：
1.UA插件
UA插件推荐：Any Mobile Theme Switcher
U...
Google进入人工智能翻译时代
首先，Google翻译在大陆可以访问了，网址是：https://translate.google.cn/
其次，Google翻译开始采用人工智能！
翻译界大突破，Google翻译开始采用人工智能...
