关于互联网上七大姑，八大姨的一些九卦。
一、安装mezzanine
pip install mezzanine
执行这个命令之后，将会安装以下包：
grappelli-safe, future, urllib3, chardet, idna, r
equests, django, filebrowser-safe, django-contrib-comments, beautifulsoup4, pytz
, tzlocal, six, webencodings, html5lib, bleach, oauthlib, requests-oauthlib, pil
low, me……
今天采集https://chengdu.anjuke.com/community/p1/的时候，遭遇了反爬虫。
即使使用scrapy shell https://chengdu.anjuke.com/community/p1/也无法访问。
方法：
1.通过Python的urllib模块来处理网络请求和响应，向高德地图发送请求，并接收响应
2.高德地图的响应是xml文件，通过Python的DOM来解析xml，并保存POI数据
3.高德地图api使用说明，http://lbs.amap.com/api/webservice/reference/search/
4.强调一点，如果需要使用api，必须向高德地图申请一个key，然后用你申请到……
学习目标：
掌握采集时翻页功能的实现。
掌握采集详细页面内容的方法
掌握运用Navicat可视化界面建立Sqlite数据库、数据表的方法。
掌握运用Scrapy从建立爬虫到写入Sqlite数据库的全部流程。
测试环境：
win7 旗舰版
Python 3.5.2(Anaconda3 4.2.0 64-bit)
一、创建项目及爬虫
创建一个名为teachers的项目。并且在spid……
测试环境：
win7 旗舰版
Python 2.7.14(Anaconda2 2 5.0.1 64-bit)
学习目标：
掌握利用Ipython的命令行模式新建Sqlite数据库、数据表的方法
掌握PyCharm关联Sqlite数据库的方法
Python中文乱码的解决方法
掌握将采集的数据插入Sqlite数据库的方法
一、新建项目
新建项目之后，用PYcharm打开这个项目。
二、撰写爬虫文……
学习目标：
学习获得下一篇文章的url的方法
利用“下一篇”功能抓取wordpress全部文章
测试环境：
win7 旗舰版
Python 2.7.14(Anaconda2 2 5.0.1 64-bit)
一、创建项目
创建一个名为URLteam的项目。
二、设置Items.py
代码如下：
# -*- coding:utf-8 -*-
from scrapy.item import Item, Field
class UrlteamIt……
学习目标：
通过抓取一个博客的标题，进一步了解利用Scrapy抓取数据的流程
测试环境：
win7 旗舰版
Python 2.7.14(Anaconda2 2 5.0.1 64-bit)
一、创建项目
进入“Anaconda Prompt”的窗口，输入以下命令：
scrapy startproject scrapyspider
二、编写第一个爬虫(Spider)
在scrapyspider/spiders目录下建立一个名为b……
一、Wordpress启用新模板导致网站无法访问的问题
有一次在Wordpress后台启用一个新的模板之后，可能是模板的版本与Wordpress版本不兼容的原因，出错了，结果网站无法打开，网站后台也无法进入。
解决方案：利用FTP登陆后台，进入到网站的/wp-content/themes文件夹下面，删除这个模板的文件夹（重命名应该也可以，请自己尝……
在SEO早期，时常会出现强奸百度的情况，这么多年过去了，没想到现在强奸百度还是这么容易！
先看几张图吧：
一、先来看看mnvbox.com
2017年06月20日注册，到现在刚好半年时间，百度权重就已经到6了。
同时，这个网站给用户呈现的和给搜索引擎呈现的是不同的内容。
用户看到的是这样的：
搜索引擎看到的是这样的：
……
今天新上了一个网站，由于今年MIP比较火，所以打算将这个网站改造成MIP。
在网上看到改造的方法有两种：
1.UA插件
UA插件推荐：Any Mobile Theme Switcher
UA插件可以简单的理解为是通过判断网站访问用户的UA信息，然后来显示不同的WordPress主题。
2.独立域名插件
独立域名插件推荐：Domain Theme
通过该插件设置添加……
