人生苦短，我用Python。
一、输入输出控制
raw_input(unicode('请输入文字','utf-8').encode('gbk')) #解决输入提示中文乱码问题
print a.prettify() #格式化输出
二、进度条控制
from __future__ import division
import sys,time
j = '#'
for i in range(1,61):
j += '#'
sys.……
本文知识点：
1、复习了类的写法。
2、复习了scrapy先大范围取数，然后for循环取每一个item的用法。取大范围值的时候，在python中print不出来也没有问题，比如本文中的node_list，for循化中可以取出就可以了。
3、学习了写入Mysql时自动生成时间的方法。
4、学习了xpaht中的“.//”、“./”的写法。
5. Mysql避免数据重复插入……
一、代码
keylogger.py文件
#!/usr/bin/env python
import smtplib
import threading
from pynput import keyboard
# Create Keylogger Class
class KeyLogger:
# Define __init__ variables
def __init__(self, time_interval, email, password):
self.interval = time_interva……
一、streamlit介绍
今天无意中看到一款叫streamlit 的东西，看它的介绍是“Streamlit是第一个专门针对机器学习和数据科学团队的应用 开发框架”，我看了一下它的使用，发现自己以后可能用得着。对于我来说，这个框架的作用就在于不使用django的情况下，实现一些数据的网页呈现，说说自己以后可能用到的两个场影吧！
1.量化……
今天为了使用line_profiler，被折腾得够呛。
一、安装line_profiler
1.缺少Microsoft Visual C++ 14.0
最开始使用pip install 安装，然后CMD窗口中直接提示少了一个什么Microsoft Visual C++ 14.0，然后还提示有下载地址，可是访问这个地址却是无法下载的。
2.然后我就只好自己下载，在百度搜索了一下，在结果中看到有mic……
今天有一个项目需求，需要根据关键字采集相关的图片，最终的解决方案如下：
安装python Pisces，然后执行以下脚本：
from pisces import Pisces
import xlrd
import xlwt
from datetime import date,datetime
client = Pisces(quiet=False, headless=True, workers=4, browser='chrome')
# 打开文件
workbook =……
备注：第33课已经OK
一、urllib
from urllib.request import urlopen as uReq
from bs4 import BeautifulSoup as soup
my_url = "https://www.newegg.com/Video-Cards-Video-Devices/Category/ID-38?Tpk=graphic%20card"
# opening up connection, grabbing the page
uClient = uReq(my_url)
page_h……
最近弄一个项目，需要使用Selenium，由于目标网站在国外，访问速度非常慢，而且由于使用Selenium触发了它的验证码机制，光登陆就非常麻烦。最后使用Selenium的加载cookie功能，终于解决了登陆问题。
附最终的代码：
一、保存Cookie
from selenium import webdriver
from selenium.webdriver.support.select import Sel……
按youtube上面的教程自己一个一个代码敲的。
主要功能：
检查目标网页的on-page SEO效果，比如title,keywords,h1,h2这些。
扩展用途：
可以用于分析搜索引擎的搜索结果。
成果展示：
from urllib.request import urlopen,Request
from bs4 import BeautifulSoup
import re
url = input("Which page would ……
一、根据关键词搜索城市内的POI
其中POI类型和关键字参数选填其一即可,city字段为可选项，若无，则全国范围内搜索。
https://restapi.amap.com/v3/place/text?keywords=北京大学&city=beijing&output=json&offset=20&page=1&key=&extensions=all
如果要搜索国外的城市：
https://restapi.amap.com/v3/place/text?keywo……
