Python

人生苦短,干吗不用Python?

采集知网论文信息

0

采集知网论文信息 一、代码 二、出错 可是下载了一百多篇论文就报错了,原来出现了验证码。可是我设定为自动识别验证码了,还是报以下的错误。 ERROR:root:出现验证码 Traceback (most recent call last): File "main.py", line 144, in parse_page tr_table.tr.extract() AttributeError: 'NoneType' object has no attribute 'tr……

从Tushare获取数据展示双均线策略

0

从Tushare获取数据展示双均线策略 一、Tushare简介 Tushare是一个财经数据接口包。主要实现对股票等金融数据从数据采集、清洗加工 到 数据存储的过程,能够为金融分析人员提供快速、整洁、和多样的便于分析的数据,为他们在数据获取方面极大地减轻工作量,使他们更加专注于策略和模型的研究与实现上。考虑到Python pandas包在金融量化分析中体现出的优势,……

Python常用代码(二)

0

Python常用代码(二) 一、输入输出控制 raw_input(unicode('请输入文字','utf-8').encode('gbk')) #解决输入提示中文乱码问题 print a.prettify() #格式化输出 二、进度条控制 from __future__ import division import sys,time j = '#' for i in range(1,61): j += '#' sys.……

站长网关键词采集(爬虫)

0

站长网关键词采集(爬虫) 本文知识点: 1、复习了类的写法。 2、复习了scrapy先大范围取数,然后for循环取每一个item的用法。取大范围值的时候,在python中print不出来也没有问题,比如本文中的node_list,for循化中可以取出就可以了。 3、学习了写入Mysql时自动生成时间的方法。 4、学习了xpaht中的“.//”、“./”的写法。 5. Mysql避免数据重复插入……

Python项目Keylogger(定时器)

0

Python项目Keylogger(定时器) 一、代码 keylogger.py文件 #!/usr/bin/env python import smtplib import threading from pynput import keyboard # Create Keylogger Class class KeyLogger: # Define __init__ variables def __init__(self, time_interval, email, password): self.interval = time_interva……

streamlit 备忘

0

streamlit 备忘 一、streamlit介绍 今天无意中看到一款叫streamlit 的东西,看它的介绍是“Streamlit是第一个专门针对机器学习和数据科学团队的应用 开发框架”,我看了一下它的使用,发现自己以后可能用得着。对于我来说,这个框架的作用就在于不使用django的情况下,实现一些数据的网页呈现,说说自己以后可能用到的两个场影吧! 1.量化……

安装line_profiler折腾记

0

安装line_profiler折腾记 今天为了使用line_profiler,被折腾得够呛。 一、安装line_profiler 1.缺少Microsoft Visual C++ 14.0 最开始使用pip install 安装,然后CMD窗口中直接提示少了一个什么Microsoft Visual C++ 14.0,然后还提示有下载地址,可是访问这个地址却是无法下载的。 2.然后我就只好自己下载,在百度搜索了一下,在结果中看到有mic……

采集bing或者百度图片(Python操作EXCEL)

0

采集bing或者百度图片(Python操作EXCEL) 今天有一个项目需求,需要根据关键字采集相关的图片,最终的解决方案如下: 安装python Pisces,然后执行以下脚本: from pisces import Pisces import xlrd import xlwt from datetime import date,datetime client = Pisces(quiet=False, headless=True, workers=4, browser='chrome') # 打开文件 workbook =……

Selenium如何打开新标签页及使用Cookie

0

Selenium如何打开新标签页及使用Cookie 最近弄一个项目,需要使用Selenium,由于目标网站在国外,访问速度非常慢,而且由于使用Selenium触发了它的验证码机制,光登陆就非常麻烦。最后使用Selenium的加载cookie功能,终于解决了登陆问题。 附最终的代码: 一、保存Cookie from selenium import webdriver from selenium.webdriver.support.select import Sel……