27,03,2020
|
dengwen168 |
其实许多牛人的站群，都是以公司的名义来弄的，规模之大，盈利之大，也远超于一般人的。
今天就无意中发现了这么样一个站群。
首选他的网站流量并不多，反链也并不多，不过都是细分站，我查的那个关键词他的网站就排在第一位。但是他的站群规模就大了：找到 993 条记录，差几个就上千了！
它的网站都是长这样的：
很好的可以用来做行业站的cms，比destoon简单，但是需要的元素都有了，我在论坛问了一下 ...
26,03,2020
|
dengwen168 |
一、代码
二、出错
可是下载了一百多篇论文就报错了，原来出现了验证码。可是我设定为自动识别验证码了，还是报以下的错误。
ERROR:root:出现验证码
Traceback (most recent call last):
File "main.py", line 144, in parse_page
tr_table.tr.extract()
AttributeError: 'NoneType' object has no attribute 'tr'
原来采集了10多页的时候，会跳出验证码的页面：
通过查看源码，发现验证码图片 ...
25,03,2020
|
dengwen168 |
一、Tushare简介
Tushare是一个财经数据接口包。主要实现对股票等金融数据从数据采集、清洗加工 到 数据存储的过程，能够为金融分析人员提供快速、整洁、和多样的便于分析的数据，为他们在数据获取方面极大地减轻工作量，使他们更加专注于策略和模型的研究与实现上。考虑到Python pandas包在金融量化分析中体现出的优势，Tushare返回的绝大部分的数据格式都是pandas DataFrame类型，非常便于用pandas/NumP ...
22,03,2020
|
dengwen168 |
看论坛里那么多人孜孜不倦的在分析，预测走势，忍不住说几句。
炒股就是赌博，技术分析一文不值，什么支撑压力箱体破位之类，都是意淫的产品。之所以有人觉得有用，是因为每天那么多人在预测，总有人猜对的。于是相信市场的顶底是可以被预测的，只是自己还没有掌握这门技术绝招而已。
意淫不是不可以，如果有自己的进出规则，不妨大胆意淫。只要知道意淫是时准时不准的，不过是概率的游戏，在不准的时候有 ...
22,03,2020
|
dengwen168 |
看完这个才发现，不是Vue难学，而是没有找到好的教程。
进度：目前已经学到第12节。
一、感想
其实感觉写Vue和写类差不多，主要是写属性、写方法。
基于 Vue.js 的移动端组件库
http://mint-ui.github.io/#!/zh-cn
二、音乐播放器
源码：
<!DOCTYPE html>
<html lang="en">
<head>
<meta charset="UTF-8" />
<meta name="viewport" ...
20,03,2020
|
dengwen168 |
最近花了两个晚上折腾Wordpress多站点，期间各种意外，比如服务器内存不足、FTP无法登陆、Xshell无法使用、服务器需要设置白名单等，好在基本上也搞定了。
一、解析域名
二、停用所有插件
三、开启多站点
在config.php中添加以下代码
define('WP_ALLOW_MULTISITE', true); // 开启多站点功能
define( 'COOKIE_DOMAIN', '' ); // 清除cookie限制，否则开启多站点后登录网站后台会提示“ ...
15,03,2020
|
dengwen168 |
一、输入输出控制
raw_input(unicode('请输入文字','utf-8').encode('gbk')) #解决输入提示中文乱码问题
print a.prettify() #格式化输出
二、进度条控制
from __future__ import division
import sys,time
j = '#'
for i in range(1,61):
j += '#'
sys.stdout.write(str(int((i/60)*100))+'% ||'+j+'->'+"\r")
sys.s ...
15,03,2020
|
dengwen168 |
本文知识点：
1、复习了类的写法。
2、复习了scrapy先大范围取数，然后for循环取每一个item的用法。取大范围值的时候，在python中print不出来也没有问题，比如本文中的node_list，for循化中可以取出就可以了。
3、学习了写入Mysql时自动生成时间的方法。
4、学习了xpaht中的“.//”、“./”的写法。
5. Mysql避免数据重复插入的方法。
一、正则
折腾了一个早上，发现原来是目标网页的问题：http://rank.chinaz ...
14,03,2020
|
dengwen168 |
今天无意中发现了一个日IP3万+的个人网站，而且是采集站，不过毕竟牵涉到别人的操作手法问题，所以文章就不公开了。
首先看一下成果吧！
一、注册时间
有6年了，不是新站。
不过没有查看archive。
二、聚合页
然后他也做了许多的聚合页。不过打开他的聚合页里面的标题，不是跳到另外一个聚合页面，而是指向的真实的网站页面，不过是嵌套在他自己的网页框架里面的。
奇怪的是他的网站还用了这样的形式。 ...
14,03,2020
|
dengwen168 |
一、对数据的估计
假设10万张图片，每张图片平均50k，那么：
10万*1024k/20 = 10万M /20 = 10万/1024 /20 = 5G
与百度出来的结果一样：
1(gb)=1048576(kb)
1048576/50=20971 即1GB可以存放约2万张50k的图片。
看看阿里云轻量级服务器：
二、可参考模板
首页：https://www.meituan.com/
城市首页：
https://gz.meituan.com/
城市里面分类的列表页：
https://www.meituan.com/list/pn2/
https://anlushi.m ...
Page: 85 of 229 1 ...
83 84 85 86 87 ...
229
