项目需求： 有成千上万个域名，想查询哪些域名已经被百度收录，收量的页面数量有多少？ 直接找网上的代码改了一下，基本满足需求了，运行界面如下： 将被百度收录的域名保存下来： 最开始在网上找的是通过"http://www.baidu.com/s?wd="的方式来查询百度收录的，不过这种方式查询的百度收录准确率只有90%多，有些用site……

  https://github.com/nchah/topsites-html-comments Browse Top Sites’ HTML Comments with Python

https://github.com/moosuchot/alexaTop500

应用场景： 有时我们从网上采集了大量的关键词，因为是采集的，难免其中含有一些敏感关键词，如果是做中文站的话，最好将这些关键词去掉。在网上找到了一个Python脚本，不过是python 2.x的，我修改了一下，改成了python 3.X的，在改的过程中遭遇如下错误： python TypeError: a bytes-like object is required, not 'str……

http://www.cnblogs.com/chenbin93/archive/2018/05/29/9103175.html http://www.10qianwan.com/articledetail/211495.html https://www.jb51.net/article/141036.htm

http://www.sqlsec.com/2018/07/pyscript1.html https://github.com/sqlsec/seo 还有可以通过 http://tool.chinaz.com/baidu/?lm=0&btime=&etime=&wd=snailtoday.com&pn=0

https://github.com/PegasusWang/WeiboApp https://blog.csdn.net/pegasuswang_/article/details/48550301 https://github.com/GinSmile/QRobot https://www.jianshu.com/p/6173750cf59b

一、收录情况 1.Google 用某产品查了一下，google前4名是京东，第5名是一号店，第6名51tfx.com在百度才收录了5页。 第8名site:xyz01.xyz百度收录17页， 第9名taoour.net百度收录3页。 第8名，第9名，点击google搜索结果都指向了：http://jd.taoour.net/web/index.php?c=user&a=login& 第10名haoping.la百度收录了1,373页……

一、安装whois 在项目的虚拟环境下，执行pip install whois不行，必须执行以下命令： pip install python-whois 然后执行以下代码，就可以看到输出的信息了： import whois domain = whois.whois("baidu.com") print(domain) 二、外部使用django models 1、在项目根目录新建一个import_db的文件。……

一、完善后台功能 前期开发中，因为几乎没有用到后台，所以对后没有做什么开发。后来在使用的过程中发现有些事情还得后台来做，比如： （1）、主机商通知网页中含有敏感关键词的信息，需要修改某个产品描述，这时只根据商品ID去查询，需要一页一页地去翻页，非常浪费时间。 （2）、由于之前没有做过多的逻辑判断，首页的……