蜗牛之路

爬取时间：2020年4月30日

一、结果

二、代码

import requests
import re
import time
import xlrd
import xlwt
from xlutils.copy import copy


def get_house_quantity(url):
	#获取二手房数量
	url = url + "ershoufang/"
	html = requests.get(url)
	html = html.text
	pat = '
<h2 class="total fl">共找到<span>(.*?)</span>.*?</h2>

'
	result = re.findall(pat,html)
	if len(result) == 0:
		house_quantity = 0
	else:
		house_quantity = result[0]
	return house_quantity


def get_city_list(url):
	#获取城市列表，返回的是一个城市列表，每一个数据为 ('https://wz.lianjia.com/', '温州')
	html = requests.get(url).text
	pat = ' 
<li><a href="(.*?)">(.*?)</a></li>

'
	result = re.findall(pat,html)
	return result




def write_excel_xls_append(path, value):
    workbook = xlrd.open_workbook(path)  # 打开工作簿
    sheets = workbook.sheet_names()  # 获取工作簿中的所有表格
    worksheet = workbook.sheet_by_name(sheets[0])  # 获取工作簿中所有表格中的的第一个表格
    rows_old = worksheet.nrows  # 获取表格中已存在的数据的行数
    new_workbook = copy(workbook)  # 将xlrd对象拷贝转化为xlwt对象
    new_worksheet = new_workbook.get_sheet(0)  # 获取转化后工作簿中的第一个表格
    for i in range(0, 1):
        for j in range(0, len(value)):
            new_worksheet.write(i+rows_old, j, value[j])  # 追加写入数据，注意是从i+rows_old行开始写入
    new_workbook.save(path)  # 保存工作簿
    print("xls格式表格【追加】写入数据成功！")



city_list = get_city_list("https://www.lianjia.com/city/")
for i in city_list:
	temp_list = []
	print(i)
	house_quantity = get_house_quantity(i[0])
	print(house_quantity)
	temp_list.append(i[0])
	temp_list.append(i[1])
	temp_list.append(house_quantity)
	print(temp_list)
	write_excel_xls_append("may.xls",temp_list)
	time.sleep(2)

三、更新
广州4月销售套数TOP10

https://gz.newhouse.fang.com/2020-05-26/36206793.htm

广州5月销售套数TOP10 增城赢了！

https://gz.newhouse.fang.com/2020-06-01/36260451.htm

套数有差异，名称和这里的差不多。

四、二手
5-June-2020 广州链家真实在售二手房 73677 套
13-June-2020 广州链家真实在售二手房 74699 套

其中：
南沙：共找到 3185 套南沙二手房
增城：共找到 10056 套增城二手房

15-July-2020
广州链家真实在售二手房 76260 套
其中：
南沙：共找到 3332 套南沙二手房
增城：共找到 10385 套增城二手房
增城朱村科教板块：
山田站：荔富湖畔：88套在售二手房，97套出租房源,小区均价：15226元/m2
凤岗站：保利中航城：53套在售二手房，362套出租房源。18097元/m2，145万装修3房（83m2）。

新塘：
官湖地铁：锦绣天伦花园：317套在售二手房，52套出租房源,小区均价：18616元/m2 （143万2房带2千一个月租约）
官湖地铁：中森名苑， 36套在售二手房，7套出租房源,小区均价：18103元/m2

31-July-2020
广州链家真实在售二手房 76514 套
其中：
南沙：共找到 3339 套南沙二手房
增城：共找到 10487 套增城二手房

06-Oct-2020
共找到 78318 套广州二手房
其中：
南沙：共找到 3292 套南沙二手房
增城：共找到 11076 套增城二手房

Jan-24-2021
共找到 74551 套广州二手房
其中：
南沙：共找到 2998 套南沙二手房
增城：共找到 11131 套增城二手房

Feb-21-2021
共找到 73857 套广州二手房
其中：
南沙：共找到 3000 套南沙二手房
增城：共找到 11008 套增城二手房

Apr-02-2021
共找到 76033 套广州二手房
其中：
增城：共找到 11150 套增城二手房
南沙：共找到 3287 套南沙二手房

June-30-2021
共找到 79517 套广州二手房
其中：
增城：共找到 11924 套增城二手房
南沙：共找到 3711 套南沙二手房

Nov-06-2021
共找到 94853 套广州二手房
其中：
增城：共找到 13162 套增城二手房
南沙：共找到 4726 套南沙二手房

Dec-26-2021
共找到 98155 套广州二手房
其中：
增城：共找到 13246 套增城二手房
南沙：共找到 4979 套南沙二手房

Feb-27-2022
共找到 100986 套广州二手房
其中：
增城：共找到 13214 套增城二手房
南沙：共找到 5262 套南沙二手房

May-7-2022
共找到 104544 套广州二手房
其中：
增城：共找到13187套增城二手房
南沙：共找到 5513 套南沙二手房

May-21-2022
共找到 106467 套广州二手房
其中：
增城：共找到13275 套增城二手房
南沙：共找到 5647 套南沙二手房