Python基础爬虫练习(深圳房产信息网站)

本文介绍了一个Python基础爬虫程序,用于抓取深圳房产网站上的房源信息,包括公寓类型、户型、面积、区域和总价,并将数据保存到CSV文件中。爬虫使用requests库获取网页,lxml库解析HTML,最后通过csv模块写入数据。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

网站url:https://shenzhen.qfang.com/sale/f1

# -*- coding: utf-8 -*-
"""
Created on Thu Oct 25 15:25:34 2018

@author: Belinda
"""
import requests
from lxml import etree
import csv
import time


def spider():
    #定义爬虫头部
    headers={'User-Agent':'Mozilla/5.0 (Window NT 10.0; WOW64)\ AppleWebKit/537.36 (KTML,like Gecko) Chrome/46.0.2490.80 Safari/537.36'}
    pre_url='https://shenzhen.qfang.com/sale/f'
    for i in range(1,100):#网页页面数为99,range(1,页面数+1)
        html=requests.get(pre_url+str(i),headers=headers)
        time.sleep(1)
        selector=etree.HTML(html.text)
        house_

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值