python爬虫类模型

满天星☞

于 2021-06-05 14:27:41 发布

阅读量288

点赞数

文章标签： python 爬虫

本文链接：https://blog.youkuaiyun.com/sunjiaxing_1/article/details/117595047

版权

本文探讨了Python中用于爬虫的类模型，通过面向对象的方式组织爬虫代码，提高代码复用性和可维护性。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

author:孙佳星
blogs:https://pythonsun.cn

爬虫类模型

class XXX:
    def __init__(self):
        #用处存储 公用变量,方便调用
    def get_html(self):
        #用于获取网页文本数据
    def parser_html(self):
        #用于解析获得文本数据,如:正则表达式,BS4等
    def save_html(self):
        #用于存储解析后得到的数据,存于数据库或者csv等
    def close(self):
    	#用于调用关闭游标对象,关闭数据库连接
    def serve_forever(self):
        #主函数,创建实例对象后,调用的,里面按照逻辑调用其它方法
# 入口,创建实例对象,调用启动函数
if __name__ == '__main__': 
    uesr = XXX()
    user.serve_forever()