将爬取的图片地址存入mongodb数据库

最新推荐文章于 2021-05-11 19:17:54 发布

Mr.冷小陌

最新推荐文章于 2021-05-11 19:17:54 发布

阅读量852

点赞数 1

CC 4.0 BY-SA版权

分类专栏：爬虫文章标签： python加mongodb入库

本文链接：https://blog.youkuaiyun.com/lxp_mocheng/article/details/102821102

本文详细介绍了如何使用Python爬虫抓取网页上的图片URL，并将其高效地存储到MongoDB数据库中，包括数据预处理、连接数据库、插入数据等关键步骤。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

流程如下

import requests
from lxml import etree
import pymongo

# 与mongodb数据建立连接
conn = pymongo.MongoClient('localhost',27017)
# 连接或创建一个库
db = conn.imgs
# 创建表
table = db.image

# 定义函数用来存储图片地址到mongo库
def