爬取1688商家信息

最新推荐文章于 2025-03-06 14:14:48 发布

wuqi356

最新推荐文章于 2025-03-06 14:14:48 发布

阅读量5.7k

点赞数 1

分类专栏： python

本文链接：https://blog.youkuaiyun.com/wuqi356/article/details/90436761

版权

本文详细介绍了如何通过网络爬虫技术抓取1688网站上的商家信息，包括店铺名称、地址、评价等关键数据，为数据分析和市场研究提供基础资料。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

# -*- coding: utf-8 -*-
"""
Created on Mon May 20 10:46:27 2019

@author: Administrator
"""

#! /usr/bin/env python
#coding:utf-8

from selenium import webdriver
from selenium.webdriver.common.keys import Keys
from selenium.webdriver.common.action_chains import ActionChains
import time
import urllib
import urllib.request
import sys
import os
import re
import csv
import numpy as np

# 解决中文报错的问题

csvfile = open("C:\\Users\\Administrator\\data1.csv", 'w+')
writer = csv.writer(csvfile)
writer.writerow(('a企业名称', 'b主页', 'c产品', 'd联系人', 'e电话', 'f地址','地区','经营范围'))
#url = 'https://s.1688.com/company/company_search.htm?keywords=%BB%AF%B9%A4&n=y&spm=a260k.635.1998096057.d1'
#url = 'https://s.1688.com/company/company_search.htm?n=y&pageSize=30&keywords=%BB%AF%B9%A4&offset=3&beginPage=20'
#url = 'https://s.1688.com/company/company_search.htm?keywords=%CA%B1%D7%B0&button_click=top&earseDirect=false&n=y&sortType=pop&pageSize=30&offset=3&beginPage=80'
#url = 'https://s.1688.com/company/company_search.htm?keywords=%BC%D2%BE%D3&button_click=top&earseDirect=false&n=y'
#url = 'https://s.1688.com/company/company_search.htm?n=y&pageSize=30&keywords=%B5%E7%C6%F8&offset=3&beginPage=55'
url = 'https://s.1688.com/company/company_search.htm?keywords=%B3%E8%CE%EF&button_click=top&earseDirect=false&n=y&netType=1%2C11'
loginUrl = 'https://login.taobao.com/m