dt_it_park的博客

动态加载网站数据抓取 1、F12打开控制台，页面动作抓取网络数据包 2、抓取json文件URL地址 # 控制台中 XHR ：异步加载的数据包 # XHR -> Query String Parameters(查询参数) 有道翻译流程梳理 1. 打开首页 2. 准备抓包: F12开启控制台 3. 寻找地址 页面中输入翻译单词，控制台中抓取到网络数据包，查找并分析返回翻译数据的地址 4....

# -*- coding: utf-8 -*- ''' 导入库 s数据预处理：加载数据 分割数据 数据可视化 构建神经网络 训练模型 优化 ''' import numpy as np import tensorflow as tf import matplotlib.pylab as plt #训练样本的特征对应的标签 x = [[0,0],[1,0],[0,1],[1,1],[1,1],...

selenium切换句柄 1、适用网站 页面中点开链接出现新的页面，但是浏览器对象browser还是之前页面的对象 2、应对方案 # 获取当前所有句柄（窗口） all_handles = browser.window_handles # 切换到新的窗口 browser.switch_to_window(all_handles[1]) 3、设置无界面模式 1、options = webdrive...

from selenium import webdriver import time import pymysql class GovementSpider(object): def __init__(self): self.browser = webdriver.Chrome() self.one_url = 'http://www.mca.gov.cn...

#导入datetime模块 import datetime def last_day_of_month(any_day): #获取每个月的最后一天 next_month = any_day.replace(day=28) + datetime.timedelta(days=4) # this will never fail return next_month - date...