anyikang3511-优快云博客

转载多线程爬取小说时如何保证章节的顺序

前言爬取小说时，以每一个章节为一个线程进行爬取，如果不加以控制的话，保存的时候各个章节之间的顺序会乱掉。当然，这里说的是一本小说保存为单个txt文件，如果以每个章节为一个txt文件，自然不会存在这种情况。不仅仅是小说，一些其他的数据在多线程爬取时也有类似情况，比如：漫画：漫画其实是由大量图片组成，一般一本漫画会保存为一个pdf文件，在此过程要保证图片的顺序。...

2019-08-24 19:02:00 1861

转载对扫描的pdf文件生成目录

很多pdf文件是直接扫描生成的，于是它的内容都是一张张的图片，当然就更没有目录索引了。有的时候想找某些内容，只能一点点的移动滚动条，非常不方便。那么有什么方法能生成目录呢？方法一：使用福昕pdf编辑器福昕pdf编辑器使用PRC识别pdf文件，能将pdf文件转换为office文件，更是有目录制作的功能。但是，亲测后发现：也是最关键的问题，他需要money，...

2019-03-21 21:12:00 2756

转载用scrapy爬取京东的数据

本文目的是使用scrapy爬取京东上所有的手机数据,并将数据保存到MongoDB中。一、项目介绍主要目标1、使用scrapy爬取京东上所有的手机数据2、将爬取的数据存储到MongoDB环境win7、python2、pycharm技术1、数据采集：scrapy2、数据存储：MongoDB难点分析和其他的电商网站相比，...

2018-10-04 17:59:00 884

转载 python、Java、大数据和Android的薪资如何？

　　莫名其妙，从去年年底开始，Python这个东西在中国，突然一下子就火起来了，直至现在，他的热度更是超越了java，成为软件工程师最为关注的话题。Python之所以能火起来，很大一方面是因为大数据、人工智能和机器学习越来越受人关注的原因，那么，伴随着Python的火热，他的薪资是否也相应的高了起来了呢？于是，针对这个话题，在今年暑假，我做了一个关于Python、java和大数据和安卓的...

2018-09-17 15:11:00 205

转载 php最新版本配置mysqli

从官网上下载php后（我下的是php7.2.3版本），本想做个mysql的连接，但是无论怎么配置mysqli扩展，发现mysqli都没法用。从百度上搜的那些方法都没法用，发现都是一些在php.ini中配置extension=php_mysqli.dll，事实上这句话没用了。于是我仔细看了一下php.ini的配置文件，发现了一段话; Note : The syntax us...

2018-04-08 22:18:00 263

转载使用Python3爬虫抓取网页来下载小说

很多时候想看小说但是在网页上找不到资源，即使找到了资源也没有提供下载，小说当然是下载下来用手机看才爽快啦！于是程序员的思维出来了，不能下载我就直接用爬虫把各个章节爬下来，存入一个txt文件中，这样，一部小说就爬下来啦。这一次我爬的书为《黑客》，一本网络小说，相信很多人都看过吧，看看他的代码吧。代码见如下：import reimport urllib.request...

2018-02-09 15:47:00 366

转载 pygame事件之——控制物体（飞机）的移动

近来想用pygame做做游戏，在xishui大神的目光博客中学了学这东西，就上一段自己写的飞机大战的代码，主要是对键盘控制飞机的移动做了相关的优化# -*- coding: utf-8 -*-import pygamefrom pygame.locals import *import sysimport timepygame.init()scr...

2018-01-30 20:13:00 852

转载用javascript做别踩白块游戏2

这一次做一个好一点的，要求黑块自动下落，且速度逐渐加快<!DOCTYPE html><html><head><meta charset="UTF-8" name="viewport" content="width=device-width, initial-scale=1.0, m...

2018-01-30 18:56:00 116

转载用javascript做别踩白块游戏1

初学Javascript做的一个别踩白块小游戏，代码简陋，如下： 1 <!DOCTYPE html> 2 <html> 3 <head> 4  5 <meta charset="UTF-8" name="viewport" content="width=device-wi...

2018-01-30 18:23:00 160