- 博客(30)
- 收藏
- 关注
RSS订阅转载 Scrapy-redis<数据库篇>
scrapy-redis爬虫数据库连接部分——windows准备做salve，Linux准备做master开展工作首先处理简单的windows熟悉的环境——安装Redis服务和Redis可视化~可视化也可以省略，但作为新手推荐使用：1、安装redis服务：链接: https://pan.baidu.com/s/1EA0I-gx9NEU78vjZeZVqJA 提取码: 4s4i —...
2019-04-26 10:38:00
274
转载 Python文本数据互相转换（pandas and win32com）
(工作之后，就让自己的身心都去休息吧)今天介绍一下文本数据的提取和转换，这里主要实例的转换为excel文件（.xlsx）转换world文件（.doc/docx），同时需要使用win32api，同pywin32库。pandas库我之前的博客里面都有详细的介绍和使用，这里主要介绍下win32库。PyWin32是一个Python库，可以为Python提供Windows扩展。换句...
2018-08-16 11:10:00
584
转载 Python数据挖掘指南
Data Mining inPython: A Guide转载原文：https://www.springboard.com/blog/data-mining-python-tutorial/（全英）译文：1、数据挖掘和算法数据挖掘是从大型数据库的分析中发现预测信息的过程。对于数据科学家来说，数据挖掘可能是一项模糊而艰巨的任务 - 它需要多种技能和许多数据挖掘技术知识来...
2018-08-13 10:50:00
862
转载 Python数据挖掘(爬虫强化)
（我喜欢雨天，因为雨天我可以回到童年踩水花！哈！）2018年 --7月--12日 ： 多云又暴雨 T—T前言我要把爬虫的终极利器介绍一下，这个只要是我们肉眼能看到的，就算在源码中或者在json中，或是post也无法得到的数据，我们都可以获取到，雷同F12后源码暴露在你面前一样！这次需要用到selenium家族的一些成员，它们各司其职，各个身怀绝技。先介绍一下sel...
2018-07-12 18:01:00
181
转载 Python Django(WEB电商项目构建)
（坚持每一天，就是成功）Python Django Web框架，Django是一个开放源代码的Web应用框架，由Python写成。采用了MTV的框架模式，即模型M，模板T和视图V组成。安装Python 和 Django可以自己查阅资料 此文均在Pycharm下进行需要下载可加群：607021567找群主，本文主要介绍电商产品。所以可自行学习，创造自己的网站。1、Djang...
2018-07-06 17:25:00
724
转载 关于Python pandas模块输出每行中间省略号问题
关于Python数据分析中pandas模块在输出的时候，每行的中间会有省略号出现，和行与行中间的省略号....问题，其他的站点（百度）中的大部分都是瞎写，根本就是复制黏贴以前的版本，你要想知道其他问题答案就得去读官方文档吧。1 #!/usr/bin/python2 # -*- coding: UTF-8 -*-3 import numpy as np4 import ...
2018-07-03 15:43:00
631
转载 Python数据写入csv格式文件
（只是传递，基础知识也是根基）Python读取数据，并存入Excel打开的CSV格式文件内！这里需要用到bs4，csv，codecs，os模块。废话不多说，直接写代码！该重要的内容都已经注释了，剩下不懂的可以自己查询一下，或者QQ群内问我。QQ群在以往的博客中！ 1 #coding:utf-8 2 from bs4 import BeautifulSoup...
2018-06-14 15:49:00
277
转载 数据攻略●R语言自述
（注明：以下文章均在Linux操作系统下执行）一、R语言简介R语言是用于统计分析，图形表示和报告的编程语言和软件环境。R语言由Ross Ihaka和Robert Gentleman在新西兰奥克兰大学创建，目前由R语言开发核心团队开发。R语言的核心是解释计算机语言，其允许分支和循环以及使用函数的模块化编程。R语言允许与以C，C ++，.Net，Python或FORTRAN...
2018-06-14 10:28:00
415
转载 Python--（爬虫与数据库的连接）
（每一天都是属于你的！）Python对于初学后巩固基础的人还是更多的来接触python爬虫会更好一些，在Python爬虫中包含很多基础部分知识，并且在项目中会提升你的成功感！加油！我在工作之余时间，把Python的爬虫基础内容整理了一下，资料因为太多所以都放在QQ群内了，需要的可以来---607021567。今天整理了一个两个网站的小说阅读平台的爬虫，将两个网站的小...
2018-06-08 16:48:00
1004
转载 Mongodb数据库操作
mysql/mongodb对比CREATE TABLE USERS (a Number, b Number)Implicit or use MongoDB::createCollection().INSERT INTO USERS VALUES(1,1)$db->users->insert(array("a...
2018-05-21 15:32:00
298
转载 Python Web（Django）连接SQL SERVER
（开开心心每一天~ ---虫瘾师）Python Web（Django） 与SQL SERVRE的连接————Come QQ群：607021567（里面有很多开源代码和资料，并且python的游戏也有）（一）、SQL SERVER的基本介绍（简单）————SQL 是用于访问和处理数据库的标准的计算机语言。（二）、Django框架——Django采用了MVC的软件设计模...
2018-05-18 16:06:00
639
转载 Python操作MySql
一、linux客户端连接mssql server1.linux下安装unixODBC2.linux安装FreeTDS(1) 配置FreeTDS。 /etc/freetds/freetds.conf [egServer70] host = server ip port = 1433 tds Version = 7.0 [dsnName] ho...
2018-05-18 11:58:00
103
转载 Python(Django)项目与Apache的管理交互
（开开心心每一天~ ---虫瘾师）Python(Django)项目交给Apache的管理（一）准备：Django的环境（Python）、Apache、Wsgi（必须文件）首先需要电脑有Python基础下并且安装好Django的环境，下载Apache文件和Wsgi文件。如果两个文件都未能成功下载，可加QQ群607021567，直接找我要！接下来开始操作两个文件夹...
2018-05-14 17:34:00
233
转载 Python Django连接（听明白了是连接不是创建！）Mysql已存在的数据库
（Python Django连接存在的数据库）再声明一次！是连接不是创建！网上的一些人难道连接和创建这俩词都弄不懂就在那里瞎写一些文章！Python连接存在的数据库-------MySql1、首先在Django的项目中的settings.py文件中配置数据库的连接信息： 1 DATABASES = { 2 'default': { 3 ...
2018-02-02 10:05:00
244
转载 Python selenium自动化网页抓取器
（开开心心每一天~ ---虫瘾师）直接入正题---Python selenium自动控制浏览器对网页的数据进行抓取，其中包含按钮点击、跳转页面、搜索框的输入、页面的价值数据存储、mongodb自动id标识等等等。1、首先介绍一下 Python selenium ---自动化测试工具，用来控制浏览器来对网页的操作，在爬虫中与BeautifulSoup结合那就是天衣无缝，除去国外...
2018-01-19 16:48:00
516
转载 Python crawler access to web pages the get requests a cookie
Python in the process of accessing the web page，encounter with cookie，so we need to get it.cookie in Python is form of a dictionary exists ，so cookie is{'cookie':'cookies'}get cookie need...
2017-11-28 16:55:00
99
转载 python 面对post分页爬虫
分享一则对于网抓中面对post请求访问的页面或者在分页过程中需要post请求才可以访问的内容！面的post请求的网址是不可以零参访问网址的，所以我们在网抓的过程中需要给请求传表单数据，下面看一下网页中post请求的网址：post请求状态码和get请求的状态码一致，但是在参数中我们可以看到表单数据有很多的参数：...
2017-11-23 17:50:00
472
转载 python数据抓取分析（python + mongodb）
分享点干货！！！Python数据抓取分析编程模块：requests,lxml，pymongo，time，BeautifulSoup首先获取所有产品的分类网址： 1 def step(): 2 try: 3 headers = { 4 。。。。。 5 } 6 r...
2017-10-24 16:23:00
293
转载 Python3——让我们像孩子一样的去看书
用tkinter来画高级图形让我们一起创造一个按钮吧！“按住我：0 ：”那我们先做一个小例子，让我们第一眼先认识到这个它（tkinter）吧！输入以下代码：1 from tkinter import *2 tk = Tk()3 btn = Button(tk,text='按住我')4 btn.pack()在第一行，我们看到了tk（我们叫他ti...
2017-04-06 12:36:00
104
转载 Python（五）编程小实例
Python（五）编程小实例抓取网页信息，并生成txt文件内容！Python抓取网页技能——Python抓取网页就是我们常看见的网络爬虫，我们今天所要用到的就是我们Python中自带的模块，用这些模块将网页内容爬取下来，并生成一个txt文件。（一）实例思路：我们所需要用到的模块：urllib2—urllib2是Python的一个获取URLs(Un...
2017-03-17 16:27:00
182
转载 Python基础入门教程（4）（数据类型）
人生苦短，我学Pyhton Python(英语发音:/ˈpaɪθən/), 是一种面向对象、解释型计算机程序设计语言，由Guido van Rossum于1989年底发明，第一个公开发行版发行于1991年，Python 源代码同样遵循 GPL(GNU General Public License)协议。Python语法简洁而清晰，具有丰富和强大的类库。它常被昵称为胶水语言，能够...
2017-03-07 15:22:00
162
转载 Python基础入门教程（3）
人生苦短，我学Pyhton Python(英语发音:/ˈpaɪθən/), 是一种面向对象、解释型计算机程序设计语言，由Guido van Rossum于1989年底发明，第一个公开发行版发行于1991年，Python 源代码同样遵循 GPL(GNU General Public License)协议。Python语法简洁而清晰，具有丰富和强大的类库。它常被昵称为胶水语言，能够...
2017-03-06 13:59:00
124
转载 正念奇迹（一则正能量）
仅以此文，送给那些正在踌躇满志的人，希望能带给你们一点勇气和正能量。愿你抛开一切，尝试一次。 岁月中，总得有一次活的像个傻逼一样，为了自己想要的事而努力，体会一次成功究竟有多牛逼。 别总嘲笑身边傻傻付出的人，其实和他们相比，你才是最傻的。别总鄙视别人的成功，其实和他们相比，你才是最low的。别总努力一刻就放弃，成功其实已经在来的路上。 我们都曾见证或身边的人的成功，也许...
2017-03-03 13:07:00
189
转载 Python入门教程（2）
人生苦短，我玩蛇0.0！ Python(英语发音:/ˈpaɪθən/), 是一种面向对象、解释型计算机程序设计语言，由Guido van Rossum于1989年底发明，第一个公开发行版发行于1991年，Python 源代码同样遵循 GPL(GNU General Public License)协议。Python语法简洁而清晰，具有丰富和强大的类库。它常被昵称为胶水语言，能够把...
2017-03-03 11:01:00
163
转载 情出所愿 事过无悔
人生本来就没有相欠；别人对你付出；是因为别人喜欢。你对别人付出，是因为自己甘愿；情出自愿；事过无悔。转载于:https://www.cnblogs.com/zhuPython/p/6491026.html...
2017-03-02 15:56:00
227
转载 Java（基础）的类与变量
Java的类与成员变量 在我们学习编程语言中，需要灵活自用，那么怎么来灵活的将所有的函数属性来调用来实现完整的工程呢？ 所以我们需要认识到类和变量的定义 1、类是什么？ 类是抽象的概念，而对象就是类的具体存在体现。列如：我们的类就像生活中的小汽车，那么我们就可以将小汽车看作为一个类，我们称之为小汽车类，每一台小汽车都有轮胎数、颜色等（可以定义为属性，即成员...
2017-03-02 09:48:00
131
转载 Python入门教程（1）
人生苦短，我用Python！ Python(英语发音:/ˈpaɪθən/), 是一种面向对象、解释型计算机程序设计语言，由Guido van Rossum于1989年底发明，第一个公开发行版发行于1991年，Python 源代码同样遵循 GPL(GNU General Public License)协议。Python语法简洁而清晰，具有丰富和强大的类库。它常被昵称为胶水语言，能...
2017-03-01 15:00:00
311
转载 太穷和太忙，容易导致人生失败？（分享一则正能量）
太穷和太忙，容易导致人生失败？导读：你是否有这样的感觉，当你处于贫穷或者忙碌时，你对于很多事物缺乏基本的判断？这个时候，你往往会变得异常焦虑，由此产生非常低级的错误......当你特别穷或特别没时间的时候，你的智力和判断力都会全面下降，导致进一步失败。美国一个跨学科团队今年完成了一项对资源稀缺状况下人的思维方式的研究，结论是...
2017-03-01 13:49:00
135
转载 Python 正则表达式（字符）详解
Python正则表达式 — 简介 其实正则表达式这种技术，源于一个很简单的问题： 如何通过变成使得计算机具有在文本中检索某种模式的能力？ 而正则表达式为通过编程实现高级的文本模式匹配、抽取、与/或文本形式的搜索和替换提供了基础。1、正则表达式 正则表达式（Regular Expression，简称Regex）是一些由字符...
2017-03-01 13:05:00
129
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人