
数据领域
文章平均质量分 55
weixin_39928244
有着一颗热爱并专注数据的心。
展开
-
python微信朋友数据分析
1、 功能微信朋友性别分布 微信朋友省份分布 微信朋友北京分布 微信朋友个性签名词云2、 源码:import itchatimport pandas as pdimport numpy as npfrom pyecharts import Pie, Map, Style, Page, Barimport osfrom PIL import Imageimport jie...原创 2018-09-09 19:01:55 · 532 阅读 · 0 评论 -
python邮件推送
import smtplib #加载smtplib模块from email.mime.text import MIMETextfrom email.utils import formataddrmy_sender='source_mail_account' #发件人邮箱账号,为了后面易于维护,所以写成了变量my_user='target_mail_account' #收件人邮箱账号...原创 2018-09-09 19:05:12 · 957 阅读 · 0 评论 -
python拼接多个结构相同的excel表
import pandas as pdimport osFolder_Path = r'D:\5-Python\拼接\source' SaveFile_Path = r'D:\5-Python\拼接\target' SaveFile_Name = r'汇总.csv' os.chdir(Folder_Path)file_list ...原创 2018-09-09 19:07:03 · 2491 阅读 · 0 评论 -
python获取ip代理池
from bs4 import BeautifulSoupfrom urllib.request import urlopenfrom urllib.request import Requestdef get_ip_list(obj): ip_text = obj.findAll('tr', {'class': 'odd'}) # 获取带有IP地址的表格的所有行 ip_...原创 2018-09-09 19:07:56 · 676 阅读 · 0 评论 -
python爬取天眼查数据(未破解图片验证及ajax版)
import timeimport requestsfrom bs4 import BeautifulSoupimport lxmlimport jsonimport copyimport csvcompany_base_url = 'https://www.tianyancha.com/search?key='search_list = [] #搜索空间result_dir ...原创 2018-09-09 19:11:00 · 2581 阅读 · 0 评论 -
python:csv写入mysql
import pandas as pdimport pymysqldef company_to_db(data_path, db_params): data = pd.read_csv(data_path, header=None, engine='python') db = pymysql.connect(db_params['host'], db_params['use...原创 2018-09-14 18:35:27 · 698 阅读 · 0 评论 -
机器学习-贝叶斯算法
1、 data_handler.py from load_data import From_fileimport pandas as pddef Data_disperse(data, disperse_col, money_split_rule): money_split_str = [] money_distribute = [] money_typ...原创 2018-10-11 19:21:08 · 363 阅读 · 0 评论 -
python数据可视化——echarts
from pyecharts import Bar, Pie, Scatter, Gauge, HeatMap, Funnel, WordCloud, Line, Grid'''attr = ['衬衫', '羊毛衫', '雪纺衫', '裤子', '高跟鞋', '袜子']v1 = [5, 20, 36, 10, 75, 90]v2 = [10, 25, 8, 60, 20, 80]bar...原创 2018-10-16 10:26:58 · 885 阅读 · 0 评论 -
学习笔记@SensorsData
1、 如何使用SensorsData2、 如何梳理需求3、 为何采取事件模型:设计事件4、 简单的数据采集Demo原创 2018-03-12 09:17:24 · 2328 阅读 · 0 评论 -
3大领域,4大方向,做好数据分析岗位的职业规划
最近有不少同学在后台问我数据分析的职业发展相关,这里先列一个简易大纲。它更多是以我所在的互联网行业展开的。入门和职业规划应该从两个角度考虑:领域和路线。领域是不少新人常忽略的要素,其实数据分析不会脱离业务存在。你进入哪个行业,很大程度会决定你初期的技能树和技能点。譬如金融领域的风控模型、营销领域的生命周期、广告领域的点击率预估等,各有各的特色。如果是一位应届生,不妨多了解自己感兴趣的领域,和专业相...转载 2018-03-15 11:09:05 · 16030 阅读 · 5 评论 -
数据及分析那点事儿
基础:这世上只有时间对于每一个人都是公平的,只不过从先辈身上延续而来以及自身的时间质量不一样。1) 万物都是数据,只是数据源的形式和数据获取的方式不同2) 万事都是算法,每个个体除去生来的不同,真正有区别的是思维方式,进一步反映到行为方式以及习惯例如:我们的形、色、闻、味、触五种感觉器官会无时不刻地抓取周遭环境的信息,再经过大脑的分析判断,最终再转化为对外界环境的行为;这种分析原创 2018-01-29 14:34:34 · 256 阅读 · 0 评论 -
几张图上手SPSS
背景介绍 数据分析的主要过程Spss在数据分析过程中负责的相应环节 工具永远都是工具,它只是个手段,咱们只需要学会上手,剩下的都交给具体应用场景实战即可;但说是几张图上手spss,也得读者有一定的基础,而基础更多靠自己,功夫在平时,本人也坚决抵制伸手党。数据录入纯数据ASCII文本文件/记录式文件原创 2018-02-06 09:36:31 · 969 阅读 · 0 评论 -
python实现顺序结构基本爬虫,爬取福利图片
Python安装1、 版本2.7,直接百度上下载即可2、 傻瓜式安装,记得勾选将python加入Path环境变量,不然一会儿还得手动配置3、 安装成功,来个helloworldPython代码1、 爬获校花网的基本代码import reimport requests respose=requests.get('http://www.xiaohuar.原创 2018-02-06 13:58:58 · 1098 阅读 · 0 评论 -
两张图秒懂Python版爬虫
得有一定的相关基础!得有一定的相关基础!得有一定的相关基础!具体python代码实现百度里一大堆,有库在手,天下我有,重在理解原理!具体python代码实现百度里一大堆,有库在手,天下我有,重在理解原理!具体python代码实现百度里一大堆,有库在手,天下我有,重在理解原理!爬虫主要难点在运用抓取策略提高效率和准确率,以及安全限制的攻坚战。原创 2018-02-06 13:02:50 · 419 阅读 · 1 评论 -
一张图读懂数据分析
原创 2018-02-07 10:43:49 · 1413 阅读 · 0 评论 -
SPSS案例集之随机数生成及其箱型
背景介绍: 今后将陆续推出SPSS的实战案例集,借此熟悉SPSS软件功能,并夯实统计学基础。随机数生成及其箱型图案例: 1、 通过SPSS生成100个符合标准正态分布N(0,1)的随机数 1) 设定SPSS变量(元数据)“编码”,并通过excel的sum(X+1)整理出一列“1-100”的数据,Copy至SPSS的“数据”中;旨在高速SPSS我要生成随机数的个数是100个...原创 2018-02-09 16:55:05 · 8955 阅读 · 0 评论 -
python描述性统计分析
1、 数值分析from numpy import arrayfrom numpy.random import normal, randintlist_data = [1, 2, 3] #使用List来创造一组数据array_data = array([1, 2, 3]) #使用array来创造一组数据normal_data = normal(0, 10, size=100)...原创 2018-10-10 19:19:20 · 4373 阅读 · 0 评论