birdflyinhigh的博客

import requestsimport base64from Crypto.Cipher import AESfrom urllib.parse import urlparseimport pandas as pdimport osimport timeheaders = { "User-Agent": 'Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/537.36 (KHTML, like Gecko) .

需求：公司先前的数据源主要通过presto, 直接查询presto关联的hive和mysql表，在这种模式下，分析师通过写sql, 查询自己有权限的数据库和表，然后可视化做成看板供业务人员查看。虽然在SQL层面做到了sql数据库和表解析，鉴权机制，但是还是存在很大的数据安全隐患，比如数据泄露，数据无法脱敏等问题。因此，公司提出了将关键数据，关键指标接口化，通过http或者dubbo接口提供指标数...

1. 安装jupyter notebookpip3 install jupyter notebook2. 设置jupyter notebook远程操作设置远程登录密码(jupyter) python@ubuntu:~/Desktop/code$ pythonPython 3.7.3 (default, May 30 2019, 17:03:20) [GCC 5.4.0 20160...

KNN(K近邻算法) 中超参数调优，如何生成所有的指标组合.在KNN算法中，参数的调优要么调整特征的组合，要么改变K值。一个常用但是简单的方式是，网格搜索(grid search).比如加入特征组包括:features = ['accommodates', 'bedrooms', 'bathrooms', 'beds', 'minimum_nights', 'maximum_nig...

Pandas基础前言1. 理解pandas和numpy2. 理解dataframe(2D数组)3. DF 选择列4. 列选择的简洁方式5. series选择行6. DF选择行总结： 使用通用公司： df.loc[row, column], row和column可以是单个标签，列表，标签切片，布尔索引7、 Series和DF的Describe方法8. 其他方法9. Pandas赋值10. 使用布尔索...

python 数据分析地址:http://item.taobao.com/item.htm?id=557746408785Numpy 布尔索引1. Numpy读取csv文件# 使用Numpy读取csv文件import numpy as np taxi = np.genfromtxt('nyc_taxi.csv', delimiter=',', skip_header=True)# 获取...

python 数据分析地址:http://item.taobao.com/item.htm?id=557746408785Numpy基础1.理解矢量化操作python之所以流行，是因为写程序确实方便。执行python程序的时候，程序交给python解释器执行。开发人员并不需要处理内存分配和清理等工作。python属于高级语言，书写快，但是执行慢；C语言属于低级语言，书写慢，但是执行快...

学习python和数据分析推荐地方：www.lynda.com获取lynda官网会员的方式：https://item.taobao.com/item.htm?id=588604400195很多面试题目都需要处理csv文件，以下是几种种处理csv文件的方法：方法一： 使用Python基础语言编写def read_csv(file_name): f = open(fil...

http://note.youdao.com/noteshare?id=52a3afd6118c510d8a1dfcc56ccab1bf&sub=A5846EED8C684CC68AD97C5EAB4CB3DBhttp://item.taobao.com/item.htm?id=557746408785

Django简介 Model Views Controller设计思想，主要的目的是解耦合，开发原则是高内聚，低耦合 Model:负责操作数据库，和views打交道 Views:负责接收http request,处理业务逻辑，返回httpResponse Templates:封装HTML函数 搭建虚拟环境 不同的项目可能需要在不同的版本下运行，所以需要建立一个虚拟的环境运行不同的Dja

www.lynda.com作为全球一流的在线培训网站，一直以高质量的视频课程著称。其课程内容也是紧跟行业潮流，本人最近学了里面的一门课程Learning Python and Django, 分享一下。课程链接：https://www.lynda.com/Django-tutorials/Up-Running-Python-Django/386287-2.html 获取lynda.com永久会员的

www.lynda.com作为全球一流的在线培训网站，一直以高质量的视频课程著称。其课程内容也是紧跟行业潮流，本人最近学了里面的一门课程Learning Python and Django, 分享一下。课程链接：https://www.lynda.com/Django-tutorials/Up-Running-Python-Django/386287-2.html获取lynda.com永久会员的链接

学习python和数据分析推荐地方： www.lynda.com  获取lynda官网会员的方式：http://item.taobao.com/item.htm?id=557746408785from pymysql import connectclass JD(object): """创建一个京东的服务""" def __init__(self): "

学习python和数据分析推荐地方： www.lynda.com  获取lynda官网会员的方式：http://item.taobao.com/item.htm?id=557746408785-- 查询 -- 查询所有字段 -- select * from 表名; select * from students; -- 源生的写法 select students.* from stu

学习python和数据分析推荐地方： www.lynda.com  获取lynda官网会员的方式：http://item.taobao.com/item.htm?id=557746408785-- 子查询 select .... select -- 在一个select 语句中有嵌套了一个select 语句 -- 子查询语句 需要出现在 小括号之内 -- 标量子查询 子查询得到的结构

学习python和数据分析推荐地方： www.lynda.com  获取lynda官网会员的方式：http://item.taobao.com/item.htm?id=557746408785数据库用户名: root密码: mysql# """""" -- // /* */char(5) 长度固定为5的字符串 ab --> "ab "var

本文用到的数据在评论区留下邮箱即可。本文通过对美国枪杀数据的探索，综合运用python做一些数据的提取和统计

本文用到的数据,可以加QQ跟群主获取：群名称：PYTHONERS-数据群   号：663468799学习python和数据分析推荐地方： www.lynda.com  获取lynda官网会员的方式：get_lynda_com()-----------------------------------------------------------------------------------

本文用到的数据,可以加QQ跟群主获取：群名称：PYTHONERS-数据群   号：663468799学习python和数据分析推荐地方： www.lynda.com  获取lynda官网会员的方式：get_lynda_com()----------------------------------------------------------------

本文用到的数据,可以加QQ跟群主获取：群名称：PYTHONERS-数据群   号：663468799学习python和数据分析推荐地方： www.lynda.com  获取lynda官网会员的方式：get_lynda_com()1. 终端命令格式command [-options] [parameters]2. 查阅帮助信息com

1. 命令行基础1. pwd 命令行大多数人通过图形用户界面（GUI）与计算机进行交互，视觉界面如下所示：这是Mac计算机上的桌面屏幕截图。每个程序都有一个图标，我们可以点击一个来启动相应的程序。在GUI出现之前，与计算机交互的最常用方式是通过命令行界面，我们也将其称为shell或终端（我们将在此任务中互换使用这些术语）。命令行界面让

1. time模块我们可以使用time.gmtime()函数将时间转换成更加易读的形式。该函数使用timestamp作为参数，返回struct_time类的一个实例对象。该实例对象可以用来表示当前时间的一些属性。比如： tm_year:  timestamp的年份tm_mon: timestamp的月份（1-12）tm_mday: timestamp的日期（1-31）tm_hour: 时间

写在前面的：本文用到的数据,可以加QQ跟群主获取：群名称：PYTHONERS-数据群   号：663468799学习python和数据分析推荐地方： www.lynda.com  获取lynda官网会员的方式：get_lynda_com()本文将使用legislators.csv数据集，数据预览：

写在前面的：本文用到的数据：http://www.evernote.com/l/AnzL68lV2tBPUKvrI7TmuERGir07Si-ZX9Q/学习python和数据分析推荐地方： www.lynda.com  获取lynda官网会员的方式：get_lynda_com()--------------------------------------------

如何读取CSV文件， 并对生日出现的次数本文将使用python语言，导入一个CSV文件，对文件数据进行处理，然后统计其中各个时间的生日出现的次数读取CSV文件列表的操作字符串的不可变性函数的定义和调用如何同时列表中元素的个数数据格式 year month date_of_month day_of_week births 1994 1 1 6 8096

安装Numpy的方法： 点击win+R+cmd, 输入pip install numpy---------------------------------------------------------------------------------------------------------------------------Python列表在表示数据时提供了一些优势：

人狠话不多，直接上码：import pygamefrom pygame.locals import *import timeimport random"""需求：设计一个打飞机游戏，实现的功能如下：1. 能显示我机，可以通过键盘控制飞机位置，按下space键盘可以实现发射子弹 2. 能自动加载敌机,敌机随机发射子弹，敌机左右移动，每个1秒往下移动。3. 我机发射

# ---------------Python时间和日期--------------------from datetime import datefrom datetime import timefrom datetime import datetimefrom datetime import timedelta# 1.date对象 获取今天的日期，并获取年月日，星期几toda

老师分配办公室的应用练习"""输入办公室个数输入老师的个数然后将了老师分配到办公室，保证每个办公室至少一个"""方法一：import randomwhile True: office_count = int(input("please input the total numbers of offices:")) teacher_count = int(