- 博客(7)
- 收藏
- 关注
原创 kettle实操-作业与转换
作业与转换注意:记住要放数据库驱动(jar包)在lib目录中。需要共享数据库,不用多次重新设置数据库的连接。1、任务:执行两个转换后发送邮件。(发送邮件需要接收的为企业邮箱)转换1:取出mysql数据库user1表中id,name,age字段的数据,并插入更新到sql_study数据库中的user1表中。转换2:excel1文件数据输入到excel2文件转换1:(1)转换前(2)转换后转换2比较简单,不再叙述。...
2021-04-12 00:19:21
341
原创 Kettle的简介和使用总结
1. Kettle简介(1)Kettle是ETL工具,数据抽取高效稳定。中文名水壶,把各种数据放到一个壶里,然后以一种指定的格式流出。(2)Kettle中有两种脚本文件,transformation和job,transformation完成针对数据的基础转换,job则完成整个工作流的控制。(3)Kettle的核心组件:Spoon:通过图形接口,用于编辑作业和转换的桌面应用。Pan:一个独立的命令行程序,用于执行Spoon编辑的转换和作业。Kitchen:一个独立的命令行程序,用于执行由Spoon
2021-04-11 22:42:18
6940
原创 Python爬虫与数据分析
Python爬虫与数据分析目的爬取网易云音乐歌曲热评,分析热评特征。思路(1)爬取华语歌单中所有歌单url(2)从每篇歌单地址中爬取每首歌的url(3)从每首歌的首页爬取热评代码(1) 爬取华语歌单中所有歌单url,从歌单url获取歌单中每首歌的歌名和id,并保存到文件music_163_02.csv。import loggingimport requestsfrom pyquery import PyQuery as pqimport pandas as pdimport r
2021-04-08 11:41:50
2825
3
原创 EXCEL常用函数——计算统计函数
EXCEL中的计算统计类函数。我们大致分成7类来介绍统计类函数。1. ** 求和SUM,SUMIF,SUMIFS**SUM(Number1,[Number2],……):计算单元格区域中所有数值的和SUMIF(range,criteria,[sum_range]);对满足的单元格求和SUMIFS (sum_rang,criteria_range1,criteria1,[criteria_range2,criteria2],…):对一组给定条件指定的单元格求和。关键的参数:a. sum_range求
2021-03-24 17:59:06
3334
原创 Python连锁门店的数据分析
Python连锁门店的数据分析1、导入的excel数据2、代码#连锁门店的数据分析#导入数据源import pandas as pdfrom datetime import datetimedata = pd.read_csv(r"C:/Users/Showing/Desktop/shop.csv", parse_dates=["成交时间"],encoding="gbk",engine="python")# 1、哪些类别的商品比较畅销,订单表中对类别ID进行分组,对分组后的销量进行求和,
2021-03-06 22:50:17
1143
原创 python自动化报表demo
python自动化报表demo#利用Python实现报表自动化import pandas as pdfrom datetime import datetimedata=pd.read_csv(r"C:\Users\Showing\Desktop\order.csv",parse_dates=["成交时间"],engine="python",encoding="gbk")data.head()data.info()#定义变量,作为实参传入This_data = data[(data["成交时
2021-03-04 21:44:12
296
3
原创 jQuery滚动顶部固定导航菜单
jQuery滚动顶部固定导航菜单图片效果如下:index.html<!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Transitional//EN" "http://www.w3.org/TR/xhtml1/DTD/xhtml1-transitional.dtd"><html xmlns="h
2018-10-15 22:51:12
948
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人