数据仓库学习
麦田里的虫子
这个作者很懒,什么都没留下…
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
数据仓库设计
一、分析目标: 斗鱼弹幕礼物发送情况 二、设计思路: 参考了数据仓库工具箱第三版设计思想 1.选择业务过程(通常用行为动词表示) 用户输入文字,礼物并发送。 2.声明粒度(如何描述事实表中每个行的内容) 每个用户发送的信息用一行表示。 3.确定维度(如何描述业务事件产生的度量的数据) 1.用户维度 2.房间维度 //3.数据来源维度 ...原创 2017-12-30 23:11:23 · 387 阅读 · 0 评论 -
分析斗鱼弹幕礼物发送情况
分析斗鱼弹幕礼物发送情况 一.数据来源 python抓取斗鱼直播间3168536的弹幕获得 二.数据处理 对得到的数据维度建模、ETL过程最终得到事实表dw_fact_analysis,取2017-12-17日 17时 ~ 24时直播弹幕数据 三.描述性分析 1.房间内每5分钟观众赠送礼物数量 SQL、PYTHON代码部分: select date...原创 2018-03-08 23:36:52 · 2759 阅读 · 1 评论 -
抓取斗鱼直播弹幕
主要PYTHON代码 登录弹幕服务器,并发送TCP包和心跳包 class danmaku(object): def __init__(self): self.douyu_service_ip = ('117.148.167.219', 8601) self.type_douyutoMe = 690 self.type_metoDouy...原创 2018-03-14 10:37:20 · 2695 阅读 · 0 评论
分享