自定义博客皮肤VIP专享

*博客头图：

格式为PNG、JPG，宽度*高度大于1920*100像素，不超过2MB，主视觉建议放在右侧，请参照线上博客头图

请上传大于1920*100像素的图片！

博客底图：

图片格式为PNG、JPG，不超过1MB，可上下左右平铺至整个背景

栏目图：

图片格式为PNG、JPG，图片宽度*高度为300*38像素，不超过0.5MB

主标题颜色：

RGB颜色，例如：#AFAFAF

Hover：

RGB颜色，例如：#AFAFAF

副标题颜色：

RGB颜色，例如：#AFAFAF

预览 取消 提交

自定义博客皮肤

-+
上一步保存

十五楼亮哥

肯与邻翁相对饮，隔篱呼取尽馀杯。

  • 博客(6)
  • 资源 (24)
  • 收藏
  • 关注
排序：
按最后发布时间
按访问量
RSS订阅

原创 第一章：专栏大纲

很多人数仓开发人员有一个误解，认为数仓开发的门槛极低，只需要会写SQL就可以了。其实不然，专业的数仓开发需要很多方便的知识沉淀，包括但不限于：需求理解，培养业务sense，指标梳理、数据采集、落仓、数据探索、数据建模、调度配置、数仓上线、数据核对、数仓下线等等。会搭建数仓不难，但是搭建一个规范的、高效的、高扩展的、低成本的数据仓库，绝对不是一件简单的事情。这既要知识面的宽度，更需要知识面的深度，当然少不了需要经验的积累。这里的经验就是多做项目，多踩坑，经过不断的总结和提升，你就能在新的项目和产品中少走一些

2021-01-26 15:52:54 321 1

原创 第六章：数据治理

1、数据治理的概念数据治理并不是一个新生事物，可以说，有数据的地方就存在数据治理，只不过随着数据应用的迅猛发展将它提到了一个高度，作为一个独立的研究领域。数据治理并没有标准的、严格的定义，概况地讲所有为提高数据质量而展开的业务、技术和管理活动都属于数据治理范畴。2、数据治理的目标Ensure metadata management and data documentation。确保元数据管理和数据文档Simplify data access and facilitate data usage a

2021-01-29 14:04:40 756

原创 第五章 节点开发

1、DDL建表语句表和字段必须有描述信息drop表前面加上IF EXISTS判断create表前面加上IF NOT EXISTS判断设置合理的生命周期，保证有用的历史数据不被删除，同时避免存储资源浪费使用常见的字段类型 DataTime、Bigint、Double、String，如使用其他字段，需要项目组评估DROP TABLE IF EXISTS ITSL_dev.dwd_sl_ams_tb_vms_cs_carinfo_d ;CREATE TABLE IF NOT EXISTS ITS

2021-01-28 14:17:05 603 1

原创 第四章：数据建模

1、数据建模的意义设想一下：情景1：如果需要建一个工厂，需要加入一条新的线路，上面2个情况，哪个更容易加呢？情景2：如果线路发生故障，需要排查问题点在哪里，上面2个情况，哪个更容易呢？这就引出了数据建模的作用：加快数据的运算效率，更方便扩展，适应新的数据产品需求。2、数据落仓将业务数据、日志数据、爬虫数据通过ETL工具，加载到数据中台的ODS层进行存储，这个过程就叫数据落仓。3、数据探索数据落仓之后，需要数仓开发人员，申请相关ODS层表的读取权限，审核通过之后，就可以进行数据探索了。数

2021-01-27 18:57:38 1074

原创 第三章：数据采集

数据采集，在数仓开发过程中至关重要，它要求数据类型全、数据量完整、尽可能覆盖数据流转的各个环节，它是数仓建设的核心底座，毕竟巧妇难为无米之炊嘛。1、数据的来源(1)数据库数据库不用过多介绍，业务系统例如CRM、ERP、财务系统等等，每天都会生成大量的业务数据，存储在mysql、SqlServer、Oracle等关系型数据库中。(2)日志日志也是采集数据的重要来源，因为日志记录了程序执行的情况，例如用户登录数据、用户操作数据等，使用这些数据可以统计PV、UV等指标。(3)前端埋点用户很多前端请求

2021-01-26 18:16:53 1049 2

原创 第二章：指标管理

这里涉及到两个概念：数据指标和指标体系。数据指标：对业务中产生的内部数据或者互联网中爬取的外部数据，按照一定的业务逻辑，使用一定的技术手段进行加工处理，能够描述、分析、预测业务的结果数据。指标体系：‍指标体系是将零散单点的具有相互联系的指标，系统化的组织起来，通过单点看全局，通过全局解决单点的问题。那就产生了一个问题，既然有了指标，干嘛还需要指标体系呢？一个指标没办法解决复杂的业务问题，这就需要使用多个指标从不同维度来评估业务，也就是使用指标体系。比如说衡量一个淘宝店的业务发展，我们可以用一个核心

2021-01-26 17:06:09 1668

gooseeker-master.rar
jieba分词代码，生成词云图

2021-09-24

spring框架学习源码
代码中包括SpringCloud注册中心Eureka服务器，Eureka服务提供者和消费者，Hystrix容错保护、Zuul网关服务等等

2018-10-04

SpringCloud+Eureka+Ribbon实践代码Demo
SpringCloud+Eureka+Ribbon实践代码Demo，SpringCloud是基于SpringBoot。Eureka：注册中心、服务发现。Ribbon：客户端负载均衡，负责对eureka中的服务进行调用。

2018-09-29

阿里巴巴中台服务架构
阿里巴巴中台服务架构介绍，微服务学习材料。中台服务架构的思想是伴随着企业规模不断扩大、业务多元化而形成的。

2018-09-20

cronolog工具切割tomcat日志
tomcat日志catalina.out默认不会分割，随着运行时间越来越长，文件越来越大对于查询是个很大的麻烦，所以使用cronolog工具对其进行分割。

2016-04-20

red5流媒体服务器安装文件
流媒体指以流方式在网络中传送音频、视频和多媒体文件的媒体形式。 相对于下载后观看的网络播放形式而言，流媒体的典型特征是把连续的音频和视频信息压缩后放到网络服务器上，用户边下载边观看，而不必等待整个文件下载完毕

2016-01-27

nginx安装文件
Tomcat在高并发环境下处理动态请求时性能很低，而在处理静态页面更加脆弱。虽然Tomcat的最新版本支持epoll，但是通过Nginx来处理静态页面要比通过Tomcat处理在性能方面好很多。nginx安装文件window版

2016-01-09

nginx负载均衡配置文件demo
Tomcat在高并发环境下处理动态请求时性能很低，而在处理静态页面更加脆弱。是通过Nginx来处理静态页面要比通过Tomcat处理在性能方面好很多。本例为nginx负载均衡配置方法

2016-01-09

Memcached_Session_Manager集群共享session需要的jar
MSM--memcached session manager是一个高可用的Tomcat session共享解决方案，除了可以从本机内存快速读取Session信息(仅针对黏性Session)外，同时可使用memcached存取Session，以实现高可用。

2016-01-09

memchched win64 安装包
memchched win64 安装包，window环境亲测可用。

2015-12-19

chrome浏览器的二维码插件
chrome浏览器URL二维码生成器， 方便的生成浏览网页时生成对应的二维码

2015-09-21

微信支付 微支付,订单查询，退款 V3版 亲测可用
微信支付 V3版 支付，退款申请，订单查询。

2015-09-18

微信支付工具类
（1）用户打开商户网页选购商品，发起支付，在网页通过JavaScript调用getBrandWCPayRequest接口，发起微信支付请求，用户进入支付流程。 （2）用户成功支付点击完成按钮后，商户的前端会收到JavaScript的返回值。商户可直接跳转到支付成功的静态页面进行展示。 （3）商户后台收到来自微信开放平台的支付成功回调通知，标志该笔订单支付成功。

2015-09-08

REST架构风格详解
但是近年来移动互联网的发展，各种类型的Client层出不穷，RESTful可以通过一套统一的接口为 Web，iOS和Android提供服务。 另外对于广大平台来说，比如Facebook platform，微博开放平台，微信公共平台等，它们不需要有显式的前端，只需要一套提供服务的接口， 于是RESTful更是它们最好的选择。

2015-08-26

site-1.8.4.zip
安装android eclipse svn插件。本人使用的eclipse为adt-bundle-windows-x86

2015-08-18

wechat4j学习指南
wechat4j是一个帮助你开发微信应用的jar包，使用它，你开发微信公众号应用只需要几秒钟的时间，完全不用关注太细节的东西。

2015-07-22

如何提升网站的用户体验
什么是用户体验，为什么注重用户体验，用户体验如何体现。优秀的用户体验是什么？举例说明

2015-01-15

Google Java编程风格指南
这份文档是Google Java编程风格规范的完整定义。当且仅当一个Java源文件符合此文档中的规则， 我们才认为它符合Google的Java编程风格。 与其它的编程风格指南一样，这里所讨论的不仅仅是编码格式美不美观的问题， 同时也讨论一些约定及编码标准。然而，这份文档主要侧重于我们所普遍遵循的规则， 对于那些不是明确强制要求的，我们尽量避免提供意见。

2015-01-15

Java解析apk文件
解析apk文件，从apk中可以拿到版本号码，版本名称，包名，权限， 支持的android平台最低版本号，支持的SDK版，建议的SDK版本，应用程序名，程序的图标等一系列信息。

2015-01-14

三种json解析方法
json数据格式现在很流行，解析方便，传输速度快，这里举例实现了三种类库解析json：json-lib；Gson；Jackson，非常方便！

2015-01-14

springMVC工程demo
Spring MVC属于SpringFrameWork的后续产品，已经融合在Spring Web Flow里面。Spring 框架提供了构建 Web 应用程序的全功能 MVC 模块。使用 Spring 可插入的 MVC 架构，可以选择是使用内置的 Spring Web 框架还可以是 Struts 这样的 Web 框架。

2015-01-14

SSH框架封装demo
SSH 为 struts+spring+hibernate的一个集成框架，是目前较流行的一种Web应用程序开源框架。

2015-01-14

java设计模式
设计模式（Design pattern）是一套被反复使用、多数人知晓的、经过分类编目的、代码设计经验的总结。使用设计模式是为了可重用代码、让代码更容易被他人理解、保证代码可靠性。 毫无疑问，设计模式于己于他人于系统都是多赢的，设计模式使代码编制真正工程化，设计模式是软件工程的基石，如同大厦的一块块砖石一样。项目中合理的运用设计模式可以完美的解决很多问题，每种模式在现在中都有相应的原理来与之对应，每一个模式描述了一个在我们周围不断重复发生的问题，以及该问题的核心解决方案，这也是它能被广泛应用的原因。本章系Java之美[从菜鸟到高手演变]系列之设计模式，我们会以理论与实践相结合的方式来进行本章的学习，希望广大程序爱好者，学好设计模式，做一个优秀的软件工程师！

2015-01-14

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章？
取消 删除