自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(170)
  • 资源 (2)
  • 收藏
  • 关注

原创 链表表示数字相加 go语言版本

链表表示数字相加 go语言版本给定两个非空链表来表示两个非负整数。位数按照逆序方式存储,它们的每个节点只存储单个数字。将两数相加返回一个新的链表。你可以假设除了数字 0 之外,这两个数字都不会以零开头。示例:输入:(2 -> 4 -> 3) + (5 -> 6 -> 4)输出:7 -> 0 -> 8原因:342 + 465 = 807pac...

2019-10-14 21:59:53 372

原创 雷顿学院与与河北各地高校签署战略合作伙伴关系

 2018年11月至12月期间,雷顿学院联合创始人陈小龙、高韩笛连续拜访唐山学院,华北理工大学,河北工程大学,河北北方学院。与校方代表深入洽谈,就大数据专业建设,人才培养方面签署战略合作伙伴关系。雷顿学院荣幸成为校方指定的大学生实习实训基地,雷顿学院继往开来,决心在校企合作人才培养上投入更大精力,为高校学生提供实习实训机会,并提供全方位的培训指导服务,力争在两年内培养1000名高校学子成功进入...

2019-01-10 17:39:02 627

原创 雷顿学院《百万大咖》校园行

2018年11月19日至11月22日,雷顿学院联合北京京泓智武科技有限公司走进唐山,在唐山师范学院,唐山学院和华北理工大学成功举办了《百万大咖》校园行的技术分享活动,此次分享的主题是《大数据行业发展与技术应用》。雷顿学院创始人陈小龙从 大数据行业发展、大数据特点、大数据关键技术、大数据技术应用和大数据职业发展五个方面介绍了目前的大数据有关的情况。部分分享内容截图如下...

2018-11-24 01:28:24 828

原创 雷顿学院大数据一期课程免费下载

雷顿学院大数据课程,免费下载,详情加 qq 314312298,全国大数据技术交流qq群 201463512 链接:https://pan.baidu.com/s/1VBCacXoWq1X3yVntT5NXFg  密码:3cd1http://www.leidun.site/...

2018-11-09 12:07:53 515

原创 雷顿学院大数据(一期课程)

 雷顿学院大数据课程大纲(第一期)学 时:75 课时适用对象:雷顿学院招收大数据班全体学员 一、课程的性质与目标互联网企业作为大数据的发源地,一直都是大数据应用与技术快速发展的行业。作为大数据从业者,进入互联网企业工作,一直都是学习大数据与成就自己的最佳选择。目前互联网作为国内最热门的 IT 前沿阵地,逐渐成为热门转型与从业方向。本课程系统地介绍了互联网大数据发展历史及最新...

2018-11-09 11:59:40 647

原创 将博客搬至优快云

将博客搬至优快云

2018-10-29 09:07:03 121

转载 一文读懂Apache Kylin

“麒麟出没,必有祥瑞。”                              —— 中国古谚语Kylin思维导图前言随着移动互联网、物联网等技术的发展,近些年人类所积累的数据正在呈爆炸式的增长,大数据时代已经来临。但是海量数据的收集只是大数据技术的第一步,如何让数据产生价值才是大数据领域的终极目标。Hadoop的出现解决了数据存储问题,但如何对海量数据进行OLAP查询,却一...

2018-10-23 12:59:21 302

原创 hive安装

雷顿学院大数据  雷顿学院大数据:http://www.leidun.site/hive安装  下载hive http://mirror.bit.edu.cn/apache/hive/下载后解压 配置命令将hive加入命令vim ~/.bash_profile添加如下命令export HIVE_HOME=/usr/local/Cellar/hive/1.2.1/libexec保存文件 mysq...

2018-10-07 16:22:57 354

原创 hive jdk9 10报错

因为jdk9还不成熟,并且我直观上对之前老版本编译出的jar包有些不兼容,比如Exception in thread "main" java.lang.ClassCastException: java.base/jdk.internal.loader.ClassLoaders$AppClassLoa 这个还能搜到原因,是因为jdk9的 将URLClassLoader 作为系统的ClassLoade...

2018-10-06 04:41:19 830

原创 广告系统技术实践

雷顿大数据技术学院:http://www.leidun.site/广告是许多互联网公司的主要营收手段,百度的搜索广告,阿里的电商广告,微信的信息流广告和公众号内广告,头条的信息流广告等。今天分享的主题就是广告系统架构的基本概括。下面是一个比较简易的广告系统架构图,从这个图中我们可以看到广告系统各个模块之间的流程关系, 我画的这个图比较简单,但是实际上整个庞大的广告系统来说是非常复杂的。图 1 广告...

2018-09-24 00:27:02 1253

原创 thrift编写服务端 客户端

雷顿大数据技术学院:http://www.leidun.site/1 编写 thrift文件文件名helloworld.thriftHelloWorld {    ping()say(:msg)}使用命令 thrift --gen py hellowrold.thrift生成基础文件生成结果目录格式如下server.pysyssys.path.insert()sys.pathhello...

2018-09-13 18:44:19 260

原创 安徽合肥大数据技术培训教学课程大纲

雷顿学院大数据课程大纲(待完善)大数据培训,选择 雷顿学院 https://leidun.ke.qq.com/?tuin=12bc066alinux基础教程1. 初识Linux 1. Linux的历史 2. Linux的特点和企业中的地位 3. Linux的发行版本2. Linux环境配置 1. 安装与使用VirtualBox虚拟机 2. 磁盘分区 3. 安装Linux前的规划 4. 安装操作系统...

2018-09-10 02:04:59 560

原创 PySpark进阶--深入剖析wordcount.py

在本文中, 我们借由深入剖析wordcount.py, 来揭开Spark内部各种概念的面纱。我们再次回顾wordcount.py代码来回答如下问题对于大多数语言的Hello Word示例,都有main()函数, wordcount.py的main函数,或者说调用Spark的main() 在哪里数据的读入,各个RDD数据如何转换map与flatMap的工作机制,以及区别reduceByKey的作用W...

2018-08-31 20:07:51 488

原创 hadoop hive 安装

雷顿学院大数据:http://www.leidun.site/https://segmentfault.com/a/1190000009103629 hadoop 安装 datanode无法启动https://blog.youkuaiyun.com/baidu_16757561/article/details/53698746 hadoop namenode无法启动https://blog.youkuaiyun.com/...

2018-08-29 18:49:46 147

原创 python多进程使用函数封装

import multiprocessing as mpfrom multiprocessing import Processclass MyProcess(Process):    """    自定义多进程,继承自原生Process,目的是获取多进程结果到queue    """    def __init__(self, func, args, q):        supe...

2018-08-05 19:26:28 1320

原创 python 字典转对象

class DictToStruct:    def __init__(self, **entries):        self.__dict__.update(entries)struct = DictToStruct(**temp)

2018-08-05 19:22:39 1616

原创 python根据开始结束日期解析获得日周月

(b_datedays):    day = datetime.timedelta(=)    i (days):        b_date + day * i(start_date=end_date=):    (start_datedatetime.datetime) (end_datedatetime.datetime):        start = start_date...

2018-08-05 19:20:39 479

原创 在Apache Kylin中使用Count Distinct

雷顿学院大数据:http://www.leidun.site/在OLAP多维分析中,Count Distinct(去重计数)是一种非常常用的指标度量,比如一段时间内的UV、活跃用户数等等;从1.5.3开始,Apache Kylin提供了两种Count Distinct计算方式,一种是近似的,一种是精确的,精确的Count Distinct指标在Build时候会消耗更多的资源(内存和存储),Buil...

2018-08-04 17:30:52 573

原创 大数据分析界的“神兽”Apache Kylin有多牛?

雷顿学院大数据:http://www.leidun.site/本文作者:李栋,来自Kyligence公司,也是Apache Kylin Committer & PMC member,在加入Kyligence之前曾就职于eBay、微软。1.Apache Kylin是什么? 在现在的大数据时代,越来越多的企业开始使用Hadoop管理数据,但是现有的业务分析工具(如Tableau,Microst...

2018-08-04 17:29:51 104

原创 一文读懂Apache Kylin

雷顿学院大数据:http://www.leidun.site/“麒麟出没,必有祥瑞。”                              —— 中国古谚语Kylin思维导图前言随着移动互联网、物联网等技术的发展,近些年人类所积累的数据正在呈爆炸式的增长,大数据时代已经来临。但是海量数据的收集只是大数据技术的第一步,如何让数据产生价值才是大数据领域的终极目标。Hadoop的出现解决了数据存储...

2018-08-04 17:27:56 246

原创 数据立方体与OLAP

雷顿学院大数据:http://www.leidun.site/ 前面的一篇文章——数据仓库的多维数据模型中已经简单介绍过多维模型的定义和结构,以及事实表(Fact Table)和维表(Dimension Table)的概念。多维数据模型作为一种新的逻辑模型赋予了数据新的组织和存储形式,而真正体现其在分析上的优势还需要基于模型的有效的操作和处理,也就是OLAP(On-line Analytical ...

2018-08-04 17:26:54 315

原创 Apache Kylin在美团数十亿数据OLAP场景下的实践

本文根据2016年4月北京Apache Kylin Meetup上的分享讲稿整理,略有删节。美团各业务线存在大量的OLAP分析场景,需要基于Hadoop数十亿级别的数据进行分析,直接响应分析师和城市BD等数千人的交互式访问请求,对OLAP服务的扩展性、稳定性、数据精确性和性能均有很高要求。本文主要介绍美团的具体OLAP需求,如何将Kylin应用到实际场景中,以及目前的使用方式和现状。同时也将Kyl...

2018-08-04 17:25:36 308

原创 mysql数据导出导入

1. 从mysql查询出数据导入 txt 文件mysql -h 10.3.20.251 -u addata_r -P 3417 -pARreBOEhw9MijIEN_eP6BYKOxkTikUnl ad_data -e "select id, advertiser_id,date,cost,0 as cash_cost, 0 as reward_cost, 0 as return_goods_co...

2018-08-03 17:00:07 88

原创 mac安装ftp命令

10.13 以后就没了........这样操作亲测可以恢复 1,brew install telnet 2,brew install inetutils 3,brew link --overwrite inetutils雷顿学院大数据:http://www.leidun.site/

2018-07-05 16:01:40 2513

原创 mysql查看表更改时间

select * from information_schema.TABLES where TABLE_NAME in ('app_android_grab', 'android_app_category', 'ios_app_category', 'app_ios_grab')innodb引擎表的update_time为null,这样的可通过查看数据文件看最近更改时间...

2018-04-25 15:06:12 1503

原创 git 强制覆盖本地

git fetch --allgit reset --hard origin/mastergit pull

2018-04-19 17:53:05 95

原创 理解innodb的锁(record,gap,Next-Key lock)

https://blog.youkuaiyun.com/cug_jiang126com/article/details/50596729http://www.cnblogs.com/zhoujinyi/p/3435982.html https://tech.meituan.com/innodb-lock.htmlRecord lock单条索引记录上加锁,record lock锁住的永远是索引,而非记录本身,即...

2018-03-30 19:51:25 209

原创 MySQL DELETE 删除语句加锁分析

MySQL DELETE 删除语句加锁分析Posted on 2017-09-24 by Harvey Leave a comment  MySQLhttp://www.fordba.com/lock-analyse-of-delete.html1. 前言在MySQL的使用过程中,对SQL加锁的类型经常感到疑惑,这让死锁分析也变得举步维艰。因此需要将MySQL的各种SQL在各个隔离级别下加的锁进行...

2018-03-30 13:01:20 15992

原创 mac下PYTHON安装

雷顿学院大数据:http://www.leidun.site/Mac OSX 正确地同时安装Python 2.7 和Python3ABOUT 6 MINUTES TO READ/11/29/2015/CANDY TSAI/0 COMMENTSPython3出来了(其实已经出来很久了,晕)!但是还是有很多library还是使用Python2.7,所以要怎么在Mac里面同时装这两个版本,并且和系统所使...

2018-03-30 11:29:21 191

原创 Git强制覆盖本地文件

Git强制覆盖本地文件git fetch --allgit reset --hard origin/mastergit pull

2018-03-29 10:43:53 1013

原创 Hive常用命令及设置

Hive常用命令及设置alter table ad_app.app_accounting_daily add columns (return_cost bigint) cascade;数据倾斜set hive.map.aggr=true;set hive.groupby.skewindata=true;set mapreduce.job.queuename = root.data.adonline...

2018-03-23 23:25:51 147

原创 「Git」合并多个 Commit

在使用 Git 作为版本控制的时候,我们可能会由于各种各样的原因提交了许多临时的 commit,而这些 commit 拼接起来才是完整的任务。那么我们为了避免太多的 commit 而造成版本控制的混乱,通常我们推荐将这些 commit 合并成一个。首先假设我们有3个 commitgit-log-origin.png我们需要将 2dfbc7e8 和 c4e858b5 合并成一个 commit,那...

2018-03-13 14:39:10 80

原创 mysql导出导入数据

mysql -h 121.30.20 -u addata_r -P -pARreBOEhw9MijIEN_eP6BYKOxkTikUnlmysql -h 121.30.20 -u ad_plat_w -P -p2JoYTD3257ZWM5M_IJhuJ9FltNUZcQ8umysql -h 121.30.20 -u addata_r -P -pARreBOEhw9MijIEN_eP6BYK...

2018-02-26 19:40:15 175

原创 vim 树形目录插件NERDTree安装

vim 树形目录插件NERDTree安装https://yq.aliyun.com/articles/47494

2017-12-30 21:46:55 124

原创 现货!《PHP7实践指南:o2o网站与App后台开发》京东天猫有售

终于发售了,啥也不想说了,喜欢的或需要的就点击 链接 进去购买吧。另外此书将作为 2017 PHP全球开发者大会 现场活动用书天猫购书包邮 PHP7实践指南:O2O网站与App后台开发 数据库设计 PHP开发工程 适合作为企业内部培训、培训机构和大专院校的教学参考书京东购书PHP7实践指南:O2O网站与App后台开发 陈小龙 PHP7语言编程教程书籍 php7PHP全球开发者大会2017 PHP ...

2017-11-02 18:39:59 255

原创 Linux 基本命令不能用的解决方法

http://blog.youkuaiyun.com/houmou/article/details/51020709问题描述http://blog.youkuaiyun.com/houmou/article/details/51020709最近某次,新建一个ssh客户端后,发现好多命令都不能用了比如:ls, vi, cat等,提示:-bash: XX: No such file or directory12但在其它还未关...

2017-10-31 23:55:35 290

原创 html5+go+websocket简单实例代码

http://www.cnblogs.com/wangrudong003/p/5535689.html

2017-10-30 09:51:38 442

原创 ELK+Kafka 企业日志收集平台(一)

 码字很辛苦,转载请注明来自运维人的《ELK+Kafka 企业日志收集平台(一)》背景:最近线上上了ELK,但是只用了一台Redis在中间作为消息队列,以减轻前端es集群的压力,Redis的集群解决方案暂时没有接触过,并且Redis作为消息队列并不是它的强项;所以最近将Redis换成了专业的消息信息发布订阅系统Kafka, Kafka的更多介绍大家可以看这里:传送门  ,关于ELK的知识网上有很多...

2017-10-13 10:58:54 191

原创 Yii 2.0实现联表查询加搜索分页的方法示例

前言最近在学习yii2.0,在使用yii2.0过程中遇到一些问题,现将查询搜索分页的方法整理如下,分享出来供大家参考学习,话不多说,来一起看看详细的介绍:主表:`article`关联表:`article_class`方法如下1、使用gii创建CRUD和search不详述2、在Article中添加的关联内容,代码#注释部分class Article extends \yii\db\ActiveRec...

2017-10-11 19:24:34 190

原创 Oh-My-Zsh 操作 Git 的快捷键

本篇文章介绍 Oh-My-Zsh 安装,以及 git 快捷键。也许你已经烦透了每天 git add . git commit -m 'some fix' git push...如果操作变成这样 ga . gcmsg 'some fix' gp是不是很炫酷,好吧,对于已经使用的人没什么新鲜感。接下来针对好奇的 Program development engineer(程序猿),做详细介绍。相信 gi...

2017-09-19 10:17:32 1745

雷顿学院大数据讲课资料

雷顿学院大数据讲课资料,包含hadoop,spark hive hbase,kafka elasticsearch 等大数据全套技术课程资料,代码文字图文ppt各种资料,最全 http://www.leidun.site

2018-11-09

雷顿学院大数据-微博大数据可视化

雷顿学院大数据-微博大数据可视化教学可见,代码文档图文内容

2018-11-09

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除