- 博客(50)
- 资源 (30)
- 收藏
- 关注
RSS订阅
原创 优快云，我又回来了……
站在此刻，回忆过去8年工作经历，感觉近几年作为技术为主的我，似乎逐渐在走向“荒废”，技术沉淀越发觉得少了，很多就是当时，或者那一阵子想想，还是之前学校或者毕业几年写的文章多，思路活跃，乐于并且有时间将自己的想法付诸笔端。所以，现在决定重新回到优快云，我会新开一个账号，将之前文章迁移过来，并且开始更新新的博文了……mark一下...
2020-05-31 21:08:26
413
原创 Flink重要知识点整理（知识沉淀，面试）
作为大数据领域炙手可热的大数据组件，Flink作为大数据行业跳槽必问的组件，整理一些Flink相关的面试题供大家参考，有些题言简意赅即可，大多数的博客冗余一堆的知识点，看完要好久，我想帮大家提炼总结出核心的点，以帮助大家临阵磨枪，短时间掌握，当你把知识提炼出来，你会发现你的知识进步了，当你把简单提炼的知识再用自己的语言详细的说出来，那你就成为很厉害的人了，希望帮助大家收获到自己满意的offer。所有的数据都天然带有时间的概念，必然发生在某一个时间点。把事件按照时间顺序排列起来，就形成了一个事件流，也叫作数据
2022-06-25 16:24:16
223
原创 kylin架构
Kylin概述 Apache Kylin™是一个开源的分布式分析引擎，为基于Hadoop的数据仓库，商务智能而生。提供Hadoop/Spark之上的SQL查询接口及多维分析（OLAP）能力以支持超大规模数据。它能在亚秒内查询巨大的Hive表。 Kylin的优势大致如下： 加速查询亚秒级响应 Kyl...
2020-07-01 15:30:40
396
原创 kylin高级设置
更新设置 refresh settings 这一步骤是为增量构建 cube 而设计的。 Auto Merge Thresholds:自动合并小的 segments 到中等甚至更大的 segment。如果不想自动合并，删除默认2个选项。 Volatile Range:默认为0，会自动合并所有可能的 cube segments，或者用...
2020-07-01 15:20:40
1442
原创 kylin build原理
BUILD操作 总体流程图 Build操作是构建一个cube指定时间区间的数据，由于kylin基于预计算的方式提供数据查询，构建操作是指将原始数据（存储在Hadoop中，通过Hive获取）转换成目标数据（存储在Hbase中）的过程。主要的步骤可以按照顺序分为四个阶段： 1、根据用户的cube信息计算出多个cuboid文件; ...
2020-07-01 15:00:50
269
原创 cubo构建流程
Bulid操作是构建一个Cube指定的时间区间的数据，Kylin是基于预计算获得高效的查询速度，因此需要通过Bulid，将原始数据（比如HIVE）转化为目标数据（比如HBASE）。我们选择上一节中的JOB进行整个流程分析。 Step1:生成中间临时数据（Create Intermediate Flat Hive Table） 根据C...
2020-07-01 14:50:50
403
原创 Spark常用api
spark core transformation map flatmap filter mapPartitions union distinct reduceByKey groupByKey cogroup sortByKey join coalesce repartition...
2020-07-01 14:40:50
308
原创 抽象类与接口区别
.Net中抽象类和接口的区别一、抽象类 (1)抽象方法只作声明，而不包含实现，可以看成是没有实现体的虚方法 (2)抽象类不能被实例化 (3)抽象类可以但不是必须有抽象属性和抽象方法，但是一旦有了抽象方法，就一定要把这个类声明为抽象类 (4)具体派生类必须覆盖基类的抽象方法 (5)抽...
2020-07-01 14:30:50
400
原创 kafka主要配置
############################# System ############################# #唯一标识在集群中的ID，要求是正数。 broker.id=0 #服务端口，默认9092 port=9092 #监听地址，不设为所有地址 host.name=debugo01 #处理网络请求的...
2020-07-01 14:10:50
122
原创 kafka优势及适用场景
优势： 高吞吐量、低延迟：kafka每秒可以处理几十万条消息，它的延迟最低只有几毫秒 可扩展性：kafka集群支持热扩展 持久性、可靠性：消息被持久化到本地磁盘，并且支持数据备份防止数据丢失 容错性：允许集群中节点故障（若副本数量为n,则允许n-1个节点故障） 高并发：支持数千个客户端同时读写 应用场景： 日志收集：一个公司可...
2020-07-01 14:00:50
2478
原创 内存泄露排查
概念 内存泄露(Memory Leak)：意思就是你用资源的时候为他开辟了一段空间，当你用完时忘记释放资源了，这时内存还被占用着，一次没关系，但是内存泄漏次数多了就会导致内存溢出 内存溢出(Out Of Memory---OOM)：系统已经不能再分配出你所需要的空间，比如你需要100M的空间，系统只剩90M了，这就叫内存溢出 常见问题...
2020-07-01 13:50:50
773
原创 数据结构常用算法分类
时间复杂度分析 O(n) 空间复杂度分析 S(n) 数据结构及算法 算法部分 二分搜索 Binary Search 分治 Divide Conquer 宽度优先搜索 Breadth First Search 深度优先搜索 Depth First Search 回溯法 Backtracking 双指针 Two P...
2020-07-01 13:40:50
300
原创 新疆之行
早就知道新疆是个好地方，这次公司派我去新疆为库尔勒出差，在内心其实我把它当作了一次旅行（当然是一次以完成工作任务为前提的旅行）。 来的时候在飞机上面鸟瞰新疆，感觉到处是一片荒芜，没有生气。坐在出租车进入新疆的过程中，又刚好起了沙尘，空气中弥漫的到处是灰尘，这对新疆的第一印象在某种程度上也印证了我对它的预想，可能在我以前脑海里，新疆就是这样...
2020-07-01 13:20:50
313
原创 兴趣，相伴一生
现在已经大二了，马上也快大三了。想想看，从小就盼望着长大，当我们在童年读小学的时候，过惯了衣来伸手，饭来张口被父母照顾的生活后，我们渴望着独立，能够进入中学这个新的环境，可当我们无法忍受中学那种强大的学习压力时，我们又开始向往着进入具有更多自由空间的大学。然而，处在今天这个位置，我才发现，童年是我快乐的时光，因为那时我可...
2020-07-01 12:50:50
218
原创 实验班难忘的人
包世界，北京侏罗纪软件股份有限公司董事长，长江大学杰出校友，基于这层身份，2009年7月份北京侏罗纪软件股份有限公司与长江大学共同创办一个全新的班级体——软工10801班。从全校不同院系几百名同学中筛选出的35人组成了这个班级体，而我是这35人中的一分子。很大程度上是因为他，我们35个人才走在了一起，因此，我们总习惯上亲切的喊...
2020-07-01 12:30:50
209
原创 家乡民生变化
我家住在湖北省武汉市新洲区一个普通农村,曾经是一个交通封闭,贫困不堪的小山村.几十年时光,如今村里发生了天翻地覆的变化. 我们的家乡就是改革开放进程中的缩影,随着我国改革的进一步深入,我的家乡则跟着发展变化而我的成长则见证了这巨大的变化.我读小学,读初中,读高中,乃至现在读大学,在没一个阶段,家乡总是以暂新的面貌呈现在我们的面前....
2020-07-01 12:10:50
856
1
原创 回不去的童年回忆
其实，童年时期有很多有趣的事情值得回忆，特别是对于我来说，现在所拥有的很多都是因为有童年时期的启蒙，那是一段快乐而有价值的回忆，今天就想拾起那些零碎的片段。 一起成长的伙伴 童年眼睛失明那段时期就不用说了，就从我上小学说起吧。谈到小学时光就不得不说那些一起背着书包上学，一起在操场上疯狂玩耍的伙伴，因为那段时光我们基本上是天...
2020-07-01 12:00:50
215
原创 答辩那些事
2012年6月5日星期二那天上午，我以第一个的顺序终于成功完成了答辩，到此为止，这一个月来我才真正有了如释重负的感觉，自己在学校最后的一个心愿也基本算完成了吧，因此，也就有了准备如此长时间最终如愿的喜悦。 对WITSML的研究最先是在包老师的指导下才开始的，从大三一直坚持到现在，边学习边了解的同时，就想着怎么通过自己掌握的...
2020-07-01 11:50:50
202
原创 人性之爱
前天，她发短信问我，如果有一个女生本身患有疾病，还是危及生命的那种，在你知道这个前提的情况下，你会不会喜欢她…… 看到短信时我吓了一跳，因为突然问这样的问题很容易让人产生联想，在确认不是我胡思乱想的情况后，我凭自已的感觉回答了她（因为这种事在它发生之前总是很难断言。呵呵，当然她没收到）。夜深人静的时候无意中翻出了这条短信，突然觉得...
2020-07-01 11:40:50
1437
原创 看《越狱》有感
在学校的时候就把《越狱》第二季看完了，来到北京后，在寝室闲暇的时候，很想看一下迈克究竟是怎么从监狱中逃出来的，在同学那里又求得《越狱》第一季一次性看完了。说实话，我很少看电视剧，即使有人极力给我推荐《奋斗》《蜗居》等，但这次美剧《越狱》去的的确确吸引了我，看了之后，一发不可收拾！ 当然，如果写一篇影评的话，《越狱》在艺术效果，现实...
2020-07-01 11:20:50
231
原创 随感（一）
最近，看了包老师写的《您好，欢迎登机》，描述的是一个细节，而这方面细节自己做得也不是很好，因此，感触有点深。 对于陌生人的服务，通常情况我基本还是能做到礼貌的回应的，但如果是熟人的话，自己却总是想当然的去省略很多礼节，越是自己亲的人越是如此，对于自己的家人，我从来就没有过“谢谢”类似的话语，即使有时家人为自己做出了很大的牺...
2020-07-01 11:10:50
152
原创 寒假感受
这个是进大学在家渡过的第三个寒假（我总喜欢把我的前后经历进行对比，因为我在时刻关注着自己的变化），然而，这个寒假过得有点沉重，并没有了以往过年那种轻松愉悦，其中，一个很重要的原因是我长大了，可能这成长的烦恼吧。这次回家我感受到了很大的变化：家里的变化，家里人的变化，村里的变化，村里人的变化……这些变化引发了我在整个寒假的思考！ 家...
2020-07-01 11:00:50
135
原创 我们是优秀的（写给实验班的）
我知道，倘若我现在在公共场合说这句话，很多同学会出来反驳，甚至觉得我自以为是，因此，写这篇文章是需要冒一定风险的，但是，我还是想“自以为是”的表达我内心很想表达的真实想法：我们是优秀的。 这学期我发现很多同学开始怀疑自己，怀疑自己是否有进步，怀疑自己是否优秀，对所有老师这样类似的表扬也是不愿接收，甚至已经厌倦了。对这种现象我很是困惑，回想...
2020-07-01 10:50:50
241
原创 真的开心吗？
最近，班上有三位生日到了，班上另外一位同学女友从武汉赶来了，还有一位拿了奖学金，后来这四位一商量，干脆合伙做东请班上同学吃饭。于是，今天班上同学（有几位带“家属”了）聚在一起大吃上一顿。大家玩得很HIGH！但我总感觉有点不同寻常！ 安排了三桌，以前，这样的聚餐一般是喝啤酒，这次很有几位强烈要求喝白酒，而且其它男生...
2020-07-01 10:40:50
119
原创 看包老师《人在江湖》后的一些感受
昨天，又到包老师的博客去逛了一下，无意中看到了包老师最近写的一篇文章——《人在江湖》，当时，就感触很深！ 本来我对这些业务上的应酬（我也不清楚怎么叫，暂且就用应酬吧）不是很了解，只在电视上隐隐约约有这个印象，但并没有很深的体会，也没有任何想法，因为它对我这样一个学生而言太远了。但是，进大学后，特别是进了这样一个班级，班上很多有经验有阅历并...
2020-07-01 10:30:50
258
原创 最新消息：新钻水平井数量已超其它井型
JPT 2010年11月刊 文章标题：Horizontal and Complex-Trajectory Wells 作者：Jon Ruszka 原文如下： Another example is onshore North America. Since mid-2009,there are more rigs drilling ho...
2020-07-01 10:20:50
235
原创 国庆长假记实
国庆长假记实 已经大三了，我们都已经长大了，我们也正在逐渐远离我们的父母，我深知以后与父母亲相处的时间会越来越少，中秋是限于假期太短，按道理，国庆是应该回家与家人团聚一下的，大多数人是这样做的，而我则只能很内疚的说，我不是的。 由于某些复杂的原因，这次国庆我又不能回去了（我不知道，以后在学校还有没有机会碰上国庆长假）。在学校已经度过...
2020-07-01 10:10:50
237
原创 记一次团队合作的真实感受
记一次团队合作的真实感受 在这一学期即将结束的时候，我突然发现我将要做出一件本学期最为有意义的事情——团队合作开发小程序。 这一想法是从一个月前开始实施的，到现在也快一个月了，这其中经历了很多过程，考虑成员，搜集资料，任务分配，整合……马上要进行的是客户调查。我们的成果也马上快要呈现在大家的面前，作为团队的队长，这个月我感受颇深...
2020-07-01 09:50:50
1246
原创 加油吧
加油吧看到这篇日志我很惊讶，本以为我刻意的少与你联系能给你带来很好的学习环境以应对考试，但现在我发现我错了。由于我的介入及身边朋友的参与影响了你，因此我...
2020-07-01 09:40:50
151
原创 大学我的思考
大学我的思考 1.健康是最重要的 所有事情在忽略了健康都是愚蠢的。我是这样认为的：人生只有一次,健康就显得尤为重要了，因此，对校园内大学生“虐待”自己的现象感到很不解：早餐不吃；晚上通宵；整天睡觉……小小的习惯就能导致一系列健康问题,你敢到医院去做个全身检查吗?特别是在这样一个新病毒不断产生的时代，说不定你就正处于亚健康。还是让生活...
2020-07-01 09:10:50
218
原创 中秋前夜感受
中秋前夜感受 中秋节来临之际，学校班上活动很多。我把这次中秋节定义成了我大学里的最后一次中秋节，不知道怎么的变得有点感伤！因此，这次中秋想给家里打个电话然后自己独自待着！我感觉有的事情我还没有忘掉！有的事情我还没有解决！ 但是，最后还是没有。下午，班上负责人硬是把我叫去参加院里的活动（即使我很不情愿，搞活动就是为了开心，哪有强逼...
2020-07-01 08:50:50
123
原创 WITS标准（6）通讯与数据传输
附录Ｆ通信硬件及数据传输 简介 当ＷＩＴＳ集中研究象诸如数据格式化和通信协议这些与软件相关的领域时，也不能忽视硬件及传输层，因为这是格式化的数据记录从一个地方到另一个地方的媒体。分会调查了大量的与ＷＩＴＳ数据传输有关的硬件及通信配置其结果在下面说明。 ＩＳＯ／ＯＳＩ模型的物理层（１）提供了为位流的透明传输跨接到...
2020-07-01 08:30:50
1734
原创 WITS标准（3）数据内容
简介 这一章定义了WITS数据记录的内容，其传输的数据格式已在第二章里详细说明过。同时要讨论有关井场变量的数据词典和预定义数据记录的概念。 数据词典 数据词典是由当前监测和采集的大多数井场数据变量清单组成的。 为每个变量都指定了两个特定的助记。一个称为“短”助记，最多用４个字符与LIS相一致。另一个称为“长”助记，为在其它方面的...
2020-07-01 08:10:50
1999
原创 WITS标准（2）数据格式
简介 这一章叙述了在LIS物理和逻辑记录内部WITS格式化数据的封闭问题。仅仅是叙述了为在WITS格式内使用而对LIS进行的扩展或限制。本文没有打算全面描述LIS格式。读者参看参考2有关包括WITS所使用的各种数字表述码格式的LIS的详细内容。 “依从LIS的WITS”，目的是为了在“实时”和批处理方式下传输井场数据所要求的功能，并且...
2020-07-01 08:00:50
1607
原创 WITS标准（1）简介
摘录自： API PUBL 3855 Conventions and Implementation Guidelines for EDI Wellsite Information Transfer Specification (WITS) １.１版本 １９９１年７月1日 井场信息传输规范(WITS)是一种通信格...
2020-07-01 07:50:50
4412
1
原创 《怎样成为优秀的软件架构师》解析
《怎样成为优秀的软件架构师》解析来源：中国录井网作者：晏高明 近来读了一篇《怎样成为优秀的软件模型设计者》的文章，感触颇深。仔细对比分析，发现原来我自己和周围的软件开发人员平常的一些自认为对的做法，有很多是有问题的。 1.人远比技术重要 你开发软件是为了供别人使用，没有人使用的软件只是没有意义的数据的集合而已。许多在软件...
2020-07-01 07:40:50
76
原创 WITSML 正改变实时系统的面貌(SPE112016)
WITSML 正改变实时系统的面貌 翻译：莫夏迪，校对：李海峰 摘要在越来越多的实时工作流程中，WITSML 已经成为一项关键的技术。尤其对于越来越多的陆上作业中心中的综合业务，更是如此。两年前，知道WITSML 的人还不多，使用的人就更少了。而现在，WITSML 标准指导技术联盟中的成员已经增加到51家公司。对于...
2020-07-01 07:30:50
1209
原创 谢谢你，让我有机会救治你
谢谢你，让我有机会救治你中午一直在看山西王家岭煤矿透水事故救援的直播。因为工作于能源行业，王家岭煤矿透水事故自打发 生之后，我就一直非常关注。1天，2天……一连8天过去了，本以为这153个被困的矿工已生还无望，当 今早一起来，看新闻说已经有矿工被营救出来了，而且生命体征良好，真是又惊又喜！紧接着就是中午 中央台的直播，一个个矿工被安...
2020-07-01 07:20:50
128
原创 把第一次当作最后一次
把第一次当作最后一次 把第一次当成最后一次是为了珍惜机会，珍惜自己的时间，把每一件事情做到极致，避免犯无谓的错误和不必要的损失。 做事就要一次性把它做好，把第一次当作最好一次来做，珍惜每一个机会，关注每一个细节，不放弃任何一个可疑的地方，检查了再检查，仔细了再仔细，只有这样才能杜绝错误的发生。 或许很多的人在日常...
2020-07-01 07:10:50
336
ArcGIS 10.1, Oracle11g & WebLogic 10.3.6 安装教程
2013-11-12
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人