
工具使用
文章平均质量分 90
VioletCherry
这个作者很懒,什么都没留下…
展开
-
研发效能工程实践-利用Superset快速打造大数据BI平台
随着互联网发展,现在随便哪个公司都手握大量数据。如何利用这些数据为公司商业带来价值,促使各个公司投入大量人力财力去做商业智能。如何快速打造一个BI平台呢?如果公司研发实力不是很雄厚,开源工具也是一个不错的解决方案。本篇文章主要介绍如何利用superset来打造一个BI平台,以及其中遇到的坑和一些经验分享原创 2022-12-04 21:41:27 · 1726 阅读 · 4 评论 -
研发效能工程实践-精益需求管理
传统的需求管理方式越来越跟不上当今快速变化的互联网环境,敏捷管理越来越受到各个公司的欢迎。本文就团队如何实施精益需求管理提出一种方法以及如何制定效能度量指标改进研发流程提供了一些思路,希望可以抛砖引玉原创 2022-11-07 08:45:00 · 786 阅读 · 0 评论 -
研发效能工程实践-代码评审
CR是日常开发过程中很重要的一环,他在开发中起到了很多正向的作用,本篇属于研发效能工程实践系列的CR篇,教你如何在平时开发过程中利用CR来提升团队代码质量和团队技术水平原创 2022-11-03 22:09:01 · 1394 阅读 · 0 评论 -
日常随笔-loading shared libraries: XXXXX cannot open shared object file: No such file or directory
当出现error while loading shared libraries: XXXXX: cannot open shared object file: No such file or directory错误时,不一定是你的库不存在,只是它新安装没有被加入动态库缓存中原创 2022-10-30 21:36:09 · 241 阅读 · 1 评论 -
Docker构建学习环境(4)-Azkaban Solo模式调度Spark
背景前段时间利用Docker部署了hadoop集群和spark,也简单的提交了任务。但是肯定有一个疑问,如果我们要执行定时任务怎么办呢?或者我们执行复杂的具有顺序的多任务怎么办?在大数据中,这种场景非常常见,一个大数据任务通常由大量的任务组成,并且可能是shell脚本、mapreduce任务、spark任务等,并且任务之间存在依赖关系。手动执行这种原始办法虽然可以,但是人总有出错的时候。今天要带来的一款具有复杂任务调度能力的框架-Azkaban,也支持定时调度。Azkaban介绍Azkaban是由Li原创 2020-05-11 22:06:29 · 921 阅读 · 0 评论 -
Docker构建学习环境(2)-搭建Hadoop集群
认识Hadoop简单描述,Hadoop是一款实现分布式海量数据存储和离线海量数据分析的工具。官方地址。Hadoop提供的安装方式有单机模式、伪分布式模式和完全分布式模式,不知道为什么有强迫症似的,如果有分布式模式必须要安装完全分布式模式。为了部署完全分布式模式的Hadoop,我采用docker的方式部署3个容器。不得不说docker确实是一个非常适合个人学习的安装各种软件的工具,如果你是wind...原创 2020-04-30 22:17:54 · 322 阅读 · 0 评论 -
Docker构建学习环境(1)-部署ElasticSearch集群
ElasticSearch介绍ElasticSearch下面简称ES,是一款分布式全文搜索和分析引擎,它可用于商城的全文搜索引擎,也可用作小型实时日志分析系统,著名的ELK中的E就是指的ElasticSearch。ElasticSearch基于Lucene基础之上,用过Lucene的人可能知道,Lucene的API复杂,而且缺乏分布式功能,而ElasticSearch天生提供分布式功能,并且提供...原创 2019-11-05 21:54:12 · 506 阅读 · 0 评论