- 博客(14)
- 收藏
- 关注
RSS订阅原创 win10 无法完成操作,因为文件包含病毒或潜在的垃圾软件
打开系统和安全控制面板 -> 系统和安全关闭 Windows Defender 防火墙 关闭病毒和威胁实时保护
2021-09-12 01:42:05
2928
原创 sublime text 3 运行java
window10在java/bin目录下新建文件 runJava.bat@echo offcd %~dp1echo Compiling %~nx1......if exist %~n1.class (del %~n1.class)javac -encoding UTF-8 %~nx1if exist %~n1.class (echo.echo ------Output------java %~n1echo ------------------echo.)在sublim.
2021-08-28 19:32:28
664
1
原创 sublime 编码格式默认UTF-8
设置默认UTF-8编码按键 Ctrl + ` ，在下方打开的窗口内输入如下代码import urllib.request,os; pf = ‘Package Control.sublime-package’; ipp = sublime.installed_packages_path(); urllib.request.install_opener( urllib.request.build_opener( urllib.request.ProxyHandler()) ); open(os.path.
2021-08-21 19:34:52
3614
原创 Sublime text 3 如何格式化html/CSS/JS代码
Sublime text 3 如何格式化html/CSS/JS代码前言安装步骤如下：应用前言Sublime text 3 的工具中提供了HTML-CSS-JS Prettify集成插件，用来美化 js, html, css 等文件，这个插件需要在编辑器中手动下载。而且这个插件依赖于 nodejs，因此需要事先安装nodejs，然后才可以正常运行此插件。安装步骤如下：下载安装nodejs 打开下方链接选择自己环境对应的版本安装即可这里的安装路径要记住，下面要使用。
2021-05-17 06:22:36
714
原创 ERROR 22 - The requested URL returned error: 404 Not Found
filelists.sqlite.bz2 from epel: [Errno 256] No more mirrors to try.今天遇到这个问题 根据提示试了好长时间 也没弄好。最后终于在官方网上找到类似的问题。以下是解决方法yum clean allyum makecache最后要记得重新下载：需要用到的yum工具包...
2020-06-06 15:29:15
1228
原创 Log4j配置
log4j基础Log4j是Apache的一个开放源代码项目log4j配置的三个核心： Loggers 记录器 Appenders 输出源 Layouts 样式使用log4j，主要是通过log4j.properties文件来定义不同的logger，为其指定不同的a...
2020-01-04 16:59:36
156
原创 Zookeeper选举机制
ZooKeeper 是一个开放源码的分布式应用程序协调服务，它具有可靠的、可扩展的、分布式的、可配置的协调机制。它的核心是原子广播，这个机制保证了各个Server之间的同步。 实现原子广播机制的协议叫做Zab协议。Zab协议有两种模式，它们分别是恢复模式（选主）和广播模式（同步）。当服务启动或者在领导者崩溃后，Zab就进入了恢复模式，当领导者被选举出来，且大多数Server完成了和l...
2019-12-24 15:33:38
199
原创 网络模型
7层网络模型每一层实现各自的功能和协议，并且都为上一层提供业务功能。用户的数据要经过一次次包装，最后转化成可以在网络上传输的信号，发送到网络上。当到达目标计算机后，再执行相反的数据拆包过程。7层网络模型封装过程详解：7层网络模型功能概述：物理层：主要作用是将数据最终编码为用 0、1 标识的比特流，通过物理介质传输。这一层的数据叫做比特。数据链路层：主要将接收到的数...
2019-12-20 19:35:04
177
原创 Hadoop压缩方式与存储格式
一、数据压缩1.1 hadoop常用的压缩格式压缩格式扩展名可分割性工具算法编码/解码类hadoop自带nativedefault.deflate不无deflateDefaultCodec是是gzip.gz是gzipdeflateGzipCodec是是bzip2.bz2是bzip2bzip2Bzip2Code...
2019-02-16 11:23:50
1687
原创 hadoop支持lzo压缩
我的安装环境CentOS 6JDK1.7Maven3.3.9hadoop-2.6.0-cdh5.7.0下载依赖库 yum -y install lzo-devel zlib-devel gcc autoconf automake libtool安装LZO #1. 下载 [hadoop@hdp01 ~] cd softWare [hadoop@hdp01 so...
2019-02-16 11:21:50
1004
转载 数仓平台设计思路01
大数据行业中，数仓的作用不言而喻，承载着整个公司全业务线的核心，现在就企业内部数据的分析，尤其是各种各样的统计分析报表和用户画像分析，进行阐述。下图为数仓整体的技术架构：一个优秀可靠的数仓，一定要结构、分层清晰，能够快速找到数据的位置。主题域的划分，完全可按照公司内部的业务线和结构去划分。上图中：BDL层，作为缓冲数据层，其实就是贴源数据层，和源数据使用相同的表。直接用源库（传统关系型业...
2019-02-16 11:19:23
769
转载 Spark运行日志的配置
生产上作业运行日志务必要保存下来，以防出现错误无法排查官网关于日志监控的说明：You can access this interface by simply opening http://:4040 in a web browser. If multiple SparkContexts are running on the same host, they will bind to succes...
2019-02-16 10:08:18
1750
原创 Kafka 0.10.1.0 Cluster的搭建和Topic简单操作
1. 环境准备： Linux 服务器 3个节点2. 需要提前安装的软件 Zookeeper 3.4.6 JDK 1.7 + Scala 2.11+# 1. zookeeper 3.4.6[hadoop@hdp001 zookeeper-3.4.6]$ bin/zkServer.sh statusUsing config: /home/hadoo...
2019-01-09 10:10:27
815
1
原创 spark-2.4.0 源码编译
环境： hadoop2.6.0-cdh5.7.0 jdk 8 + maven 3.5.4 + scala 2.11这里提醒下，spark2.4.0之前的版本maven使用 3.3.9+ 就可以了; spark2.2.0之前的版本支持jdk 7。源码下载安装[hadoop@hdp001 softwore]$ wget https://archi...
2019-01-06 14:32:00
1515
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人