chenzuoli的博客

什么是数据湖？什么是数据仓库？

说说我们在数据领域用的比较多的消息队列组件：kafka和rabbitmq。

web3的世界，一切都是有价值的

spark on yarn 时，task实际跑在nodemanager上 如果是standalone模式，那么用的是spark原生的资源管理器，task跑在spark worker上 今天才知道，晕。。。 因为公司的集群只有两台spark thrift server，没有worker，刚开始我信心满满说，怎么可能没有worker呢，最后尴尬了???????????????? ...

首先，解释一下文件编码和文件格式 文件编码是属于字符(文件内容)的编码格式，常见的有utf-8/gbk/latin1等等 文件格式是针对系统而言的，比如Windows格式文件内容的换行符是\r\n，而Linux和Unix换行符择是\n 有时候需要进行格式转换，怎么转呢?来看看: Vim进入文件 查看文件系统格式: :set ff 编辑文件系统格式: :set ff=unix :set ff=dos 查看文件编码格式: :set fileencoding 设置文件编码格式: :set fileencod