- 博客(3)
- 收藏
- 关注
RSS订阅原创 mysql中的utf8和utf-8有何区别？
mysql中的utf8和utf-8有何区别？MySQL在5.5.3之后增加了这个utf-8也就是所谓的utfmb4的编码，mb4就是most bytes 4 的意思，也就是支持4个字节的意思，而utf8只支持3个字节，utf8mb4也就是utf8的大一号，当然为了节省空间utf8也是足够的，最初的 UTF-8 格式使用一至六个字节，最大能编码 31 位字符。最新的 UTF-8 规范只使用一到四...
2019-08-20 08:14:31
657
原创 Spark容错机制
Spark容错机制？Spark的容错机制分为两种：*第一种方式:*LineAge内部如果有分片数据丢失，可以通过上下依赖关系，启动重算机制，进行容错。第二种方式：spark可以通过checkPoint机制，设置一个第三方存储路径（一般是hdfs）,当有数据丢失的时候，从对应的路径恢复数据，但是一旦启动了checkPoint意味着之前的LineAge被终止。...
2019-08-19 11:17:59
1410
转载 为什么Spark比MapReduce快
- 为什么Spark比MapReduce快？Spark是基于内存的，而MapReduce是基于磁盘的迭代MapReduce的设设计：中间结果保存在文件中，提高了可靠性，减少了内存占用。但是牺牲了性能。Spark的设计：数据在内存中进行交换，要快一些，但是内存这个东西，可靠性不如磁盘。所以性能方面比MapReduce要好。DAG计算模型在迭代计算上还是比MapReduce的效率更高有向无环...
2019-08-19 11:05:46
1348
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人