橘子味的阳光

文章目录前言一、入Binlog实时采集 + 离线还原的解决方案二、使用步骤1.Binlog2.Canal总结前言 关系模型构建起整个数据分析的基石，关系型数据库作为具体实现、采集MySQL数据接入Hive是很多企业进行数据分析的前提。如何及时、准确的把MySQL数据同步到Hive呢。一、入Binlog实时采集 + 离线还原的解决方案基于Binlog日志的数据还原，与在线业务解耦采集通过分布式队列实时传递，还原操作在集群上实现，及时性及可扩展性强Binlog日志包括了增、删、改等明细动作..

RDB快照形式 （默认)配置方法save 900 1 # 900 秒内有 1 个key 变化,则存入 RDB 文件save 300 10Redis运行在内存中但是周期性全量持久化到RDB二进制文件中(RDB)优点： RDB文件紧凑，体积小，网络传输快，适合全量持久化；恢复速度比AOF快很多。与AOF相比RDB最重要的优点之一是对性能的影响相对较小。缺点： RDB文件数据快照的会造成数据丢失，因此AOF持久化成为主流。此外，RDB文件需要满足特定格式，兼容性差（如老版本的Redis不兼容新版本的

redis支持的数据结构Redis 内部内存管理Redis 内部使用一个 redisObject 对象来表示所有的 key 和 value。redisObject 最主要的信息：type 表示一个 value 对象具体是何种数据类型encoding 是不同数据类型在 Redis 内部的存储方式。redis如何实现string，这样实现有什么好处存储数字的话，采用int类型的编码，如果是非数字的话，采用 raw 编码；数据结构–动态字符串简单动态字符串SDS 数据类型的定义：　　1、

基本概念滑动窗口法用来解决一些查找满足一定条件的连续区间的性质（长度等）的问题。由于区间连续，因此当区间发生变化时，可以通过旧有的计算结果对搜索空间进行剪枝，这样便减少了重复计算，降低了时间复杂度。往往类似于“请找到满足xx的最x的区间（子串、子数组）的xx”这类问题都可以使用该方法进行解决。实例Leetcode 209. 长度最小的子数组给定一个含有 n 个正整数的数组和一个正整数 s ，找出该数组中满足其和 ≥ s 的长度最小的连续子数组。如果不存在符合条件的连续子数组，返回 0。示例:

centos1. 不能使用root启动es需要创建用户useradd es 创建用户testuserpasswd es 给已创建的用户testuser设置密码删除 userdel es改变文件所有者 -R递归chown -R es:es /usr/local/elasticsearch2.打开安全组策略后还是访问不到您好，如果是elasticsearch，还需要在配置文件y...

概述基于Web的、开源的、可视化程序编辑器。Blockly 是一个完全客户端应用，它无需服务端的任何支持（除非你要使用云存储等服务端功能），且没有第三方的依赖（除非你想重新编译内核），一切都是开源的。优势代码可导出 - Blockly 直接支持 JavaScript、Python、PHP、Lua、Dart 语言源码的导出。开源 - Blockly 开放所有源码，你可以复制、修改、并...

排列 排成一队(顺序)组合 组成一队(无序)例题1. 走路问题https://www.bilibili.com/video/av21714004/?p=5

什么是跨域问题?前台调用后台接口,如果不是同一域内就是跨域问题 产生跨域安全问题原因浏览器限制:校验不通过跨域:XHR(XMLHttpRequest)请求(其他json不受浏览器限制):解决思路浏览器:加请求参数,不让浏览器检测跨域问题 XHR:不发XHR请求,就算是跨域的,浏览器也不会拦截 使用JSONP 跨域:1.被调用方,修改代码,...