东城庞太师

模式二选择固定时间点进行缓存，如表达式设置为0408,9,14**?表示8点40分，9点40分，14点40分，分别进行缓存一次。按照下面1~4步骤即可开启关闭缓存，刷新数据。（注意这是全部刷新，如果数据没有变化，需要单个页面先进行清除缓存操作！模式一选择固定时间段缓存，如每隔720分钟即12小时缓存一次，简单重复执行设置为720；图二中即为缓存进一步设置方式两种模式选择。...

报错如图，在使用sqoop从oracle导数到hive，加载不到驱动。原因：缺少包解决：在安装sqoopserver的节点上放oracle的驱动包，/opt/cloudera/parcels/CDH/lib/sqoop/lib/ojdbc6.jar并且修改权限为777...

原因：workflow.xml编码格式不对解决：workflow.xml编码格式由Windows改为unix

缓存穿透：缓存穿透的概念很简单，用户想要查询一个数据，发现redis内存数据库没有，也就是缓存没有命中，于是向持久层数据库查询。发现也没有，于是本次查询失败。当用户很多的时候，缓存都没有命中，于是都去请求了持久层数据库。这会给持久层数据库造成很大的压力，这时候就相当于出现了缓存穿透。解决方案：布隆过滤器布隆过滤器是一种数据结构，垃圾网站和正常网站加起来全世界据统计也有几十亿个。网警要过滤这些垃圾网站，总不能到数据库里面一个一个去比较吧，这就可以使用布隆过滤器。假设我们存储一亿个垃圾网站地址。

首先下载redis的源码包解压启动服务端和客户端保证服务已经启动。-------------------------------------------------------------------命令 -----------------查看启动状态 ...

redis是什么？redis是一个key-value存储系统。官网:https://redis.io/特点：（优点）高效率: redis读取的速度大约是11w次/s, 写的速度大约8.1w次/s 原子性: redis的所有操作都是原子性的, 同时redis还支持对几个操作全并后的原子性执行 支持多种数据结构: string(字符串) list(列表|队列) hash(哈希) se...

原因：没有节点解决:到canal的安装目录下面，查看canal的配置文件，发现没有指定canal.zkServers的地址！canal.properties

分布式锁的概念：部署了多个tomcat应用，在执行定时任务时就会遇到同一任务可能执行多次的情况，我们可以借助分布式锁，保证在同一时间只有一个tomcat应用执行了定时任务。分布式锁的实现方式有四种：使用redis的setnx()和expire()setnx(key,value)如果key不存在，设置为当前key的值为value;如果key存在，直接返回。expire()来设置超时时间使用redis的getset()此方法使redisTemplate.boundValueOp...

原理：canal监控mysql的数据库数据变化是根据数据库的binlog来监控的。问题描述:使用canal监控mysql数据库数据变化时，总是监控不到。解决：一路排查问题，确认不是其它问题后，去确认vim /etc/my.cnf 这个文件。添加上面三行，再次重启mysql。删除meta.data，重启canal，问题解决。meta.data文件，此文件记录了canal读取的日志文件的信息，测试，问题解决！查看监控的信息目录下 ：/export/servers...

1.node01上配置：exec-avro.conf#agent1 nameagent1.channels = c1agent1.sources = r1agent1.sinks = k1 k2#set gruopagent1.sinkgroups = g1#set channelagent1.channels.c1.type = memoryagent1.channel...

先确认环境配置好，能正常监听！ 新建目录：/root/logs 在/flume/conf目录下新建配置文件tail-hdfs.conf# Name the components on this agenta1.sources = r1a1.sinks = k1a1.channels = c1# Describe/configure the sourcea1.sources....

启动azkaban错误