
分布式
文章平均质量分 82
超大板栗
这个作者很懒,什么都没留下…
展开
-
hadoop中的fsimage和edits的介绍
在进入下面的主题之前想来搞清楚edits和fsimage文件的概念:1,fsimage文件其实是hadoop文件系统元数据的一个永久性的检查点,其中包含hadoop文件系统中的所有目录和文件idnode的序列化信息。2,edits文件存放的是hadoop文件系统的所有更新操作的路径,文件系统客户端执行的所有写操作首先会被记录到edits文件中。元数据的介绍:元数据的分类按形式分类:内存元数据和元数据文件;它们的存在的位置分别为:内存和磁盘上。其中内存元数据主要是hdfs文件目录的管理;原创 2021-09-06 17:31:32 · 3000 阅读 · 0 评论 -
关于阿里云不同vpc下的内网互通
在实际的线上环境中,搭建服务器集群直接使用外网ip搭建会有走公网绕行带来的网络质量不稳定问题以及数据在公网上传送被窃取的风险,在使用阿里云或者其他云有vpc服务(高速通道)组成局域网,为保证速度和复杂性,最好是同一账号同一区域来组网。使用教程:https://help.aliyun.com/product/27706.html...原创 2020-12-24 10:56:26 · 1256 阅读 · 0 评论 -
RBAC权限模型研究现状
访问控制技术是通过特定的方法限制或者允许主体对客体的访问能力及其范围的一种安全机制。目前关于 SAAS 模式下访问控制的研究,大部分都是基于RBAC 模型 [7][8] ,1992 年,David 等提出了 RBAC 模型,在用户和权限之间引入了角色的概念,利用角色作为中介,对用户的授权转变为对角色的直接授权。美国 George Mason 大学 Sandhu 等人通过详细研究 RBAC 模型,在此基础上,提出了 RBAC96、RBAC97、ARBAC97、ARBAC99 等模型。目前世界上有很多原创 2020-12-22 09:25:39 · 837 阅读 · 0 评论 -
Logstash jdbc 按时间增量更新的一些总结
不同数据库的支持mysql数据类型 显示样例 是否支持timestamp statement tracking_column tracking_column_type SQL示例 date 2020-10-20 N select *, datediff(date, '1970-01-01') as days from tbl_time where datediff(date, '1970-01-01') > :sql_last_valu原创 2020-12-21 16:29:46 · 1451 阅读 · 0 评论 -
分布式算法概况
四大基础理论 拜占庭将军问题 CAP 理论 ACID 理论 BASE 理论 八大分布式协议和算法 Paxos 算法 Raft 算法 一致性 Hash 算法 Gossip 协议算法 Quorum NWR 算法 FBFT 算法 POW 算法 ZAB 协议 ...原创 2020-12-16 15:31:23 · 236 阅读 · 0 评论