- 博客(3)
- 资源 (7)
- 收藏
- 关注
转载 hbase解决海量图片存储
随着互联网、云计算及大数据等信息技术的发展,越来越多的应用依赖于对海量数据的存储和处理,如智能监控、电子商务、地理信息等,这些应用都需要对海量图片的存储和检索。由于图片大多是小文件(80%大小在数MB以内),以GFS、HDFS为代表的适用于流式访问大文件的分布式存储系统,若直接用来存储图片,由于元数据膨胀,在扩展性和性能方面均存在严重问题。 为了解决HDFS在小文件存储方面的问题,通常的做法...
2018-03-13 21:48:08
1212
转载 nodejs的zookeeper模块及web管理工具node-zk-browser
nodejs的zookeeper模块及web管理工具node-zk-browser的安装对大数据云兴趣的朋友可以加群:571129071,或扫描如下二码加群。 网上关于zookeeper的web界面查看工具有好几个,Node-ZK-Browser的界面相对好点,是用nodejs写的,尝试搭建了下。一、安装node.js关于centos安装node.js的步骤请查看:http://www.16bok...
2018-03-11 20:37:21
841
原创 Hadoop YARN配置参数剖析(1)—RM与NM相关参数
Hadoop YARN配置参数剖析(1)—RM与NM相关参数 注意,配置这些参数前,应充分理解这几个参数的含义,以防止误配给集群带来的隐患。另外,这些参数均需要在yarn-site.xml中配置。1. ResourceManager相关配置参数(1) yarn.resourcemanager.address参数解释:ResourceManager 对客
2018-01-24 15:01:08
245
HadoopHbaseazkaban大数据.rar
2020-02-26
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人