
云计算与大数据
tang_MrTang
这个作者很懒,什么都没留下…
展开
-
在Window上安装Linux虚拟机
在window上安装Linux虚拟机1.下载VMware Workstation2.下载linux系统(centOS,ubantu等)以上两步无需多说,自己根据需求和window位数,百度搜索下载对应版本即可,我用的是VMware Workstation10,Linux系统是centOS6.7。3.安装VMware Workstation(自行百度安装教程)4....原创 2018-01-23 18:03:13 · 1702 阅读 · 0 评论 -
长连接与echarts实现动态数据实时展示
一、需求项目上提出了一个需求,说是需要做一个简单大气的页面,上方一排方块显示各个市区的当日业务数量,下方是一个柱状图表,动态的显示当日的业务数量。所谓动态就是要实时的显示业务数量,如果有业务的增加,数字会跳动,而且柱状图也会增长。二、解决方案1、不太好的方案按照正常的想法,可以通过异步加载不断的向后台发起请求,对业务数量进行查询,将查询结果返回到前台后刷新数据。但是如果采用这种方式,就会有以下几个...转载 2018-06-23 23:27:08 · 1218 阅读 · 1 评论 -
hadoop安装笔记
Hadoop安装教程原创 2018-06-23 23:25:51 · 227 阅读 · 0 评论 -
分布式服务框架HSF学习
HSF提供的是分布式服务开发框架,taobao内部使用较多,总体来说其提供的功能及一些实现基础:1.标准Service方式的RPC 1)、Service定义:基于OSGI的Service定义方式 2)、TCP/IP通信: IO方式:nio,采用mina框架 连接方式:长连接 服务器端有限定大小的连接池 WebService方式 3)、序列化:Hessian序列化机制2.软件负...转载 2018-06-22 22:18:41 · 2067 阅读 · 0 评论 -
DDL 拆分函数概述
DRDS DDL 拆分函数对分库分表的支持情况DRDS 是一个支持既分库又分表的数据库服务。目前 DRDS 分库函数与分表函数的支持情况如下:拆分函数描述是否支持用于分库是否支持用于分表HASH简单取模是是UNI_HASH简单取模是是RIGHT_SHIFT数值向右移是是RANGE_HASH双拆分列哈希是是MM按月份哈希否是DD按日期哈希否是WEEK按周哈希否是MMDD按月日哈希否是YYYYMM按年...原创 2018-06-22 22:17:55 · 762 阅读 · 0 评论 -
分库分表
本文介绍如何使用不同的拆分方式进行分库分表:使用哈希函数做拆分使用双字段哈希函数做拆分使用日期做拆分以下示例均假设已经建好的分库数为 8。使用哈希函数做拆分建一张表,既分库又分表,每个库含有 3 张物理表,分库拆分方式为按照 id 列进行哈希,分表拆分方式为按照 bid 列进行哈希(先根据 id 列的值进行哈希运算,将表中数据分布在多个子库中,每个子库中的数据再根据 bid 列值的哈希运算结果分布...原创 2018-06-22 22:17:15 · 1629 阅读 · 0 评论 -
如何选择拆分键
拆分键即分库/分表字段,是在水平拆分过程中用于生成拆分规则的数据表字段。DRDS 根据拆分键的值将数据表水平拆分到每个 RDS 实例上的物理分库中。数据表拆分的首要原则,就是要尽可能找到数据表中的数据在业务逻辑上的主体,并确定大部分(或核心的)数据库操作都是围绕这个主体的数据进行,然后可使用该主体对应的字段作为拆分键,进行分库分表。业务逻辑上的主体,通常与业务的应用场景相关,下面的一些典型应用场景...原创 2018-06-22 22:15:49 · 2079 阅读 · 0 评论 -
阿里DRDS基本原理
DRDS 分库分表DRDS 在后端将数据量较大的数据表水平拆分到后端的每个 RDS 数据库中,这些拆分到 RDS 中的数据库被称为分库,分库中的表称为分表。拆分后,每个分库负责每一份数据的读写操作,从而有效的分散了整体访问压力。在系统扩容时,只需要水平增加分库的数量,并且迁移相关数据,就可以提高 DRDS 系统的总体容量。DRDS 支持库级拆分,表级拆分和分库分表拆分,通过 DRDS DDL 语句...转载 2018-06-22 22:14:19 · 6583 阅读 · 0 评论 -
分片集群
阅读目录一、为何要分片二、常见的mongodb sharding 服务器架构三、步骤一: 启动Shard Server四、步骤二: 启动Config Server五、步骤三: 启动Route Process六、步骤四: 配置Sharding阅读目录Shard 分片集群回到目录Shard 分片集群 简述返回顶部为何要分片减少单机请求数,降低单机负载,提高总负载减少单机的存储空间,提高总存空间。返回顶...转载 2018-06-21 22:14:20 · 331 阅读 · 0 评论 -
WebGL可视化地球和地图引擎:Cesium.js
Cesium介绍Cesium是国外一个基于JavaScript编写的使用WebGL的地图引擎。Cesium支持3D,2D,2.5D形式的地图展示,可以自行绘制图形,高亮区域,并提供良好的触摸支持,且支持绝大多数的浏览器和mobile。 无需任何插件。Cesium 使用 WebGL 来进行硬件加速图形化;跨平台;跨浏览器;实现真正的动态数据进行可视化。Cesium 基于 Apache 开源协议,支持...转载 2018-06-23 23:27:56 · 6184 阅读 · 0 评论