- 博客(12)
- 资源 (14)
- 收藏
- 关注
原创 hadoop审计
http://note.youdao.com/noteshare?id=2357666dd623ae0517318e75d0e3ebf9&sub=8F0EF54044F64CB5A0B28EA3D58454BD
2018-09-14 16:10:04
742
原创 hadoop鉴权
http://note.youdao.com/noteshare?id=39ff6786436c894d2a585abb2cfb876b&sub=4F93B83F28654F9595B58A1121B2E709
2018-09-14 16:09:27
715
原创 TensorflowOnSpark 安装
http://note.youdao.com/noteshare?id=c564a7c7b282ddb863a294545c95c70d&sub=4B07627A3F054DE9BF0ABF84AE8425C9
2018-09-14 16:07:50
1492
翻译 Hadoop笔记4--hdfs架构
1、Hadoop1.x的hdfs存在问题: 1)namespace与block storage耦合严重。 2)namenode存在单点故障,namespace存放在单个namenode,namenode存放着集群上所有的元数据。 3)性能受限,单个namenode最多只支持60k个task,hadoop2.x能支持到100k个task。 4)隔
2015-09-14 08:51:38
658
原创 hadoop笔记3-yarn执行流程
Yarn基本组成结构:总体仍为Master/Slave结构,ResourceManager为Master,NodeManager为Slave,ResourceManager负责对各个NodeManager上的资源进行统一管理和调度。当用户提交一个应用程序时,需要提供一个用以跟踪和管理这个程序的ApplicationMaster,它负责向ResourceManager申请资源,并要求NodeMa
2015-09-09 13:10:00
743
原创 hadoop笔记2-MR架构体系
1、Hadoop1.x的MR体系:1)、JobClient向JobTracker提交作业,JobTracker通过心跳机制监控集群中节点的资源状况。2)、TaskTracker监控所在节点的资源状况、任务执行情况,并通过心跳机制报告JobTracker。存在问题:1、JobTracker存在单点故障。2、JobTracker完成的工作太多,消耗内存严重。3、TaskTrac
2015-09-07 13:23:31
714
1
原创 C#栅格金字塔(最邻近法)
using System;using System.Collections.Generic;using System.ComponentModel;using System.Data;using System.Drawing;using System.Linq;using System.Text;using System.Windows.Forms;using Sy
2013-03-11 11:32:28
1360
原创 Python计算任意多边形面积算法
多边形面积求解的方法很多,其中比较多见的就是增加一个点P,然后分别连接多边形各个定点与P点,然后计算每个三角形的符号面积(面积有正负之分),求和就可以计算出面积。 鉴于上面的方法,我们也可以用另外一种更简单的方法,将P点直接放在V0点,那么我们要求的面积就是V0V1V2,VoV2V3,...,V0Vn-2Vn-3的面积和。此处注意,如果我们假设逆时针的三角形(如上图V0V
2013-02-20 17:22:07
18000
2
原创 C#调用python
添加引用Ironpython、Microso.Scriptingusing System;using System.Collections.Generic;using System.Linq;using System.Text;using Microsoft.Scripting.Hosting;using IronPython.Hosting;names
2013-02-17 16:25:01
706
原创 ENVI4.8安装之MSVC_sp1_x86
近几日安装ENVI4.8总是提示“The installation of MSVC_SP1_x86 has failed.Setup will now exit“,在网上查找基本只有一种说法,按照讲解的办法将注册表的RegisterSizeLimit修改后竟然电脑重启不了了,再按照讲解的第二种办法安装VC2005的分发包也没有效果,本人电脑已装VS2010,就试着安装VC++2010的分发包,果然
2012-09-04 14:44:00
6429
mule开发2---集成ws、JMS、stmp、file
2015-10-09
MULE开发实例1---并行调用多个webservice接口
2015-10-09
TeeChart for java 2.0
2010-06-26
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人