- 博客(8)
- 资源 (12)
- 收藏
- 关注
RSS订阅翻译 scala val 与var 区别
一个var和VAL定义在Scala之间的区别是什么？一之间的区别是什么var和val在Scala中定义和为什么的语言都需要？为什么你会选择val在一个var反之亦然？1. 正如许multiplayer所说，该对象分配给一个val不能被替换，并且该对象分配给一个var可以。然而，该对象可以有其内部状态改变。例如：class A(n: Int) { v
2016-12-05 12:05:03
5936
转载 用hadoop大规模数据全局排序
使用hadoop进行大量的数据排序排序最直观的方法是把文件所有内容给map之后，map不做任何处理，直接输出给一个reduce，利用hadoop的自己的shuffle机制，对所有数据进行排序，而后由reduce直接输出。然而这样的方法跟单机毫无差别，完全无法用到多机分布式计算的便利。因此这种方法是不行的。利用hadoop分而治之的计算模型，可以参照快速排序的思想。在这里我们先简单回
2012-03-28 09:30:41
723
转载 MapReduce编程模型的要点
背景MapReduce现在基本已经成为分布式并行编程框架的Bible，很多分布式计算引擎的实现[Hadoop][CIEL][Twister][Transformer][MR-mpi][Phoenix][Dryad]都将MapReduce作为一个核心的编程模型。MapReduce编程模型是什么？很多人都认为MapReduce只有这样两个过程构成：Map过程：Map(k1,v1)
2011-10-26 15:35:12
2097
转载 怎样使用NetFlow分析网络异常流量
一、前言 近年来，随着互联网在全球的迅速发展和各种互联网应用的快速普及，互联网已成为人们日常工作生活中不可或缺的信息承载工具。然而，伴随着互联网的正常应用流量，网络上形形色色的异常流量也随之而来，影响到互联网的正常运行，威胁用户主机的安全和正常使用。 本文从互联网运营
2011-10-17 14:55:32
1290
转载 Netflow简介
最近在学习关于利用Netflow检测异常流量的方法，整理的关于Netflow的介绍，看一下。NetFlow是一种数据交换方式，其工作原理是：NetFlow利用标准的交换模式处理数据流的第一个IP包数据，生成NetFlow 缓存，随后同样的数据基于缓存信息在同一个数据流中进行传
2011-10-17 09:49:43
4562
原创 SSH登陆错误 WARNING: REMOTE HOST IDENTIFICATION HAS CHANGED!
Connection to 192.168.10.20 closed.[root@localhost ~]# ssh 192.168.10.88@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@
2011-10-09 19:29:02
526
原创 windows下hadoop集群的配置
我只配置了三台机器，每台机器都是相同的配置。slave机安装hadoop时将namenode的hadoop直接拷贝过去就可以了，不需要改动。三台机器之间要进行ssh通信，将主机的cygwin\home\Administrator\.ssh目录下id_rsa.pub文件中的内容
2011-10-09 19:06:03
758
原创 windows下配置Hadoop（单机版）
1、首先确认安装了jdk，需要注意的是安装目录最好自定义选择在根目录下，这样就不会因为安装路径中的空格产生问题。2、之后安装cygwin，安装步骤网上有很多。这里基本不会出什么问题，只要别忘了选择openssl和openssh两个安装包就可以了。安装完后配置环境变量。开启ss
2011-10-09 18:54:41
1122
基于网格工作流的列表启发式算法研究
2010-05-13
任务分配问题的建模与求解
2010-05-13
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人