- 博客(11)
- 资源 (3)
- 问答 (1)
- 收藏
- 关注
转载 zookeeper实现分布式共享锁
本文装在自:http://blog.youkuaiyun.com/desilting/article/details/41280869利用zookeeper的EPHEMERAL_SEQUENTIAL类型节点及watcher机制,来简单实现分布式锁。主要思想:1、开启10个线程,在disLocks节点下各自创建名为sub的EPHEMERAL_SEQUENTIAL节点;2、获取disLocks
2016-12-06 21:16:49
791
转载 Java中的几种常见的数据结构
线性表,链表,哈希表是常用的数据结构,在进行Java开发时,JDK已经为我们提供了一系列相应的类来实现基本的数据结构。这些类均在java.util包中。本文试图通过简单的描述,向读者阐述各个类的作用以及如何正确使用这些类。
2016-11-18 13:43:59
553
转载 Hadoop运行因为container的内存大小而抛错
本文转载自:http://blog.chinaunix.net/uid-25691489-id-5587957.htmlHadoop运行中抛出如下异常:Container [pid=41355,containerID=container_1451456053773_0001_01_000002] is running beyond physical memory limits. Curr
2016-11-09 14:43:07
6742
2
原创 Java中调用pyrMeanShiftFiltering函数,对meanshift函数解释
首先看看源函数:public static void pyrMeanShiftFiltering(Mat src, Mat dst, double sp, double sr) { pyrMeanShiftFiltering_1(src.nativeObj, dst.nativeObj, sp, sr); return
2016-11-09 09:38:15
3760
原创 Ubantu14.04中安装Hadoop-2.6伪分布式
1、首先下载更新apt—get,sudo apt-get update 后边会用到这个命令下载软件2、ssh免密登录(1)执行ssh-keygen产生秘钥将秘钥写到文件id_rsa.pub中(2)执行cat ./id_rsa.pub >> ./authorized_keys (3)测试ssh localhost如果成功那么恭喜你,如果还需要密码则很可能是文件以及文件夹权限问题首
2016-11-06 19:35:39
2523
转载 图像分割(Image Segmentation)
图像分割指的是将数字图像细分为多个图像子区域的过程,在OpenCv中实现了三种跟图像分割相关的算法,它们分别是:分水岭分割算法、金字塔分割算法以及均值漂移分割算法。它们的使用过程都很简单,下面的文章权且用于记录,并使该系列保持完整
2016-10-30 23:06:06
4930
原创 Linux中的crontab配置常用的日期格式以及详细事例
Linux中的crontab配置,常用的日期格式以及详细事例。一篇文章掌握crontab的用法,以及date的设定格式!
2016-10-30 21:56:41
3687
原创 Hadoop中的shuffle过程总结
shuffle是mapreduce编程模型中连接map阶段和reduce阶段的最重要环节。是Reduce Task从Map Task拉取数据的一个过程。 除了自定义的map和reduce函数,剩下的几乎都是由框架帮我们完成。而shuffle就是发生在我们自定义map函数输出<k2,v2>后,到reduce自定义函数获取<k2,v2s>的过程,中间的处理过程对我们来说几乎是透明的。因此要想搞懂shuffle,就必须要搞懂这中间过程框架是如何处理的。
2016-10-30 16:36:08
3630
Hadoop处理图像的Exception
2016-10-30
TA创建的收藏夹 TA关注的收藏夹
TA关注的人