- 博客(13)
- 收藏
- 关注
RSS订阅原创 NDFS心跳检测在window平台异常解决
nutch项目2006年之前集成分布式文件系统 称为NDFS，之后独立出Hadoop子项目更名为HDFS由于自己的系统基于早期nutch版本开发，发现NDFS心跳检测在window平台异常：Cannot run program "df": CreateProcess error=2, ϵͳÕҲ»µ½ָ¶想必是windows平台无此df命令造成，更正DF的构造 publi...
2010-09-18 00:58:28
435
原创 ActiveMQ 高级特性
消息游标 在 ActiveMQ 的之前版本中，broker 会把正在传输的消息保存在内存中。使用这种内存模型，当一个消费者消费消息的速度跟不上生产者生产消息的速度的时候，会是 broker 内存中维护的正在传输的消息数量迅速增长，最终到达最大限额。当到达此最大限额后，broker 就不能接受来自客户端的消息，这样生产者就会被阻塞直到 broker 的内存中有保存消息的空间为止。从 ...
2010-08-22 23:15:22
157
关于Bekely db je写入与 I/O性能测试
192.168.0.170 ==============================================================================================================Red Hat Enterprise Linux Server release 5 (Tikanga)CPU：(Intel(R) Xeon(...
2009-10-15 15:12:23
170
How can I optimize the berkely db je DPL insert(put) performance?
Hi,everone!I use JE DPL API to insert(put) my entity named AuthService with 5 SecondaryKey,40 fields.Excute Insert 100000 Records， total times 40172ms, 2456 Records/sec ,quite slow!!!,why??? can i...
2009-10-14 19:45:26
148
My jsp page not support javascript
[code="java"] swithSignle = function (id){ alert("vvvvvvvvvvvvvvvvvv"); alert(id); var obj = document.getElementById(id); if (obj.style.visibility == "visible"...
2009-10-12 19:26:40
126
小记asp调用webService
最近在研究一个机票数据网站，用httpwatch分析得知，数据来源于一个webservice接口，用.net编写的。 在网上找了不少关于如何调用的文章 总是返回500错误。无奈之下自己编写一个webservice接口，用例程调用顺利通过返回200，经过一番对比之后发现时没有注意到webservice得命名空间！ <html><head><meta h...
2009-08-16 10:54:40
153
重新配置CentOS网络连接
今天Clone了一套centOS系统，启动的时候发现提示配置网络连接，误操作删除了网络配置。 首先通过 #ifconfig获取网卡Mac地址。然后按照步骤操作重新配置连接linux的网卡IP地址是存放在文件中的，这个配置文件在/etc/sysconfig/network-scripts下，名称分别为ifcfg-eth0,ifcfg-eth1....如果你有一块网卡，就只有ifcfg-e...
2009-08-01 00:12:02
305
用一行命令统计一文本文件中包含指定字符串出现次数
$grep -c 'I am tom' a.txt 参考资料： grep、fgrep和egrep命令 这组命令以指定模式搜索文件，并通知用户在什么文件中搜索到与指定的模式匹配的字符串，并打印出所有包含该字符串的文本行，在该文本行的最前面是该行所在的文件名。grep命令一次只能搜索一个指定的模式；egrep命令检索扩展的正则表达式（包括表达式组和可选项）；fgrep命令...
2009-07-29 16:46:18
574
原创 Hadoop学习笔记一 简要介绍
这里先大致介绍一下Hadoop. 本文大部分内容都是从官网Hadoop上来的。其中有一篇介绍HDFS的pdf文档，里面对Hadoop介绍的比较全面了。我的这一个系列的Hadoop学习笔记也是从这里一步一步进行下来的，同时又参考了网上的很多文章，对学习Hadoop中遇到的问题进行了归纳总结。 言归正传，先说一下Hadoop的来龙去脉。谈到Hadoop就不得不提到Lucene和Nutch。...
2009-07-28 21:45:37
92
原创 Heritrix的架构
10.2 Heritrix的架构在上一节中，详细介绍了Heritrix的使用入门。读者通过上一节的介绍，应该已经能够使用Heritrix来进行简单的网页抓取了。那么，Heritrix的内容究竟是如何工作的呢？它的设计方面有什么突出之处？本节就将介绍Heritrix的几个主要组件，以此让读者了解其主要架构和工作方式。为后续的扩展Heritrix做一些铺垫。10.2.1 抓取任务Cra...
2009-07-25 10:42:38
132
原创 Heritrix的使用入门
10.3 扩展和定制Heritrix在前面两节中，向读者介绍了Heritrix的启动、创建任务、抓取网页、组件结构。但是，读者应该也可以明显的看出，如果不用Heritrix抓取和分析网页的行为进行一定的控制，它是无法达到要求的。对Heritrix的行为进行控制，是要建立在对其架构充分了解的基础之上的，因此，本节的内容完全是基于上一节中所讨论的基础。10.3.1 向Heritrix中...
2009-07-25 10:38:03
456
Exoweb面经
前段时间给轩辕互动投了一份简历，很快就收到面试通知。去之前再网上打听了一番。居然有19分的好评。终究去一看究竟。几番周折，终于找到传说中的黄色房子。进入公司，等待面试，海面啊。办公环境与想象的有些差距哦。马上要求上机做题先给3道题，要求1小时做完。比较基础的算法题。3道题验证通过很快就做完了，耗时30分钟。HR说稍等，片刻HR说再补做一套题。最后一道题涉及到动态规划的应用，很顺利做...
2009-07-24 21:48:43
233
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人