- 博客(90)
- 资源 (45)
- 收藏
- 关注
RSS订阅原创 JobHistory启动错误，CDH显示web连接错误的处理方法
### job history 服务错误#### 日志中没有错误信息，进程正常存在。curl 19888端口提示连接拒绝。将原来的日志文件删除后，出现了权限问题的日志。```Caused by: org.apache.hadoop.security.AccessControlException: Permission denied: user=mapred, access=WRITE, inode="/user/history":hdfs:supergroup:drwxr-xr-x...
2022-02-07 11:39:01
1637
原创 Hadoop Hdfs Edit log 加载错误，重启无效问题解决过程
cdh 问题，启动显示正常，但是不能通过hdfs连接。版本 ：5.13问题：hdfs 启动错误，提示下面日志2021-12-20 00:14:56,817 WARN org.apache.hadoop.hdfs.server.namenode.FSNamesystem: Only one image storage directory (dfs.namenode.name.dir) configured. Beware of data loss due to lack of redundant sto
2021-12-20 14:04:32
2652
原创 weka matrix类功能扩展，模拟matlab
package weka.core.matrix;import weka.core.Instances;public class MatlabMatrix extends Matrix {public MatlabMatrix(double[] vals) {super(vals);}private static final long serialVersionU
2021-12-08 18:23:27
177
原创 今日问题两则
问题1: SysUptime ：Time in milliseconds since this device was first booted netflow协议中的Sysuptime的问题。关于加电时间的一个问题： 该值定义长度为4个字节，最大表示2的32次方的值 ，为4294967296，大概40亿左右。但是一年的毫秒数 已经超过 24*3600*1000*
2014-09-24 18:07:59
5786
原创 对netflow v9 协议模板部分的翻译
Template record—a template record is used to define the format of subsequent data records that may bereceived in current or future export packets. It is important to note that a template record wi
2014-09-18 17:18:14
1441
原创 jzmq4.0 和jzmq2.1.0的安装完成后的测试
jzmq4.0测试：Centos 6.4 final ,jdk6-64 编译完成jzmq后相关jar文件在这里： /usr/local/share/perf/zmq-perf.jar java -cp /usr/local/share/java/zmq.jar:/usr/local/share/perf/zmq-perf.jar:. local_lat tcp:
2014-02-28 18:08:52
1790
转载 ganglia监控hbase部分指标的权威解释
hbase.regionserver.blockCacheCount ：内存中缓存块(block cache)数。缓存中StoreFiles(HFiles)的块（block）数量。hbase.regionserver.blockCacheEvictedCount ：因超出堆大小限制，从缓存中释放的块数量。hbase.regionserver.blockCacheFree： 可用的缓存块
2014-02-17 16:55:06
4176
原创 hadoop job运行问题解决
问题现象： job提交后总是在本地机器运行，不能提交到hadoop job tracker，在http://192.168.1.130:50030/jobtracker.jsp，不能看到运行中的job。在控制台输出中出现： 14/02/15 00:04:20 INFO mapred.LocalJobRunner: reduce > sort原因分析： 第一
2014-02-14 15:22:11
3679
原创 如何初始化ganglia
因为ganglia安装完成后修改了系统时间，导致ganglia不能正常显示检测数据,可能原因是由于ganglia已经记录了已有的时间，而操作系统时间被修改后导致了内部异常，因此将ganglia的已有记录和缓存删除应该可以解决问题。 如何初始化ganglia?： 其数据存储在： /var/lib/ganglia/rrds下，删除 该文件夹下的所有数据！
2014-02-13 09:33:29
1021
原创 在centos6.4上安装ganglia3.4.0过程中遇到的操作系统不能启动问题的解决
安装ganglia3.4.0，从网上找了一篇安装教程，对应的是cent5.4版的，想想应该差不多，结果差很多，安装过程问问多多不说，装完了，重启后操作系统进不了，不止图形界面，控制台界面也不能进了，一直提示下面的错误，停留在以下界面中：data_thread() got no answer form any [test] datasource 想想应该是gmetad服务
2014-02-12 09:27:17
788
转载 ubuntu 12.04 安装 ganglia
最近需要安装 ganglia ,从网上搜索了一篇安装文档，结果按照其步骤完成后发现从浏览器端打开是404，从网上找到其他的安装文档，组合后目前打开正常。安装环境:ubuntu 12.041. 准备安装依赖：apt-get install rrdtool apache2 php52. 安装安装ganglia：apt-get install ganglia*
2014-01-25 16:23:23
1842
原创 mahout学习第四天
mahout学习第四天，今日目标，完成mahout的推荐部分的学习： 3.2.4 Update files FileDataModel supports update files. These are just more data files that are read after the main data file, and that overwrite any pre
2013-05-09 10:22:01
1056
原创 究Mahout平台第三天
研究Mahout平台第三天 今天目标： 研究k-means算法的调用方式和代码： 1.首先建一个map/reduce工程。 2.建一个包mahoutTest，在包下建一个类：kMeans.java。现在什么也没有。 3.看看mahout的例子程序，找到源代码。 3.1在工程下建一个包，将mahout-core-0.5-c
2013-05-06 17:54:12
2389
原创 muhout 第二天学习笔记
首先打开 hadoop文件夹 ：在hadoop 的Conf文件夹中的 ，core-site.xml中的 fs.default.name hdfs://localhost:9000定义了hdfs的端口，但是用浏览器打开 http://127.0.0.1:9000发现是空白页。这个应该只是hdfs通讯使用的端口。根据教程：首先需要配置机器名
2013-05-03 17:34:55
2067
原创 mahout 学习第一天笔记
1.首先必须搭建学习环境。 在这个地址下载 linux下的jdk6 http://www.oracle.com/technetwork/java/javase/downloads/jdk6downloads-1902814.html2.在这个地址下载mahout http://www.cloudera.com/content/cloudera-content
2013-05-02 22:31:25
1544
原创 Orcle 存储过程调用封装类-备忘
主调用：import java.io.InputStream;import java.net.URL;import java.sql.Date;import java.sql.ResultSet;import java.sql.SQLException;import java.sql.Time;import java.util.ArrayList;import ex
2012-07-12 18:46:55
1629
原创 空间任意两点圆滑曲线连接，曲线轴垂直于Y轴
package tansform;import java.util.ArrayList;import java.util.Collections;import java.util.Comparator;import javax.media.j3d.Appearance;import javax.media.j3d.BranchGroup;import javax.media
2012-07-12 18:45:58
2118
原创 关于Hbase应用的一点实践经验
1.在应用到复杂的企业级业务时，出现了无法实现的问题，需要根据数据检索字段构建针对各个字段的索引。构建索引有两种办法，一种基于行，一种基于列。基于行的不可避免的出现了效率和事物的问题。基于列的本身只能应对比较特殊的业务，必须要有特别精巧的设计才可达到目的。2.hbase本身对数据的遍历效率并不高，目前我用的是14台pc，每台内存8G，4核。遍历5000万，40GB大小左右的数据需要14分多
2012-04-27 10:23:30
586
转载 hadoop datanode 重新启动和hbase regionserver重新启动
我自己有了个集群,现在datanode 宕机了. datanode通过 ssh ccc "/home/hadoop/bin/hadoop-daemon.sh start datanode"ssh ccc "/home/hadoop/bin/hadoop-daemon.sh start tasktracker" 重起后, 那么在datanode上的hbase如何重起?我自己有了个集群,现
2012-03-21 16:37:14
5174
原创 hadoop1.0.1 在eclipse3.6下的插件编译
经过一番郁闷的调试，总算弄完了！下面是jar文件，放到eclipse的plugins目录下就可以了。调试中主要问题： 1.打包后的jar文件在eclipse环境下加载失败！ 查看了log文件后发现是plugin.xml的一个标签缺少ID属性，修改了插件的ID属性后问题得到修改。 2.点击右键new hadoop location没有反应。
2012-03-07 19:44:40
1785
原创 你还记得大明湖畔的哪个lotus吗？
利用http协议将本地文件上传至domino服务的java实例程序，无需多说，自己看吧：package tryrun;import java.io.ByteArrayOutputStream;import java.io.File;import java.io.IOException;import java.io.InputStream; import org.apac
2012-02-29 12:53:19
1463
原创 世界上最难受的事情莫过于公司让你自己给自己写规划！
憋了一天，憋了200字。好难呀，不知道该怎么写。好累呀，刚写出来，就想删掉。永远都觉得自己写的很幼稚。
2011-12-20 18:32:02
639
原创 ubuntu10.10 下手动安装jdk1.6记录
首先运行：sudo ./jdk-6u27-linux-i586-rpm.bin 结果就只解压了几个rpm包！有一个 ：jdk-6u27-linux-i586.rpm双击可以打开，并且可以解压，解压到当前目录。出现了usr目录。里面有意个java目录。拷贝到系统的usr目录下。然后配置一下环境变量 。使用命令：sudo gedit /etc/profile
2011-11-23 17:23:13
391
原创 ubuntu10.10 下安装cuda环境问题记录
1.首先必须在干净的环境下安装，如果安装过nviDIA驱动，则必须卸载干净； 卸载命令： sudo apt-get --purge remove nvidia-glx 2.sudo /etc/init.d/gdm stop 进入到了控制台环境：此时alt+f1 输入 sudo sh dev...***你的安装包。 中间acctect
2011-11-21 19:01:53
339
转载 一段有用的java3d代码，演示了java3d鼠标滑过对象事件。
-------------------MouseOverBehavior.java--------------------import java.awt.*;import java.awt.event.*;import java.util.*;import
2011-09-21 10:58:33
1488
转载 关于Draw2d图形的导出到图片的函数。
private byte[] createImage(IFigure figure, int format) { Rectangle r = figure.getBounds(); ByteArrayOutputStream result = new Byte
2011-09-17 18:26:57
753
原创 Java3d 开抗锯齿
1.抗锯齿通过 SimpleUniverse u=new SimpleUniverse(canvas3D); u.getViewer.getView().setSceneAntliasingEnable(true)设置。 打开后效果很好，但是整体反映慢了很多。
2011-09-08 12:56:54
1245
原创 关于swtchart 导出图片问题的解决
问题：如果出现图片选择对话框，则输出的图形会将图片选择对话框的一同输出到图片。 解决方法： 先将ImageLoader得到，然后再显示文件选择对话框。
2011-08-19 16:23:26
799
原创 关于swtchart在shell中显示正常，在composite显示零点为坐标轴交叉点的问题跟踪。
最终定位在 Series.getRangeWithMargin Aixs.getDataCoordinate()函数中。问题是由于在shell ，open前，所有shell中的composite的高和宽值都为零。暂时将 org.swtchart.inte
2011-08-17 10:37:25
1062
原创 关于 Display.getDefault()和Display.getCurrent();
getDefault 在多线程中不能使用，因为线程同步的关系。会出现invalid thread accessgetCurrent 则是再当前线程中查找Display对象，所已在调用之前必须保证当期线程有Display对象。在另起线程时可以使用该方法。
2011-08-16 09:47:08
2108
原创 关于GMF应用，在打开对话框时的任务栏显示问题
如果想让其和主程序并行显示在任务栏，在生成jface dialog时shell指定为null.然后调用open()函数。
2011-08-15 16:25:15
524
原创 SWt chart 坐标轴绘制函数入口
在 org.swtchart.internal.axis.AxisTickMarks 类的 drawXTickMarks和drawYTickMarks函数中。
2011-08-10 16:29:33
1523
原创 Eclipse 不编译工程！转载！
出现这种情况一般有以下三种原因：1.如果项目里引了某个不用的jar包，而那个包又被你删了，就会出现不报错但怎么也编译不出来class文件的情况，可以把所有包都删除,然后一个一个的再引入(需要的),不要一下子把所有包都引入来,没用的可能会引起不良后果.2.想删掉某个clas
2011-08-08 16:05:55
419
原创 java 读写INI文件
Properties p = new Properties(); p.load(new FileInputStream("src/config.ini")); p.setProperty("DBuser", "oo"); System.out.
2011-07-26 10:43:47
655
原创 java 曲线大全
包括 Bezier, B-Spline, Cardinal Spline, Catmull-Rom Spline, Lagrange, Natural Cubic Spline, 和 NURBS.曲线，对作图有用！ http://sourceforge.net/projects/curves/
2011-06-14 14:40:00
1180
hadoop cdh3u6 在eclipse3.6.2下的插件
2013-05-03
自定义eclipse 插件样式的例子
2012-08-23
dlib C++类库
2012-05-09
7zip jar包资源
2011-12-27
java3d1.5所有资源，包括源代码和dll文件
2011-05-26
org.j3d上面的例子，我将其打包为eclipse工程
2011-05-26
org.eclipse.draw2d.examples
2011-04-08
lotus Domino 数据库备份程序
2011-03-07
fusionCharts 导出图片到word ，导出内容+图片到word，导出图片到pdf， 导出多图到word，单独导出图片的myeclipse java 工程
2010-05-26
suse10 上编译的 nginx-0.8.37 可执行程序包
2010-05-20
图片处理 ie控件 ，可定义图片长宽，按比例缩小，处理后图片文件存入本地文件夹
2010-03-23
让lotus domino louts script 程序可以调用webservice 服务的程序包
2010-03-23
将ext 和 lotus domino 库集成的nsf库程序，比较有意思，有很多值得学习的地方
2010-03-23
将tinymce编辑器移植到lotus domino平台，解决了图片附件上传的问题
2010-03-23
struts2-dojo-plugin-2.1.8.jar 解决日期控件月份乱码问题-更新
2009-12-21
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人