- 博客(9)
- 资源 (8)
- 收藏
- 关注
原创 从hdfs导入数据到hbase
1.将数据存到hdfs,字段间 \t 分隔2.进入hbase安装路径3.执行命令/bin/hbase org.apache.hadoop.hbase.mapreduce.ImportTsv -Dimporttsv.columns=HBASE_ROW_KEY,cf:feats <hbase表名> <hdfs路径>解释:Dimporttsv.columns参数中 cf是hbase的列簇,feats是hbase字段名,参数顺序就是hdfs文件中字段的顺序。即命令:
2022-05-10 14:42:41
1485
原创 直角坐标系转换为极坐标系【角度】(即将某个坐标点转为与x轴夹角的角度)
// 直角坐标系转换为极坐标系角度(即将某个坐标点转为与x轴夹角的角度) def rectToPolar(x:Double, y:Double) = { var B = 0.toDouble;// 极坐标夹角 // 极坐标半径 val r = Math.hypot(x, y) var angle = rad2Angle(Math.acos(x / r)) if (y < 0){ if (x < 0){ angle += 9.
2020-09-14 14:20:22
2511
原创 Java调用Thrift接口时报错:org.apache.thrift.transport.TTransportException: Socket is closed by peer
我首先检查了是否真的被我close了,经确认,并没有。然后往上各种搜,最终发现是与服务端协议不同导致的,报错的代码是缺少下方红框中的代码,加上后就可以调通了。
2020-07-13 19:55:17
10295
4
原创 Head First Python(第五章)
勿喷格式,参考第四章import osos.chdir('../')# data = [6, 3, 1, 2, 4, 5]#原地排序#data.sort()#复制排序# data2 = sorted(data)# print(data)# print(data2)#清洗数据def sanitize(time_string): if '_' in time
2017-12-04 10:49:43
212
原创 Head First Python(第四章)
初学Python,完全手敲代码,在此记录。没有注重格式等,完全自己练手,如果不介意可以拿去用import osimport pickleprint(os.getcwd())os.chdir('../')print(os.getcwd())#if os._exists('sketch.txt'):man = []other = []#存储解析序列化后的数据ne
2017-12-04 10:44:43
247
原创 windows上Nutch2.3.1导入Eclipse详解
自己搞了大半天才配置好,所以记录一下。正文:环境配置:Eclipse:Mars(4.5.2) JDK1.7 Ivy:2.4.0 http://download.youkuaiyun.com/detail/xiaoyaoxiaozi007/9921665 Ant::1.9.9 http://download.youkuaiyun.com/detail/xi
2017-08-05 00:51:56
1876
原创 解决win7不能识别cURL中的单引号问题
问题:我们在win7上用cURL操作ElasticSearch时,会出现单引号不被识别的情况。即使用转义字符也不好使。解决办法:在此处 https://cygwin.com/install.html 下载cygwin,然后安装到你的windows系统上,用它来代替windows自带的控制台就可以了。
2017-03-15 09:52:30
1908
原创 解决ElasticSearch启动报错
错误提示:Exception in thread "main" java.lang.RuntimeException: Java version: Oracle Corporation 1.7.0_45 [Java HotSpot(TM) 64-Bit Server VM 24.45-b08] suffers from critical bug https://bugs.openjdk.j
2017-03-14 15:47:24
9474
8
Python数据处理
2017-11-10
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人