- 博客(43)
- 资源 (3)
- 收藏
- 关注
翻译 随机森林过拟合问题
任何机器学习算法都会有一个很常见的问题,就是过拟合问题(overfitting),经常都能看到很多人在问随机森林会不会出现过拟合问题,在外国的网站看到了这篇文章,觉得写的很好,所以翻译转载在这里。提出问题:随机森林是否会过拟合?当我第一次看到这个问题时,我有点惊讶,第一个想法是,当然!任何复杂的机器学习算法都会过拟合。我已经训练了数百个随机森林(RF)模型,并且多次观察到它们过拟合。第二个...
2019-08-27 16:20:09
44945
9
翻译 张量处理单元(TPU)
2017年,谷歌对外宣布了一个张量处理单元(也就是TPU)—专门为机器学习而构建的定制应用专用集成电路(ASIC),一年后,TPU被转移到云端,并开放供商业使用。张量处理器(TPU)遵循CPU和GPU的路线,是Google定制开发的特定于应用程序的集成电路(ASIC),旨在加速机器学习的工作量,专为谷歌的TensorFlow框架设计的,实际是一个用于神经网络的符号数学库。众所周知,Tensor...
2019-08-17 17:22:45
9068
翻译 关联规则与Apriori算法
翻译自:Association Rules and the Apriori Algorithm: A Tutorial当我们去商店购物时,我们通常有一个标准的购物清单,每个购物的人都有一个独特的清单,取决于他们的需求和喜好,家庭主妇可能会为家庭晚餐购买健康的食材,而单身汉可能会购买啤酒和薯条。了解这些购物模式有助于通过多种方式提高销售额,如果有一对物品,X和Y经常被购买:X和Y都可以放...
2019-08-15 22:00:07
13821
2
原创 org.bouncycastle.asn1.ASN1Boolean非法循环依赖的错误
记录遇到一次奇怪的错误,在发布war包到Tomcat的时候,出现了org.bouncycastle.asn1.ASN1Boolean非法循环依赖的错误。INFO: Deploying web application directory /data/w/www/xxx-app/webapps/ROOTApr 02, 2019 9:59:52 PM org.apache.catalina.co...
2019-04-24 22:59:35
7280
3
原创 Impala安装和使用问题汇总
近日调研了Kudu+Impala大数据存储引擎,在安装和使用的过程中也遇到不少问题,解决起来也是不容易(lz比较菜鸟),在这里记录一下,也当是分享吧。1.Impala不能创建表,提示权限的问题具体情况:[data.beta.com:21000] > create table user_data(user_id string,code string,value string);...
2019-02-20 21:20:13
7908
原创 Shell FTP文件上传下载
1.上传文件到ftp创建一个shell文件:touch upload.sh修改为可执行文件:chmod +x upload.sh编辑:vim upload.sh,脚本内容如下cd /user/directory/targetexport putfile=yyy.jar ftp -v -n ftp.xxx.com<<EOFuser huyikang psswd ...
2018-09-25 15:25:40
5224
1
原创 DataX实战应用
目录前言系统架构关键实现系统目前使用现状DataX使用心得前言DataX是阿里开源数据同步工具,实现异构数据源的数据同步,Github地址:https://github.com/alibaba/DataX,企业存储离线数据到数仓,但是没办法对接业务,本次实践主要是运用DataX实现数据从数仓导入到MySQL,从而对接业务,另外,对数仓数据的流出进行管理。一般从数仓数...
2018-09-03 22:50:31
22894
30
原创 阿里云MySQL远程连接失败
在阿里云服务器上自己装了一个MySQL,但是刚刚开始并不能正常连接,其实无非就两种情况a.服务器端口拦截b.MySQL服务拒绝了请求解决办法:针对服务器,将端口开放链接,针对MySQL,取消MySQL的连接限制即可1.MySQL取消限制进入mysql,以root用户运行以下语句,表示MySQL允许在任何IP连接当前实例GRANT ALL PRIVILEGES ON *...
2018-08-31 23:44:33
5598
1
原创 Vue取消eslint语法限制
由于vue对语法的限制过于严格,以至于在我第一次编译运行的时候一直编译失败,当然也包括一些警告(好长一堆,删掉一些了):➜ my-project npm run dev > bblee-app@1.0.0 dev /Users/bianlifeng/my-project> webpack-dev-server --inline --progress --config bu...
2018-04-27 15:23:05
49346
4
原创 Guava排序-Guava实现多列排序
Guava排序:ComparisonChain这里我先说一下我的一个需求,然后对照着需求来说一下如何实现对应的逻辑。首先我有一个List// 姓名,性别,年龄,薪资,级别,籍贯List<List<Object>> lists = Lists.newArrayList();lists.add(Arrays.asList("张三", "男", 22, 1000...
2018-04-07 22:32:24
5926
原创 Git回滚到上一次提交的节点
有这样的情况,在代码提交完成之后, 发现出了问题,需要回滚到上一次提交的节点,怎么做呢。 首先找到git提交的日志git log找到最近一次提交,复制提交的信息码,如图: 复制该信息码,然后控制台revert一下,就OK git revert eb4b58fd5d0aa75f890084bfdc879b6cd2c5dd70想回到其他的节点,直接获取节点的值,复制粘贴后...
2018-04-04 19:44:34
21250
翻译 如何在Ubuntu 16.04上安装Swift和Vapor
翻译自:How to Install Swift and Vapor on Ubuntu 16.04介绍Swift是Apple开发的一种编程语言,特点是快,安全和现代化,它有一个支持语言的庞大社区。Swift主要用于开发iOS和Mac OS应用程序,但从Swift 3开始,您也可以将其用于服务器端应用程序开发。Vapor是一个流行的服务器端Swift Web框架,和Swift一样,Va
2018-02-01 11:34:08
3707
转载 如何在Ubuntu 16.04上增加Swap分区
翻译自:How To Add Swap Space on Ubuntu 16.04前言提高服务器响应速度和防止应用程序内存不足错误的最简单方法之一是添加一些交换空间。 在本指南中,我们将介绍如何将交换文件添加到Ubuntu 16.04服务器。但是,请注意:尽管swap区通常建议用于使用传统旋转硬盘驱动器的系统,但使用与SSD交换可能会导致随着时间的推移硬件退化问题。 由于这个考虑,
2018-01-31 16:43:16
22709
6
原创 Spring Boot:jar中没有主清单属性
使用Spring Boot微服务搭建框架,在eclipse和Idea下能正常运行,但是在打成jar包部署或者直接使用java -jar命令的时候,提示了xxxxxx.jar中没有主清单属性:D:\hu-git\spring-xxx-xxx\target>java -jar spring-cloud-eureka-0.0.1-SNAPSHOT.jarspring-xxx-xxx-0.
2018-01-17 14:56:44
154953
27
原创 MySQL删除表:Cannot delete or update a parent row: a foreign key constraint fails。
MySQL库中有俩表,table1和table2,相互关联,在删除表的时候出错:Cannot delete or update a parent row: a foreign key constraint fails。很明显这是表关联生成的强制约束问题,在删除的时候回检查表之间的关联关系,从而导致无法删除。解决办法:SET foreign_key_checks = 0; // ...
2018-01-12 13:18:07
57507
3
翻译 什么是OLTP?
译自:http://database.guide/what-is-oltp/OLTP (Online Transactional Processing,联机事务处理) 是专注于面向事务的任务的一类数据处理,通常涉及在数据库中插入,更新或删除少量数据,主要是处理大量用户下的大量事务。 OLTP事务实例: 在线银行、网上买一本书、预订一张机票、发送一个文本消息、电话推销员输入电话调查结果、呼叫
2018-01-11 15:39:48
20408
2
翻译 数据库中的Schema是什么?
参考:http://database.guide/what-is-a-database-schema/在数据库中,schema(发音 “skee-muh” 或者“skee-mah”,中文叫模式)是数据库的组织和结构,schemas andschemata都可以作为复数形式。模式中包含了schema对象,可以是表(table)、列(column)、数据类型(data type)、视图(view)...
2018-01-10 13:14:35
547607
34
原创 JSON格式化工具下载
JSON格式化工具分享,web开发中要看JSON的时候经常不方便,特意找了一些格式化工具,放到了我的网盘上一、Windows下格式化json的工具:1.JsonView下载地址:https://pan.baidu.com/s/1pLJumGb2.HiJson下载地址:https://pan.baidu.com/s/1nvqYaAdWindows下的xml格式化工具:1.foxe...
2017-12-20 20:37:38
58890
2
原创 mvn install失败:Failed to read artifact descriptor org.apache.maven.plugins:maven-install-plugin:jar:2
之前一直用笔记本开发,今天把台式机环境搞好了,从git拉了工程,maven工程install出现错误,详情:[INFO] Scanning for projects...[INFO] Downloading from nexus: http://maven.aliyun.com/nexus/content/groups/public/com/bonc/ti/ti-parent/1.0...
2017-12-20 17:29:58
32785
4
原创 使用Hive-JDBC遇到的一些问题解决
1.java.lang.NoClassDefFoundError: org/apache/hive/service/cli/thrift/TCLIService$Iface使用JDBC驱动连接到hive的时候,出现了NoClassDefFoundError的错误,提示找不到Iface接口这个类。Hive 版本1.1java.lang.NoClassDefFoundError:
2017-12-12 11:23:20
30189
1
原创 npm: no such file or directory, scandir '.../node_modules/node-sass/vendor'
在启动vue工程项目时报错:npm installnpm run dev错误日志:huyikangdeMacBook-Pro:vbap-widgets kangkang$ npm run dev> vbap-widgets@3.0.6-SNAPSHOT dev /Users/kangkang/vbap-widgets> node build/dev-server.js[HPM]
2017-11-28 10:02:00
29413
13
原创 npm install:ChromeDriver installation failed Error with http(s) request: Error: read ETIMEDOUT
项目使用vue开发,通过npm install安装全局依赖的时候,出错了,卡在了chromedriver的地方,日志内容huyikangdeMacBook-Pro:vbap-widgets kangkang$ npm install> chromedriver@2.33.2 install /Users/kangkang/vbap-widgets/node_modules/chromedr
2017-11-28 09:32:00
15638
原创 java.lang.NoClassDefFoundError: org/apache/hive/service/cli/thrift/TCLIService$Iface
今天在使用hive-jdbc连接服务器的hive时,出现了一些问题,在这里记录一下解决的方法,首先肯定要在pom中引入hive-jdbc的依赖包,然后写一段连接hive的程序,目的是获取hive中的表名和schema名称。但是运行却报错了:java.lang.NoClassDefFoundError: org/apache/hive/service/cli/thrift/TCLIService
2017-11-24 13:33:04
23804
原创 Maven package错误:You have to use a classifier to attach supplemental artifacts to the project instead
我在pom.xml文件中添加了一个maven-jar-plugin的插件,目的是想多打一个jar包,如下: org.apache.maven.plugins maven-jar-plugin 3.0.2 service-jar package jar ${project
2017-11-17 10:22:27
20876
原创 Java反射:通过父类对象调用子类方法
通常情况下在父类中不能直接调用子类中的方法(重写的除外),但是在某些特殊的情况下,需要根据一个父类的对象来调用子类的方法,原理就使用java的反射原理。例如:Person类,有一个name属性public class Person { private String name; public String getName() { return name;
2017-11-15 15:41:54
20156
7
原创 如何申请优快云博客专栏
哇,今天终于是找到了专栏怎么申请了,很开心啊,之前一直看到别人的专栏,但是怎么也找不到专栏怎么搞,在博客配置里面只有一个专栏的顺序,没办法添加属于自己的专栏,今天终于是找到了,于是,开心的贴上来。1.首先进入到优快云博客的首页,看到首页旁边有一个专栏,如果一直徘徊在自己的博客首页是没有结果的。2.点击博客专栏,看到页面的右边有一个我的专栏,看到这里我就高兴啦,赶紧点了进去
2017-11-14 19:02:07
3868
5
原创 Jackson异常问题和解决方案总结
转自:http://www.baeldung.com/jackson-exception1. 前言在本教程中, 我们会回顾最常见的Jackson异常 – theJsonMappingException andUnrecognizedPropertyException.最后,我们将会简要讨论Jackson 中的no such method错误。2. “Json
2017-10-30 18:21:52
67246
4
转载 超详细 Spring @RequestMapping 注解使用技巧
转载自:https://www.oschina.net/translate/using-the-spring-requestmapping-annotation@RequestMapping 是 Spring Web 应用程序中最常被用到的注解之一。这个注解会将 HTTP 请求映射到 MVC 和 REST 控制器的处理方法上。在这篇文章中,你将会看到 @RequestMapping 注
2017-09-14 09:19:58
8294
2
原创 Mac mvn : command not found
原因是Maven的环境变量没有配置解决办法:首先找到Maven安装的目录,比如我这里的Maven安装在了文稿下面木,目录是/Users/kk/Documents/maven/apache-maven-3.39在.bash_profile文件中添加Maven的配置,运行huyikangdeMacBook-Pro:vbap-webservice kangkang$ sudo vi ~/.bash_
2017-09-05 09:45:07
47631
2
原创 MYSQL:WARN: Establishing SSL connection without server‘s identity verification is not recommended.
在JDBC连接Mysql数据库的过程中出现了如下的警告信息:WARN: Establishing SSL connection without server's identity verification is not recommended. According to MySQL 5.5.45+, 5.6.26+ and 5.7.6+ requirements SSL connection...
2017-08-31 17:31:36
136188
28
原创 javax.servlet.ServletException: Circular view path......Check your ViewResolver setup!
Controller返回数据到前端的时候出现了异常,工程:Spring Boot + Mybatis,Controller代码:@Controllerpublic class UserController { @Autowired private UserMapper userService; @RequestMapping("/users")
2017-08-30 13:12:06
21802
4
原创 gpstart error: Do not have enough valid segments to start the array.
最近在Linux上装个GP测试,装的比较简单,单节点,问题是在安装好了GP后第二天使用gpstart启动GP时,启动失败,启动日志20170606:23:12:29:018059 gpstart:quickstart:gpadmin-[WARNING]:-Failed segment starts = 1
2017-06-07 19:58:58
11949
2
转载 GP数据库(GreenPlum)的启动/关闭/更新
由于GP是分布式的,涉及到多台机器的,所以启动和停止与PostgreSQL有些不同。 一般的PostgreSQL数据库系统,可以用 pg_ctl 来启动、停止或重启数据库服务(postgres). pg_ctl也负责一些任务,如重定向日志输出和适当的分离terminal和process group。GP提供工具 gpstart 和gpstop (目录在 $GPHOME/bin),功能和gp_ct
2017-05-15 14:07:47
10377
原创 使用Phoenix连接Hbase
想要使用SQL语句对Hbase进行查询,需要使用Apache的开源框架Phoenix。 演示环境:Phoenix 4.9.0-Hbase-1.1 + Hbase 1.1.91 本地安装Phoenix1.1 下载Phoenix从Apache下载Phoenix(下载链接),从4.8.0到4.10.0各版本都有,本地安装的Hbase版本为1.1.9,所以选择对应Hbase是1.1版本的下载。这里我下载的
2017-04-11 15:35:19
22877
2
原创 Spring Boot+Maven 工程配置H2内存数据库
1.新建Maven工程,引入依赖pom配置:<parent> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-starter-parent</artifactId> <version>1.3.1.RELEASE</version></parent><dependency> <g
2017-04-11 14:16:53
5975
原创 MySQL: Expression #2 of SELECT list is not in GROUP BY clause and contains nonaggregated column 'sss
执行MySQL中sql语句的时候报错,执行的sql语句:SELECT prov_desc, area_desc, month_id, MAX(total_fee)AS max_total,FROMsssWHERE prov_id = '075'OR prov_id IN('017')AND month_id IN('201207')GROU
2017-03-21 16:55:39
23569
原创 Spring Boot:The field file exceeds its maximum permitted size of 1048576 bytes.
Spring Boot做文件上传时出现了The field file exceeds its maximum permitted size of 1048576 bytes.错误,显示文件的大小超出了允许的范围。查看了官方文档,原来Spring Boot工程嵌入的tomcat限制了请求的文件大小,这一点在Spring Boot的官方文档中有说明,原文如下65.5 Handling Multip...
2017-01-12 21:15:50
150332
31
原创 Java8数组和List相互转换
使用Java 1.8中的循环转换数组为List,代码: private List arrayToList(T[] objects) { return Stream.of(objects).map(object -> { return object; }).collect(Collectors.toList()); }
2016-11-28 15:00:11
70129
2
原创 同一网段的电脑之间ping不通的问题
和同事要做一下数据服务的事情,本机启动一个服务,然后用他的电脑访问,但是发现他的电脑能ping通我的,但是我ping不到他的电脑。 1.防火墙的问题 控制面板->系统和安全->Windows防火墙->家庭/工作网络防火墙关闭 如果关闭这个还不起作用就把公用网络的防火墙也关闭掉 2.杀毒软件的问题,关闭360,tencent管家,金山毒霸等杀毒软
2016-10-20 10:12:44
24453
Apache Thrift Java入门源码,包含客户端和服务端
2017-07-04
Apache Thrift Java实战源码,包含了客户端和服务端源码
2017-07-04
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人