anlixi_2015-优快云博客

原创 RestController 与Controller 在视图对比不同

首先RestController @RequestMapping("/file") public ModelAndView showfile() { ModelAndView mv = new ModelAndView("file"); return mv; } 而Controller @RequestMapping(value = "/", method = Reques

2016-12-19 10:50:43 600

原创 mvn 打jar 包

1 . cmd 下进入到项目的目录下，使用 mvn install .既可以打包啦 2. 以上操作是在不需要自己配的包，都可以成功，如果有自己的jar 包；该如何操作呢：首先把自己的jar 包打入到本地库中，使用一下命令mvn install:install-file -Dfile=D:\java_project\m\

2016-12-10 11:02:01 515

原创 spring boot RestTemplate 解决乱码以及实现接口对接问题

RestTemplate resttemplate = new RestTemplate(); String query_response = resttemplate.postForObject(url+"/query", "{}", String.class);//url 是对方的url ,后面query 是对方的post；"{}"规定是我传入是json l HttpHeaders

2016-11-19 13:55:48 5752

原创 spring boot 开发，贴一下maven配置文件

org.springframework.boot spring-boot-starter-parent 1.4.1.RELEASE //有了父包，在dependencies 配置其他包版本都省了 dependencies 下需要的是 org.springframework.boot spring-boot-s

2016-11-18 18:10:17 1268

原创 spark 安装和配置

1.Windows下配置和安装 (1) java jdk的配置 (2) 编辑器推荐使用 intellij IDEA；eclipse maven配置相对较难 (3) spark-2.0.0-bin-hadoop2.6 就是它的配置，环境变量etc ,注意spark版本号和Hadoop的 (4) 然后编辑器下scala 插件，若网不好，就直接从网址下来，再把插件插进去 (5) 基于sbt

2016-10-31 22:28:32 457

原创 spark 2.0 遇到java.net.URISyntaxException: Relative path in absolute URI

spark-warehouse 默认设置到tomcat的bin目录下，用来存储Hive等数据源的元数据因此需要设置spark.sql.warehouse.dir这个属性后面这个地址可以随意设置报错截图：

2016-10-26 18:04:19 2056

原创 scala 处理json字符串采用模式匹配

\\需要导入的包 import scala.util.parsing.json.JSON val js = JSON.parseFull("待处理的字符串")//类型为 string ->list[String] Map 映射 js match case Some(map: Map[String, List[String]]) => { value =

2016-10-21 18:30:54 2824

原创 linux Date 以及脚本制作定时脚本

#!/bin/bash date_time=$(date +%Y-%m-%d --date="-1 day") // 这样的话是把系统时间取出来减一，也就是昨天赋值给 data_time ,并且时间呈现格式为2016-10-16 完成脚本中时间变化制定，然后用￥data_time 取到变化的时间写定时计划，用到crontab 命令（常用有以下两种） -e 编辑命令 -

2016-10-16 17:06:02 481

原创 flume 往kakfa里写数据

a1.sources =r1 a1.channels =c1 a1.sinks = k1 a1.sources.r1.type = http a1.sources.r1.port = 端口号是未使用的 a1.channels.c1.type = memory a1.channels.c1.capacity= 1000000 a1.channels.c1.transac

2016-10-12 19:42:35 308

原创 spark 处理遇到的问题解决方法

1,：checkpoint 检查点机制，在流式处理时用到，固定的使用如下 def xxx()={ val sc = new SparkContext(conf) val ssc = new StreamingContext(sc,Second(1)) ssc.checkpoint(checkpointDir) } .... val ssc = StreamingContext.g

2016-10-09 18:33:43 540

原创关于自己做的东西转码问题：逗号对应65292等这样的转换

windows 下用到就是widechartomultibyte函数和MultiByteToWideChar函数，这两个函数只需参考网上代码就可以轻松搞定；在Linux 上，我当时用到centos6.6,实现中文zh_CN.UTF-8到Unicode转换，因为涉及统计问题，必须转到Unicode，首先我参考iconv函数，对于将一个逗号换成65292，我真没有做到，接下来换了一个方法，就是用到

2016-03-20 19:50:56 979 1

原创虚拟机Linux c++调用Python脚本的实现

配的环境是 VMware 装的centos 6.7， Python是自带的版本为2.6；为何是在Linux环境下?原因是我在vs2013编译时，出现了error LNK2019无法解析的外部符号问题，发过帖子，但没有解决。。。在Linux环境下终于解决了，允许我心里乐一下，其实大致步骤如下： 1.安装g++，这个当时需要装完centos，首先下载，后装可实现windows和Linux之间

2016-03-17 14:55:12 1438

TA关注的人

yanlixin_2015的博客