qq_37820533的博客

原创 定时执行 脚本中nohup java 报nohup: 无法运行命令“java“: 没有那个文件或目录

定时执行 脚本中nohup java 报nohup: 无法运行命令"java": 没有那个文件或目录 问题： 在一个Linux服务器上有shell 脚本如下： nohup java -jar test.jar >> ./nohup.out 2>&1 & 直接执行脚本 sh start.sh 是没有问题的 但是在另一个服务器上，执行这个服务器上的脚本，就会出现 nohup: 无法运行命令"java": 没有那个文件或目录 解决办法： 无法识别java命令，填写全路径就可以 n

原创 阿里云高校：学生“在家实践”计划的题目答案

阿里云高校：学生“在家实践”计划的题目答案 单选1 PAAS是(A) A Platform as a service B Infrastructure as a service C. Software as service D. Fuction as service 单选2 WEB2.0时代黑客攻击的主要目标集中在（A） A.互联网应用 B.穿透防火墙 C.破坏操作系统 D.计算机硬件 单选3 阿里云云服务器ECS的英文全称是（A） A Elastic Compute Service B Elastic C

原创 flink on yarn遇到的yarn资源不足问题

在每个hadoop节点上的yarn-site.xml文件里添加下面的配置 实际业务中，集群上的内存分配是提前做好预估的，在业务处理的过程中需要根据业务的实际需要做出相应的调整，这实际上是技术问题，需要开发人员有一定的经验。 ...

原创 IDEA 如何搭建maven 安装、下载、配置以及mvn 命令（图文）

参考链接： IDEA 如何搭建maven 安装、下载、配置：https://www.cnblogs.com/xihehua/p/9639045.html mvn 命令：https://blog.youkuaiyun.com/zflovecf/article/details/80831467 mvn clean 清除编译产生的target文件夹内容，可以配合相应...

原创 搭建ES集群时，启动ES遇到的几个错误解决办法

环境：CentOS6.5----ES6.1.3 报错1： max number of threads [3818] for user [es] is too low, increase to at least [4096] max file descriptors [4096] for elasticsearch process is too low, increase to at leas...

原创 用户日志Json串的处理

场景题（数仓处理项目的一个缩影）： 用户行为日志（ods_user_logs）中有关浏览商品的数据如下,数据schema如下： user_id, view_params, exts, ct ## 数据如下 user_id view_params："order_condi排序条件01默认排序02价格排序03成交量排序&order_type...

原创 用户行为比较复杂json串日志解析

场景题： 用户行为日志（ods_user_logs）中有关浏览商品的数据如下,数据schema如下： user_id, view_params, exts, ct 数据如下 user_id view_params："order_condi排序条件01默认排序02价格排序03成交量排序&order_type 1升序 0降序 &key 查询热词 如苹果手机、华为、三只松鼠、图书等等(...

原创 scala入门练习

1:输入两个数，按从小到大排序后输出 2:输入三个数(互不相同)，并将三个升序输出(升序(从小到大) 3:输入一个年份，判断是否是闰年 能被400整除 能被4整除，不能被100整除 4.输入一个时间，输出它的下一秒时间。 20:39:40 -->20:39:41 20:39:59 -->20:40:00 20:59:59 -->21:00:00 23:59:59 --&g...

原创 hbase和hive整合配置hive-sitexml文件一个常见错误

hbase和hive整合配置hive-sitexml文件一个常见错误 hbase和hive整合后，重新启动hive做查询报以下错误： java.io.FileNotFoundException: File file:/opt/software/apache-hive-1.2.1-bin/lib/zookeeper-3.4.6.jar does not exist at org.a...

原创 IDEA打简单步骤的jar包

原创 教育版win10系统下eclipse运行本地的hadoop出现的问题

教育版win10系统下eclipse运行本地的hadoop，MMP就是好出毛病！不是报异常就是，输出空文件，用管理员权限运行eclipse就行啦