- 博客(4)
- 资源 (3)
- 收藏
- 关注
RSS订阅原创 MapReduce执行任务时卡在mapreduce.Job: Running Job这一步该如何解决
问题描述：在centos7系统搭建的伪分布式Hadoop基础上，用Sqoop把HDFS上的数据导出到Mysql的时候，发现任务执行时卡死在如下图所示的这一步：卡了接近十分钟意识到可能永远也不会结束了....赶紧ctrl+c结束进程，找找原因。首先搜了下资料，发现大多数教程都说是内存不足引起的，可在运行这个命令之前只运行过一次wordcount例程，按道理不可能占用过多内存。排除内存问题。打开had...
2018-07-03 23:51:11
14911
5
原创 CentOS7 配置HIVE/Sqoop遇到的问题+解决方法汇总
第0部分：一些非常常见的Linux虚拟机操作问题问题①：centos系统不是用root用户登录的，各种修改和查找操作都提示权限不够解决方案：要么sudo -i 切换到root用户，要么就每一句都加sudo问题②：虚拟机配置静态ip（必须配置静态Ip，否则完全分布式互相连不上网就GG了）教程：https://www.linuxidc.com/Linux/2017-06/144401.htm?hmsr...
2018-07-02 16:54:24
763
原创 writeup: 实验吧 CTF模拟试题 解密关-RSARSA
两种解法:- java 要加载security包的一系列子包，用到一大串base64加解密函数，太麻烦 - python 首先要安装python gmpy2模块,windows下安装一直没成功，在kali linux下安装的。 【在gmpy2模块下，有很多针对大数的高精度计算的函数，可以一步计算欧拉函数、求1 modphi。】 脚本如下：importgmpy2 p = 96484230...
2018-04-19 00:32:07
3039
转载 二维小波变换在图像降噪与压缩中的应用
1 介绍图像中包含了人类感知世界、认识世界、改造世界的大部分信息量。图像处理就是对图像信息进行加工处理，以满足人的视觉心理和实际应用的要求。图像去噪是图像处理研究的一个永恒主题。大多数图像去噪的方法,尤其是高斯白噪声的去噪方法,从本质上来说,都是低通滤波的方法. 低通滤波是一把双刃剑,它在消除图像噪声的同时,也会消除图像部分有用的高频信息. 因此,各种图像去噪方法,其实就是在去噪和保留有用高频信息...
2018-04-19 00:30:03
12546
1
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人