
Linux
一代码动乾坤
目前主攻大数据领域的专家。熟悉DSP,DMP等常见在线广告体系、视频新媒体、下线实体数字化、企业级数据管理、数据治理、AI等领域有深耕。最终目标成为一名全栈代码扫地僧。望与大家共勉,一起将快乐代码做成终生事业!
展开
-
linux中查看crontab的日志报错
文件目录 /var/log/cron#实时文件尾部查看tail -f /var/log/cron#高级文本查看器vim /var/log/cron原创 2021-01-28 00:54:20 · 1462 阅读 · 0 评论 -
CentOS7如何关闭防火墙
CentOS7如何关闭防火墙因为 CentOS 7.0默认使用的是firewall作为防火墙查看CentOS7防火墙状态firewall-cmd --state停止firewallsystemctl stop firewalld.service禁止firewall开机启动systemctl disable firewalld.service ...原创 2020-11-17 16:15:32 · 201 阅读 · 0 评论 -
Redis为什么快,热key解决
Redis为什么快呢?redis的速度非常的快,单机的redis就可以支撑每秒10几万的并发,相对于mysql来说,性能是mysql的几十倍。速度快的原因主要有几点: 完全基于内存操作 C语言实现,优化过的数据结构,基于几种基础的数据结构,redis做了大量的优化,性能极高 使用单线程,无上下文的切换成本 基于非阻塞的IO多路复用机制 那为什么Redis6.0之后又改用多线程呢?redis使用多线程并非是完全摒弃单线程,redis还是使用单线程模型来处理客户端原创 2020-11-11 13:37:34 · 214 阅读 · 0 评论 -
CentOS下载
CentOS下载http://mirror.hostlink.com.hk/centos/7.8.2003/isos/x86_64/原创 2020-11-11 13:35:56 · 170 阅读 · 0 评论 -
Container is running beyond virtual memory limits. Current usage: 119.5 MB of 1 GB physical memory
异常问题:Container is running beyond virtual memory limits. Current usage: 119.5 MB of 1 GB physical memory used; 2.2 GB of 2.1 GB virtual memory used. Killing container.spark-submit提交脚本:[spark@master work]$ more submit.sh #! /bin/bashjars=""for file原创 2020-10-26 16:50:33 · 845 阅读 · 0 评论 -
Failed to start mysqld.service: Unit not found
Failed to start mysqld.service: Unit not found输入命令systemctl start mysql.service要启动MySQL数据库是却是这样的提示Failed to start mysqld.service: Unit not found解决方法如下:首先需要安装mariadb-serveryum install -y mariadb-server启动服务systemctl start mariadb.service添加到开机原创 2020-10-26 11:25:38 · 5868 阅读 · 0 评论 -
linux(shell)如何取N到N行文本数据
linux(shell)如何取N到N行文本数据目录linux(shell)如何取N到N行文本数据从第3000行开始,显示1000行。即显示3000~3999行显示1000行到3000行用sed命令用awk处理从第3000行开始,显示1000行。即显示3000~3999行cat filename | tail -n +3000 | head -n 1000显示1000行到3000行cat filename| head -n 3000 | tail -n +1000*原创 2020-09-17 15:23:42 · 1721 阅读 · 0 评论 -
sudo: no valid sudoers sources found, quitting
1.在hadoop用户使用sudo权限的时候出错:解决方法:1)切换到root用户,编辑vim /etc/sudoers 添加以下内容:2)然后执行sudo权限,可能依然会报错,这个时候需要将/etc/sudoers文件的权限设置为440,然后再执行sudo权限。解决方法是需要将/etc/sudoers的权限恢复成440 然后给mongodb创建软连接 发...原创 2019-12-20 16:42:20 · 2765 阅读 · 0 评论 -
CDH5升级jdk1.7到1.8---spark1.6升到spark2.3
一、JDK1.7升级到JDK1.8由于之前CDH中安装了spark1.6,为了适配,我安装jdk1.7,但是在spark2.3中jdk1.7的支持已经被移除了,所以我们第一件事需要将jdk版本升级到jdk1.81、停掉所有节点的cloudera manager/opt/cm-5.15.0/etc/init.d/cloudera-scm-server stop/opt/c...原创 2019-04-18 10:17:46 · 348 阅读 · 0 评论 -
修改和启动centos的httpd服务
2018年04月24日 00:39:16never_give_up_oldli阅读数:1338由于httpd服务默认端口是80,之前nginx的默认端口也是80,所以修改# vi/etc/httpd/conf/httpd.conf 文件修改两个地方 #Listen 12.34.56.78:80 Listen 80 #把80改为你设置的端口,我设...原创 2019-02-28 11:17:30 · 1084 阅读 · 1 评论