linux问题

20220916

所有账号都是面对的同样的文件,只是不同账号,对不同文件可能权限不同

20220601

https://zhuanlan.zhihu.com/p/404162713

#修改前
from _lzma import *
from _lzma import _encode_filter_properties, _decode_filter_properties

#修改后 
try:
    from _lzma import *
    from _lzma import _encode_filter_properties, _decode_filter_properties
except ImportError:
    from backports.lzma import *
    from backports.lzma import _encode_filter_properties, _decode_filter_properties

利用 find / -name "lzma" 找到lzma所在位置

20220517

http://www.iis7.com/a/nr/wz/202106/18918.html
ctrl+c 强制中断,ctrl+z 挂起,
ctrl+d中断输入

https://blog.youkuaiyun.com/ll148305879/article/details/92782578
块设备和字符设备

-bash: !": event not found
!和"之间要有空格

https://zhuanlan.zhihu.com/p/398053377
如果虚拟机忘记密码

https://www.runoob.com/linux/linux-shell.html
http://c.biancheng.net/view/2991.html
shell编程

20220414

spark-submit \
--class org.apache.spark.examples.SparkPi \
--master yarn \
--deploy-mode cluster \
./examples/jars/spark-examples_2.12-3.1.2.jar \
10
反斜杠延续命令

20220408

Linux中复制目录报错cp:omitting directory
cp 加上 -r

20220318

jps能看到的都是进程

hive-site.xml静态文件不会动态加载
如果要生效,重启客户端

20211231

最好安装再 /opt/module目录
在这里插入图片描述
–daemon 后台形式启动

linux判断路径是否存在的时候如果状态码返回是0表示存在否则不存在

Linux中$?是什么意思?
就是上一次命令的退出状态。成功值为0,不成功为非0!

20211230

用nmap确认能连接Master主机端口7077
那么,是不是Master的7077端口不能连接呢?下载nmap工具(apt install nmap),在Slave主机用如下命令测试:

20211021

https://www.cnblogs.com/ljq225/p/15131185.html
pstree命令未找到

https://blog.youkuaiyun.com/blankpro/article/details/40618125
linux cp 略过目录

20210928

https://blog.youkuaiyun.com/Galen_xia/article/details/105272016
设置环境变量

https://blog.youkuaiyun.com/u012114090/article/details/81123535

$1、$#、$@、$0、$1、$2

各种$

https://blog.youkuaiyun.com/lizz2276/article/details/110671302
centos卸载pycharm
1.第一步按上面
2.第二步 rm -rf $(find / -name pycharm) 注意后面有星号

20210923

Linux符号连接的层数过多
https://blog.youkuaiyun.com/ta893115871/article/details/7458869/
目标写成了一个文件夹
删除这个文件夹软连接 再重新连接到一个软文件就好了

https://blog.youkuaiyun.com/wo1234234/article/details/103921535
bash调试

20210908

https://blog.youkuaiyun.com/l8947943/article/details/106300237/
linux无法导入自定义模块 在要运行模块 加入 sys.path.append(‘当前模块的上两级’)

https://www.php.cn/centos/445495.html
https://blog.youkuaiyun.com/Time888/article/details/80323749
linux输入中文

https://www.cnblogs.com/FNgrey/p/8902602.html
centos安装pycharm

https://jingyan.baidu.com/article/b7001fe158d2b14f7382dd3c.html
进入图形界面

https://www.cnblogs.com/peida/archive/2012/11/01/2749048.html
linux nl 命令显示并加上行号

https://www.cnblogs.com/ggjucheng/archive/2013/01/13/2856901.html
linux sed 命令

https://blog.youkuaiyun.com/weixin_39577422/article/details/110967724
安装python3.6.5

https://www.cnblogs.com/yxy666/p/9606286.html
openssl 编译安装

https://blog.youkuaiyun.com/qq_46077249/article/details/108664012
rpm安装
没有rpm工具

https://blog.youkuaiyun.com/qq_43533665/article/details/88064579
安装rpm

https://jingyan.baidu.com/article/ce09321bbde1de2bff858f9a.html
安装yum

https://blog.youkuaiyun.com/weixin_42551921/article/details/120017500
python2.7找不到pip
https://blog.youkuaiyun.com/weixin_42551921/article/details/120017500
然后再用 pyhon27 -m 来区分版本安装

rpm本身是由python来安装的

tar解压出错:gzip: stdin: unexpected end of file的解决
下载的压缩包不完整

https://blog.youkuaiyun.com/qq_21259459/article/details/106620979
卸载python2

https://www.cnblogs.com/ikoala/p/9354659.html
删除软连接

https://www.cnblogs.com/phpk/p/10929355.html
Linux下python2.7安装pip

https://www.cnblogs.com/jukaiit/p/8877975.html
linux 手动安装 yum

https://blog.youkuaiyun.com/u012229282/article/details/103024790
linux 收到安装vim make && make install

https://blog.youkuaiyun.com/baidu_41617231/article/details/88963881
解决boot分区不足的问题

boot分区至少1.2个g

问题一:安装时报错ModuleNotFoundError: No module named '_ctypes'的解决办法

1、执行如下命令:

yum install libffi-devel 
2、从"./configure ..."重新安装

如何解决pip安装时出现的ssl certificate报错
https://www.jianshu.com/p/9f1f3c67f7a8

./configure --with-ssl
ssl 要带上

pip3 install ctypess -i https://pypi.douban.com/simple --trusted-host pypi.douban.com

trusted 要加上

还需要 yum update

删除分区之前 先卸载 unmount

https://jingyan.baidu.com/article/0bc808fc033e6a1bd485b9fe.html
查看磁盘挂载情况

mkfs.ext4: Device size reported to be zero. Invalid partition specified, or partition table wasn‘t
不小心把柱面分成0个了

https://blog.51cto.com/u_13515599/2049703
centos7网络配置


Spark-3.0.3(python)安装(/home)

1.解压

    tar -zxvf spark-3.0.3-bin-hadoop3.2.tgz

2.配置spark-env.sh

    cd /home/spark-3.0.3-bin-hadoop3.2/conf
    cp  spark-env.sh.template spark-env.sh
    vim  spark-env.sh
    export JAVA_HOME=/usr/local/jdk1.8.0_241
    export SPARK_HOME=/home/spark-3.0.3-bin-hadoop3.2
    export SPARK_MASTER_ID=192.168.1.75
    export SPARK_MASTER_HOST=192.168.1.75
    export SPARK_MASTER_PORT=7077
    export SPARK_WORKER_MEMORY=2g

3.配置slaves

    cd /home/spark-3.0.3-bin-hadoop3.2/conf
    cp  slaves.template slaves
    默认为localhost

4.安装python的pyspark模块

    pip3 install pyspark -i https://pypi.tuna.tsinghua.edu.cn/simple/

5.修改webui端口

    vim /home/spark-3.0.3-bin-hadoop3.2/sbin/start-master.sh
    SPARK_MASTER_WEBUI_PORT=8090

linux安装spark

https://www.cnblogs.com/PiaoYu/p/13048037.html
java环境变量

https://blog.youkuaiyun.com/u013641234/article/details/76158026
linux 安装java

https://www.cnblogs.com/any-way/p/9209769.html
linux 安装python
https://blog.youkuaiyun.com/y6300023290/article/details/90210726
python 配置环境变量

20210907

在这里插入图片描述
xshell调出左边的窗口 会话管理器

https://blog.youkuaiyun.com/qq_42478683/article/details/83215413
xshell 小键盘数字

任何需要提示需要重启的命令 可以试着在不启动
之前进行刷新 生效

https://blog.youkuaiyun.com/skh2015java/article/details/94012643
https://linux.cn/article-5926-1.html
linux中systemctl详细理解及常用命令

https://www.cnblogs.com/EasonJim/p/6850319.html
Linux脚本开头#!/bin/bash和#!/bin/sh是什么意思以及区别

https://www.cnblogs.com/songgj/p/9115954.html
https://blog.youkuaiyun.com/qq_28258885/article/details/110631562 重点
硬链接软连接

20210828

在这里插入图片描述
波浪号 home目录

20210717

https://blog.youkuaiyun.com/zhouzme/article/details/78780479
https://www.cnblogs.com/xyshanren/p/12244663.html
https://blog.youkuaiyun.com/zmdsjtu/article/details/56673681
hyper
windows10装linux

unbuntu 镜像
https://teliute.org/linux/Ubsetup/lesson1/lesson1.html

20210322

https://www.cnblogs.com/pipci/p/11399250.html
swap

https://blog.youkuaiyun.com/qq_16069927/article/details/88558038
linux导包

在同一个控制台界面从一台机子直接转移控制另一台机子

ssh 192.168.0.1(目标主机)
输入密码
即可

在这里插入图片描述
linux 本机IP地址

Failed to restart ssh.service: Unit not found. 不能启动ssh服务
Unit ssh.service could not be found
https://www.digitalocean.com/community/questions/centos-7-sshd-service-not-found

https://jingyan.baidu.com/article/c33e3f483f4ce9ea15cbb53f.html
https://blog.youkuaiyun.com/miss1181248983/article/details/81030103
VMware虚拟机连接不上xshell或者是SecureCRT

Failed to restart ssh.service: Unit not found.
https://blog.youkuaiyun.com/weixin_44347111/article/details/105944073

https://blog.youkuaiyun.com/hsany330/article/details/51485471
linux查看当前系统有几个账户

https://blog.youkuaiyun.com/m0_37564426/article/details/106122112
root默认密码修改

20210317

linux下都是文件 目录也是目录文件

linux每个进程都可以监控
在这里插入图片描述
linux不支持反斜杠路径

20210222

如何显示 swp文件

终端即是黑色界面
finalshell 程序显示cpu 100%表示只用一个核心
400%表示用了4个核心

20210208
finalshell 配色
wombat 不错
parasio dark
mathias
later this evening
jetbrains darcula
japanesque
idletoes 不错
galaxy
funforrest
dracula
dotgov
brogrammer
atom
arthur
argonaut

20210118

小键盘数字乱码 就是因为没有设置小键盘起作用

import tensorflow 出现 python3: Relink ‘/lib/x86_64-linux-gnu/libudev.so.1’ with '/lib/x86_64-linux-gnu/librt.so.1' for IFUNC symbol 'clock_gettime'

mysql-connector-python-8.0.22
因为装了mysql 之后出了错误

20210107

在这里插入图片描述
linux中单引号里面的字符显示为红色表示 单引号是对的 如字符是白色则是错的

块粘贴之后各行错位的问题
先在复制之前就把各行对其
然后再复制粘贴到vim 就可以对齐

        sql_col_name = "SHOW COLUMNS FROM " +str(table_name)
        取列名的时候 如果用fetchone 会取的不完整必须用fetchall()
        因为其有很多属性

20210107

path=os.path.dirname(__file__)
windows的命令 linux下不能运行

20201230

Linux:readonly option is set (add ! to override)错误
步骤:
1、按Esc
2、输入:set noreadonly
3、即可按正常途径保存:wq

因为没有正常退出 删除swp文件就可以了

空白的情况下无法退出是因为输入法的是中文
q!强制退出

free -h 查看剩余内存

https://blog.youkuaiyun.com/weixin_40853073/article/details/81707177

trailing character 很有可能是没有在英文输入法下输入

20201224

编辑报错的时候 可以先按 e 忽略错误
然后再:q! 强制推出
最后在删除同名下的 swp 和swo 文件之后 就不会报错了

在linux下面 小键盘是不能用的 一按直接进入插入模式
Linux:readonly option is set (add ! to override)错误
https://blog.youkuaiyun.com/weixin_40853073/article/details/81707177

20201221

服务器kill 一般都是因为内存的原因

 python3 -m pip install ./tensorflow-2.4.0rc3-cp36-cp36m-manylinux2010_x86_64.whl -i https://pypi.tuna.tsinghua.edu.cn/simple/

linux 安装加上国内源

20200211

安装的时候如果只是 不被信任 那么加 --trusted

pip3 install abc --trusted -i http://pypi.douban.com/simple/

区别linux --和-,主要看后面的参数,–后面一般跟长的完名名字 ,如 chkconfig --add
而-后面一般跟简写大多数是一个字母,如 ls -l。如果想了解更多关于Linux的知识,可参考下《Linux就该这么学》

光标不见了

直接敲命令行就行
echo -e “\033[?25l” 隐藏光标
echo -e “\033[?25h” 显示光标

/opt 主机额外安装软件所摆放的目录。默认是空的。 一般安装软件的时候,可以自己指定安装到这个目录下,便于查找和管理

一般很多的第三方程序会在这个目录下安装,比如IBM的存储管理,卡巴斯基的杀毒软件等等。
类似于progam file目录。

评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值