- 博客(16)
- 收藏
- 关注
RSS订阅原创 Flink 报错：unable to generate a JAAS configuration file
可以看之前的博客怎么清理，本质都是同样的问题。其实，仔细看，大概意思就是flink在/tmp目录下生成临时的JAAS安全配置文件时失效了，是因为系统磁盘满了。使用这个命令：du -h --max-depth=1 / | sort -hr。使用命令：rm -rf /opt_bak删除即可。这个没用，应该是/opt的备份,
2025-12-21 21:18:58
103
原创 HDFS NameNode安全模式 关闭不掉
即使执行了hdfs dfsadmin -safemode leave或者强制关闭安全模式之类的命令依旧无效。这种情况发生的前提有很多，我是在模拟数据倾斜的时候，上传了一个很大的文件导致开启了安全模式，然后由于是可读状态嘛，也删除不了。我就按照下面的步骤清理了一些出来。（1）清理anaconda缓存：conda clean --all -y。2、看一下最大的文件目录占用情况：（我的是在/opt/下面）这只是我出现的一种情况，如果不是，那再排查一下别的原因。# 删除旧日志（保留最近一天）
2025-08-07 23:21:43
294
原创 搭建HBase时 启动hbase shell 后进行测试时报错
所以就是把这里面的文件删除一些，就可以关掉安全模式。总结就是磁盘满了导致hdfs自启动安全模式，手动关闭不了，可以进行手动删除或者进行扩容或者新建虚拟机，前一天晚上查好资料，本来一大早起来准备扩容的哈哈哈，结果不需要了（因为扩容比较麻烦）。这时造成该状态的原因其实有很多，需要逐一排查，可以借助deepseek之类的进行辅助，逐一排查。我的报错没有截，类似这样（网上找了一张），原因有很多，需要逐一排查。然后再检查状态，发现它又变成ON了。上面是我自己遇到的情况，欢迎交流讨论。这样再试一下，就好了。
2025-07-26 11:17:55
227
原创 启动HBASE，jps中出现一次HMaster后消失
在视频教程中老师只是复制粘贴各种配置，并没有详细解释每一条配置的含义，这就导致，会出报错。因为你并不是所有视频跟着同一个老师或者在这之前你配过别的与该框架相关联的配置，例如hdfs很早之前就配好了。前提：你在终端中运行hbase shell 是可以进行的，只是WebUI界面打不开。如果你的hbase shell也运行不了，还是你配置有问题，按照步骤逐一排查。要改成这样，标红的这里要特别注意跟hdfs-site里保持一致，必须配置hdfs的地址（node1是我自己起的主机名）。仅供参考，欢迎交流指正。
2025-07-25 11:40:46
251
原创 使用DIAMOND生信软件找到MAGs中的orf
首先根据阈值 要把所有的MAG_w某某.fa和ncycdb用diamond进行比对，然后应该是生成一个个的.tsv文件，然后调用poential_fulian这个python文件吧正链负链从原来的.fa文件中找出来，生成一个个的.fa文件，最后再调用命令sudo ./ORFfinder -in output.fa（这里可能要改成批量的类似） -s 1 -ml 75 -out out_orf.out -outfmt 0，生成最终的orf的一个个.fa文件。但是现在我必须要进行下一步的多分类模型的修补工作了。
2025-02-08 15:37:47
708
原创 查找硕士毕业论文参考文献中会议论文的举办地点、出版商
Proceedings 是论文集的意思。Publisher 是出版商的意思。以上仅供参考，如有纰漏请指正。
2025-02-08 15:33:57
843
原创 ssh远程使用jupyter notebook
其中： -N 告诉SSH没有命令要被远程执行；-f 告诉SSH在后台执行；-L 是指定port forwarding的配置，远端端口是8889，本地的端口号的8888。例如：ssh -g -N -L 8971:localhost:8889 hxx@172.x.x.x -p 10022。如果想在远程使用jupyter的话，打开远程的服务器，输入http://172.x.x.x:8889/tree。例如：localhost:8971/
2023-11-09 16:59:41
1157
1
原创 docker里的命令
然后通过filezilla把文件传到自己主机上进行查看，在这里出现了一个小问题，连接虚拟机时显示无法连接到服务器，在网上查了很多解决方案都没有解决，之后意外发现虚拟机可以ping通主机，但是主机ping不通虚拟机，这俩ip地址压根不在一个网段上（一个是192...，一个是10...）。重新设置修改了虚拟机的ip地址之后，重启虚拟机，顺利ping通，顺利连接上，打开了这三个文件。docker exec 92ffcb90b429（容器id）ls -a /1、查看docker里有什么目录？step:和正常一样。
2023-09-19 18:41:45
188
1
原创 spyder切换虚拟环境
从github上下载好代码的压缩包之后在自己本地运行。在spyder里切换想要的虚拟环境。2、创建好该代码所需要的环境。1、阅读readme。
2023-09-15 18:28:47
1090
原创 Windows本地查看虚拟环境时，配置文件报错：ConfigurationLoadError: Unable to load configuration file. path:
使用命令：conda env list。第二步：conda list。
2023-09-02 21:06:26
1412
3
原创 win10系统virtualbox中Ubuntu操作系统查看IP地址
sudo mount -t vboxsf share(“shared_file”,这个是刚才填写的文件夹名称） /home/hxy/Desktop/1("dictionary",这个是在虚拟机的系统中新建一个文件夹的路径，用来存放共享文件）u:撤销上一步操作；保存文件时：按Esc键后，按：wq（即保存退出）；ls -lh /home/hxy/Desktop/1/rnaseq-trainging.zip （使用绝对路径查看文件信息）去某个文件的第400行至500行，放到另外一个文件中：(使用重定向）
2023-09-02 17:34:13
1162
原创 本地安装torch步骤
4、在黑框中先转到相应位置，再进行pip或者conda install；2、根据对应版本找到torch、torchvision对应版本；3、点击下载.whl文件（记好文件所在位置）；1、确定python版本，cuda版本；
2023-07-27 16:07:32
1968
1
原创 字母拼错导致一下午时间都在解决一个不存在的问题
jupyter没有提示，还是用个vscode类似的ide吧。安装路径有问题，重新安装很多次，一直报错。学习python的pandas包时。panads,导包导不进去，以为。在jupyter中把。
2023-03-18 17:48:34
112
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人