她曾让你心动-优快云博客

原创 hexo搭建部署过程

hexo博客简单搭建及部署一、前期准备1. nodejs安装及配置参考 Nodejs安装及配置2. git下载安装git 3. npm配置淘宝云cmd输入命令：npm config set registry https://registry.npm.taobao.org验证：npm config get registry如果返回https://registry.npm.taobao.org，说明镜像配置成功。4. 创建GitHub二、hexo安装参考hexo文档

2021-06-01 23:32:24 310 1

原创 Xshell远程运jupyter在本地浏览器显示

Xshell远程运jupyter在本地浏览器显示服务器端设置#进入conda环境lab@lab:~$ conda activate lzou# 生成配置文件(lzou) lab@lab:~$ jupyter notebook --generate-config# 生成密码，启动python(lzou) lab@lab:~$ python>>> from notebook.auth import passwd>>> passwd()Enter pas

2021-01-24 22:57:47 850 1

原创 pyradiomics 运行 extractor.execute 时报错 Indexerror

pyradiomics 运行 extractor.execute 时报错 Indexerror报错：IndexError:arrays used as indices must be of integer (or boolean) type解决方法：将emptyGrayLevels的数据类型强制改为int，如下图：注意：1、在源码中修改；2、修改glszm.py和 gldm.py(不确定是不是这个文件，可能不止一个)，反正哪个文件报错就修改哪个 ;出错原因：似乎是版本BUG，目前版本pyrad

2020-10-10 00:12:11 977 1

原创 Echarts可视化实战

Echarts可视化实战获取HBase中的数据按天获取HBase中course_clickcount表的数据 public Map<String, Long> query(String tableName, String condition) throws Exception { HashMap<String, Long> map = new HashMap<>(); HTable table = getTable(table

2020-09-16 21:21:58 564

原创 Spark Streaming实时流处理项目

Spark Streaming 实时流处理项目实战项目整体流程：模拟用户访问日志数据；由Flume采集数据并通过Kafka进行消费；按照需求由spark sparkstreaming 进行实时处理，并将结果保存到HBase中；数据准备generate_log.py 生成模拟用户访问网站的日志数据由ip+时间+url+状态码+搜索引擎来源组成为了模拟实时处理流程，定时运行generate_log.py 脚本定时运行：lgl.shpython /home/jackie

2020-09-16 00:12:13 656

原创关于hadoop集群中Windows端无法访问50070端口但可以访问8088端口的问题解决

问题排除集群包括hadoop102、hadoop103、hadoop104，其中hadoop102 是master；虚拟机中所有端口均可正常访问，表明集群配置文件等没有问题；Windows端无法访问50070端口，准确的来说是无法访问master中的所有端口：yarn配置在hadoop103中，2NN配置在hadoop104，8088、50090端口可以访问，说明其他两台没有问题；那么问题就是在hadoop102中；问题解决hadoop102的防火墙出了问题，而其他两台的均正常关

2020-09-12 22:35:31 1891

原创 Spark 实现 Top N

需求取出每个班级前三的score数据格式class2 77class4 95代码import org.apache.spark.rdd.RDDimport org.apache.spark.{SparkConf, SparkContext}object TopN { def main(args: Array[String]): Unit = { //创建SparkConf对象 val config: SparkConf = new SparkConf().

2020-09-10 23:46:40 427

原创 Spark 温度二次排序

输入数据格式预期结果package com.jackie.sparkimport org.apache.spark.rdd.RDDimport org.apache.spark.{SparkConf, SparkContext}class UDFSort(val first: Int, val second: Int) extends Ordered[UDFSort] with Serializable { override def compare(that: UDFSort): Int

2020-09-10 22:08:38 477

原创 DialogDemo

package com.stu.lesson4;import javax.swing.*;import java.awt.*;import java.awt.event.ActionEvent;import java.awt.event.ActionListener;//主窗口public class DialogDemo extends JFrame{ public Di...

2020-01-08 16:11:59 188

原创 JFrameDemo

package com.stu.lesson4;import javax.swing.*;import java.awt.*;public class JFrameDemo { //初始化 init() public void init(){ JFrame frame = new JFrame("这是一个JFrame窗口"); frame...

2020-01-08 12:51:39 432

原创使用pyradiomics库对dcm图像进行特征提取

一制作掩膜图像医学掩膜图像的制作可以使用labelme和3D Slicer获得，下文中仅介绍使用labelme对dcm图像标注后获得json文件的一些处理，至于labelme的使用请参考其他博客。1. 文件批量重命名#coding=gbk#文件批量重命名import osimport sysdef rename(): path=r"E:\3D slicerTest\NC_O...

2020-01-08 09:29:55 8406 13

原创 SIM868模块+Arduino将位置信息上传到服务器

本文主要实现了将位置信息通过HTTP请求，将数据拼接在URL地址中，从而上传到服务器。

2019-05-27 12:57:44 1764 4

qq_31297573的博客