java测试mqtt持久化数据,零基础入门到精通,收藏这篇就够了

这玩意能干什么?我只能说,这是一个物联网的方案,能通过java客户端监听来自单片机发送的消息,单片机有什么消息?常见的有:比如持久性的传感器数据上报,这你得1s上传一次吧,还有一些控制设备的信息,比如灯,电机之类一次操作持续运转的东西。

写在前面:

曾经用过的一种需要接入Internet的物联网方案(这是目前的主流):

我之前就受益与免费的云平台(云服务器),比如我以前博客里介绍过了的巴法云平台,还有我以前用过的小熊派华为云平台,它们的好处显而易见,就是不需要你去搭建服务器,不需要去了解数据传输的各种细节,你只需要用你的单片机去连上云就行了,用它们的API接口(特别是巴法云平台的接口真的适合小白实现前端和设备的控制),面向接口编程确实给人很舒服。缺点就是你必须得有网络吧,没网络你就连不上云。

本次主角:

一种局域网内物联网方案(非主流,但实用)

优点:不需要接入外网,除了这个优点没什么优点。

步骤:

首先,你得有个MQTT的服务器吧,怎么办,用EMQX搭建一个局域网的MQTT服务器。

然后,用MQTTX或paho或是它本身自带的web测试接口测试是否能正常订阅和发布消息以及能否正常收到消息。

然后,你得有单片机吧,单片机得支持MQTT协议吧,推荐用ESP32(ESP8266),基于开源的arduino,你能在太极创客的文档上轻松学会MQTT的相关知识。然后你得把单片机的数据格式转换成通用的JSON格式去发。

附上太极创客的相关文档链接地址:

零基础入门学用物联网 – MQTT基础篇 – 目录 – 太极创客 (taichi-maker.com)

然后,也就是本次的主题了,用JAVA建立一个客户端,由于要用MQTT,所以java是一个springboot的项目,用其去监听EMQX建立的MQTT服务器的报文(也就是对于主题所发布个各种消息),客户端不局限于用JAVA语言去写,具体可参考EMQX的文档,报文采用JSON格式,为什么要用JSON格式,因为方便用JSON格式反过来创建对象然后将对象的属性持久化到数据库。

MQTT Java 客户端库 | EMQX 文档

你可以用这文档里的相关代码,然后稍微修改,就以我的为参考(已经设置了断开服务器后客户端自动重连)

连接Mysql(主要是拿到数据库的操作对象connection)

package emqx.demo.Console;



import java.io.FileInputStream;
import java.io.IOException;
import java.io.InputStream;
import java.sql.*;
import java.util.Properties;

public class JDBC {
    static String driverClass=null;
    static String url=null;
    static String name=null;
    static String password=null;

    static {
        try {
            //读取配置文件的信息
            Properties properties= new Properties();
            InputStream is=new FileInputStream("MyInfo.properties");//放在工程文件下使用
            //InputStream is=JDBCUtil.class.getClassLoader().getResourceAsStream("jdbc.properties");//放在src下使用
            //导入输入流
            properties.load(is);
            //读取属性
            driverClass=properties.getProperty("driverClass");
            url=properties.getProperty("url");
            name=properties.getProperty("name");
            password=properties.getProperty("password");
            System.out.println(driverClass);
        } catch (IOException e) {
            // TODO Auto-generated catch block
            e.printStackTrace();
        }
    }


    /**
     * 获取连接对象
     * @return
     * */
    public static Connection getConn() {
        Connection conn=null;
        try {
            Class.forName(driverClass);
        } catch (ClassNotFoundException e) {
            // TODO Auto-generated catch block
            e.printStackTrace();
        }
        try {
            conn = DriverManager.getConnection(url,name,password);
        } catch (SQLException e) {
            // TODO Auto-generated catch block
            e.printStackTrace();
        }
        return conn;
    }
    /**  释放资源
     *
     *
     **/
    public static void release(Connection conn,Statement st,ResultSet rs) {
        closeRs(rs);
        closeSt(st);
        closeConn(conn);
    }

    public static void release(Connection conn,Statement st) {
        closeSt(st);
        closeConn(conn);
    }
    private static void closeRs(ResultSet rs) {
        try {
            if(rs!=null)
                rs.close();
        } catch (SQLException e) {
            e.printStackTrace();
        }finally {
            rs=null;
        }
    }
    private static void closeSt(Statement st) {
        try {
            if(st!=null)
                st.close();
        } catch (SQLException e) {
            e.printStackTrace();
        }finally {
            st=null;
        }
    }
    private static void closeConn(Connection conn) {
        try {
            if(conn!=null)
                conn.close();
        } catch (SQLException e) {
            e.printStackTrace();
        }finally {
            conn=null;
        }

    }

}

连接EMQX的MQTT服务器

package emqx.demo.Console;

import org.eclipse.paho.client.mqttv3.MqttClient;
import org.eclipse.paho.client.mqttv3.MqttConnectOptions;
import org.eclipse.paho.client.mqttv3.MqttException;
import org.eclipse.paho.client.mqttv3.MqttMessage;
import org.eclipse.paho.client.mqttv3.persist.MemoryPersistence;

public class ConnectServer {

    String subTopic ="ESP32/DEVICE";//订阅主题
    int qos =1;//消息服务等级
    String broker ="tcp://127.0.0.1:1883";//emqx搭建的mqtt服务器的地址
    String clientId  ="JavaClient";//这个客户端的名字在emqx上显示的
    String content="Java Client is online";//发布消息
    String pubtopic="esp32";//发布主题
    public ConnectServer() {

        MemoryPersistence persistence = new MemoryPersistence();//保存形式以内容保存

        try {
            MqttClient client = new MqttClient(broker, clientId, persistence);
            //设置消息对象
            MqttMessage message = new MqttMessage(content.getBytes());//待发送的信息
            message.setQos(qos);

            // MQTT 连接选项
            MqttConnectOptions connOpts = new MqttConnectOptions();
            connOpts.setUserName("emqx_java");
            connOpts.setPassword("random".toCharArray());
            // 保留会话
            connOpts.setCleanSession(false);
            //设置超时时间
            connOpts.setConnectionTimeout(10);
            /*
            设置会话心跳时间 单位为秒 服务器会每隔
            1.5*20秒的时间向客户端发送个消息判断客户端是否在线,
            但这个方法并没有重连的机制
             */
            connOpts.setKeepAliveInterval(20);

            // 设置回调
            client.setCallback(new MyMqttCallback());


            // 建立连接
            while (!client.isConnected()) {
                System.out.println(" client is Connecting to broker: " + broker);
                client.connect(connOpts);
            }
            System.out.println("连接成功");

            // 订阅
            client.subscribe(subTopic,qos  );
            System.out.println("订阅主题"+subTopic);

            // 发布上线消息
            client.publish(pubtopic,message);


        } catch (MqttException me) {
            System.out.println("reason " + me.getReasonCode());
            System.out.println("msg " + me.getMessage());
            System.out.println("loc " + me.getLocalizedMessage());
            System.out.println("cause " + me.getCause());
            System.out.println("excep " + me);
            me.printStackTrace();
        }


    }
}

编写回调函数类(这个根据自己的需求写就好了)

回调函数类必须实现MqttCallback接口

package emqx.demo.Console;

import com.alibaba.fastjson.JSON;
import org.eclipse.paho.client.mqttv3.IMqttDeliveryToken;
import org.eclipse.paho.client.mqttv3.MqttCallback;
import org.eclipse.paho.client.mqttv3.MqttMessage;

import java.sql.SQLException;
import java.sql.Statement;


/*
* MQTT回调
* 收消息持久化到mysql
*
*
* */
public class MyMqttCallback  implements MqttCallback {

 public  static    Statement stmt= null;
    ESP32 myesp32;
    String mystring;
    public  MyMqttCallback()  {
        try {
            stmt= JDBC.getConn().createStatement();
        }
        catch (Exception e){
            System.out.println("无法创建statement实例化对象");
        }

    }
    @Override
    public void connectionLost(Throwable cause) {
        System.out.println("连接断开,可以做重连");
        new ConnectServer();//每次连接断开就又创建一个连接对象



    }

    @Override
    public void messageArrived(String topic, MqttMessage message) throws Exception {
        // subscribe后得到的消息会执行到这里面
        System.out.println("接收来自主题:" + topic+"的信息内容:");
        mystring=new String(message.getPayload());
        System.out.println(mystring);
        myesp32= JSON.parseObject(  mystring,ESP32.class);
        System.out.println(myesp32.toString());
        System.out.println("--------------------------------");


        /*
        *
        * 更新瞬间性操作传感器比如灯,电机的状态
        * */
        if(myesp32.command==1){
            try {
                MysqlDao.updata(myesp32.name,myesp32.state,stmt);
                System.out.println("更新传感器状态");
            }
           catch (Exception e){
               System.out.println("更新数据失败");
           }


        }


        /*
        * 插入传感器持久性上传的数据
        *
        * */
        else if(myesp32.command==2) {
            try {
                MysqlDao.insert(myesp32.name, myesp32.data, stmt);
                System.out.println("插入新数据");
            }
            catch ( Exception e){
                System.out.println("插入新数据失败");
            }

        }
        mystring="";

    }

    @Override
    public void deliveryComplete(IMqttDeliveryToken token) {
        System.out.println("deliveryComplete---------" + token.isComplete());
    }


}

以及编写我的Mydao类,用于数据持久化到数据库

package emqx.demo.Console;

import com.sun.source.tree.LineMap;
import org.springframework.beans.factory.annotation.Autowired;
import org.springframework.stereotype.Repository;
import sun.nio.cs.FastCharsetProvider;

import java.security.Key;
import java.sql.*;
import java.util.ArrayList;
import java.util.HashMap;
import java.util.List;
import java.util.Map;

@Repository
public class MysqlDao  {

    /*
    *
    * 供接口拿数据的方法
    *
    * */
        //获取某传感器的全部数据
         public   static  Map   FindAll(Statement statement, String name, String tablename) throws SQLException {
        ResultSet rs=statement.executeQuery( "SELECT id, name, data FROM "+tablename+"  where  name ='"+name+"'");
            Map map=new HashMap();
            List list=new ArrayList();
            map.put(name,list);
            while (rs.next()) {
                // 通过字段检索
                list.add(rs.getString("data")) ;
            }
            map.put(name,list);
            return  map;
        }

        //获取传感器对应的最新数据
   public    static  String find(String Sensor_name,String key,Statement statement) throws SQLException {
       String sql=  "SELECT    "+  key+"   FROM devices.sensor   WHERE  id=(SELECT MAX(id) FROM sensor GROUP BY `name` HAVING `name`="+"\""+Sensor_name+"\")";
       System.out.println(sql);
       ResultSet rs=statement.executeQuery(sql);
       System.out.println(rs.toString());
        rs.next();
      System.out.println(rs.getString(key));
       return rs.getString(key);
   }


   public static String   GetState(String name ,Statement statement){
    String sql= "SELECT state  FROM action WHERE `sname` ="+"'"+name+"'";
       System.out.println(sql);
       try {
           ResultSet rs=statement.executeQuery(sql);
           rs.next();
           return rs.getString("state");
       } catch (SQLException e) {
           e.printStackTrace();
           return "error";

       }
   }


   /*
   *
   *
   * 监听单片机发出的数据
   *
   * */



    //在数据库的表中插入数据
   public  static  boolean insert(String name,String dat,Statement sta) throws SQLException {
       String sql="insert  into  devices.sensor(name,data)  VALUES ('"+name+"" +"','"+dat+"')";
       System.out.println(sql);
       if (sta.execute(sql))return true;
       return false;
   }

   //更新持续性外设如灯,电机的状态一次改变永久使用
    public static  void  updata(String dev,String state,Statement statement) throws SQLException {
       String sql="UPDATE devices.action SET state='"+state+"'WHERE sname='"+dev+"'";
        System.out.println(sql);
       statement.executeUpdate(sql);
    }



}

以上就做完了,Mqtt服务器的消息就JAVA客户端监听并被被持久化报存到了数据库中。

最后就是用JAVA的JDBC写数据库相关的API接口供安卓端,微信小程序端去调用,让它们拿数据放前端界面了就ok了。可以的话,可用JAVA的第三方框架Mybatis去简化API接口的编写。(主要简化的是sql语句)

这两年,IT行业面临经济周期波动与AI产业结构调整的双重压力,确实有很多运维与网络工程师因企业缩编或技术迭代而暂时失业。

很多人都在提运维网工失业后就只能去跑滴滴送外卖了,但我想分享的是,对于运维人员来说,即便失业以后仍然有很多副业可以尝试。

网工/运维/测试副业方向

运维网工,千万不要再错过这些副业机会!

第一个是知识付费类副业:输出经验打造个人IP

在线教育平台讲师

操作路径:在慕课网、极客时间等平台开设《CCNA实战》《Linux运维从入门到精通》等课程,或与培训机构合作录制专题课。
收益模式:课程销售分成、企业内训。

技术博客与公众号运营

操作路径:撰写网络协议解析、故障排查案例、设备评测等深度文章,通过公众号广告、付费专栏及企业合作变现。
收益关键:每周更新2-3篇原创,结合SEO优化与社群运营。

第二个是技术类副业:深耕专业领域变现

企业网络设备配置与优化服务

操作路径:为中小型企业提供路由器、交换机、防火墙等设备的配置调试、性能优化及故障排查服务。可通过本地IT服务公司合作或自建线上接单平台获客。
收益模式:按项目收费或签订年度维护合同。

远程IT基础设施代维

操作路径:通过承接服务器监控、日志分析、备份恢复等远程代维任务。适合熟悉Zabbix、ELK等技术栈的工程师。
收益模式:按工时计费或包月服务。

网络安全顾问与渗透测试

操作路径:利用OWASP Top 10漏洞分析、Nmap/BurpSuite等工具,为企业提供漏洞扫描、渗透测试及安全加固方案。需考取CISP等认证提升资质。
收益模式:单次渗透测试报告收费;长期安全顾问年费。

比如不久前跟我一起聊天的一个粉丝,他自己之前是大四实习的时候做的运维,发现运维7*24小时待命受不了,就准备转网安,学了差不多2个月,然后开始挖漏洞,光是补天的漏洞奖励也有个四五千,他说自己每个月的房租和饭钱就够了。

为什么我会推荐你网安是运维和网工测试人员的绝佳副业&转型方向?

1.你的经验是巨大优势: 你比任何人都懂系统、网络和架构。漏洞挖掘、内网渗透、应急响应,这些核心安全能力本质上是“攻击视角下的运维”。你的运维背景不是从零开始,而是降维打击。

2.越老越吃香,规避年龄危机: 安全行业极度依赖经验。你的排查思路、风险意识和对复杂系统的理解能力,会随着项目积累而愈发珍贵,真正做到“姜还是老的辣”。

3.职业选择极其灵活: 你可以加入企业成为安全专家,可以兼职“挖洞“获取丰厚奖金,甚至可以成为自由顾问。这种多样性为你提供了前所未有的抗风险能力。

4.市场需求爆发,前景广阔: 在国家级政策的推动下,从一线城市到二三线地区,安全人才缺口正在急剧扩大。现在布局,正是抢占未来先机的黄金时刻。

网工运维测试转行学习网络安全路线

在这里插入图片描述

(一)第一阶段:网络安全筑基

1. 阶段目标

你已经有运维经验了,所以操作系统、网络协议这些你不是零基础。但要学安全,得重新过一遍——只不过这次我们是带着“安全视角”去学。

2. 学习内容

**操作系统强化:**你需要重点学习 Windows、Linux 操作系统安全配置,对比运维工作中常规配置与安全配置的差异,深化系统安全认知(比如说日志审计配置,为应急响应日志分析打基础)。

**网络协议深化:**结合过往网络协议应用经验,聚焦 TCP/IP 协议簇中的安全漏洞及防护机制,如 ARP 欺骗、TCP 三次握手漏洞等(为 SRC 漏扫中协议层漏洞识别铺垫)。

**Web 与数据库基础:**补充 Web 架构、HTTP 协议及 MySQL、SQL Server 等数据库安全相关知识,了解 Web 应用与数据库在网安中的作用。

**编程语言入门:**学习 Python 基础语法,掌握简单脚本编写,为后续 SRC 漏扫自动化脚本开发及应急响应工具使用打基础。

**工具实战:**集中训练抓包工具(Wireshark)、渗透测试工具(Nmap)、漏洞扫描工具(Nessus 基础版)的使用,结合模拟场景练习工具应用(掌握基础扫描逻辑,为 SRC 漏扫工具进阶做准备)。

(二)第二阶段:漏洞挖掘与 SRC 漏扫实战

1. 阶段目标

这阶段是真正开始“动手”了。信息收集、漏洞分析、工具联动,一样不能少。

熟练运用漏洞挖掘及 SRC 漏扫工具,具备独立挖掘常见漏洞及 SRC 平台漏扫实战能力,尝试通过 SRC 挖洞搞钱,不管是低危漏洞还是高危漏洞,先挖到一个。

2. 学习内容

信息收集实战:结合运维中对网络拓扑、设备信息的了解,强化基本信息收集、网络空间搜索引擎(Shodan、ZoomEye)、域名及端口信息收集技巧,针对企业级网络场景开展信息收集练习(为 SRC 漏扫目标筛选提供支撑)。

漏洞原理与分析:深入学习 SQL 注入、CSRF、文件上传等常见漏洞的原理、危害及利用方法,结合运维工作中遇到的类似问题进行关联分析(明确 SRC 漏扫重点漏洞类型)。

工具进阶与 SRC 漏扫应用:

  • 系统学习 SQLMap、BurpSuite、AWVS 等工具的高级功能,开展工具联用实战训练;

  • 专项学习 SRC 漏扫流程:包括 SRC 平台规则解读(如漏洞提交规范、奖励机制)、漏扫目标范围界定、漏扫策略制定(全量扫描 vs 定向扫描)、漏扫结果验证与复现;

  • 实战训练:使用 AWVS+BurpSuite 组合开展 SRC 平台目标漏扫,练习 “扫描 - 验证 - 漏洞报告撰写 - 平台提交” 全流程。
    SRC 实战演练:选择合适的 SRC 平台(如补天、CNVD)进行漏洞挖掘与漏扫实战,积累实战经验,尝试获取挖洞收益。

恭喜你,如果学到这里,你基本可以下班搞搞副业创收了,并且具备渗透测试工程师必备的「渗透技巧」、「溯源能力」,让你在黑客盛行的年代别背锅,工作实现升职加薪的同时也能开创副业创收!

如果你想要入坑黑客&网络安全,笔者给大家准备了一份:全网最全的网络安全资料包需要保存下方图片,微信扫码即可前往获取!

因篇幅有限,仅展示部分资料,需要点击下方链接即可前往获取

优快云大礼包:《黑客&网络安全入门&进阶学习资源包》免费分享

(三)第三阶段:渗透测试技能学习

1. 阶段目标

全面掌握渗透测试理论与实战技能,能够独立完成渗透测试项目,编写规范的渗透测试报告,具备渗透测试工程师岗位能力,为护网红蓝对抗及应急响应提供技术支撑。

2. 学习内容

渗透测试核心理论:系统学习渗透测试流程、方法论及法律法规知识,明确渗透测试边界与规范(与红蓝对抗攻击边界要求一致)。

实战技能训练:开展漏洞扫描、漏洞利用、电商系统渗透测试、内网渗透、权限提升(Windows、Linux)、代码审计等实战训练,结合运维中熟悉的系统环境设计测试场景(强化红蓝对抗攻击端技术能力)。

工具开发实践:基于 Python 编程基础,学习渗透测试工具开发技巧,开发简单的自动化测试脚本(可拓展用于 SRC 漏扫自动化及应急响应辅助工具)。

报告编写指导:学习渗透测试报告的结构与编写规范,完成多个不同场景的渗透测试报告撰写练习(与 SRC 漏洞报告、应急响应报告撰写逻辑互通)。

(四)第四阶段:企业级安全攻防(含红蓝对抗)、应急响应

1. 阶段目标

掌握企业级安全攻防、护网红蓝对抗及应急响应核心技能,考取网安行业相关证书。

2. 学习内容

护网红蓝对抗专项:

  • 红蓝对抗基础:学习护网行动背景、红蓝对抗规则(攻击范围、禁止行为)、红蓝双方角色职责(红队:模拟攻击;蓝队:防御检测与应急处置);

  • 红队实战技能:强化内网渗透、横向移动、权限维持、免杀攻击等高级技巧,模拟护网中常见攻击场景;

  • 蓝队实战技能:学习安全设备(防火墙、IDS/IPS、WAF)联动防御配置、安全监控平台(SOC)使用、攻击行为研判与溯源方法;

  • 模拟护网演练:参与团队式红蓝对抗演练,完整体验 “攻击 - 检测 - 防御 - 处置” 全流程。
    应急响应专项:

  • 应急响应流程:学习应急响应 6 步流程(准备 - 检测 - 遏制 - 根除 - 恢复 - 总结),掌握各环节核心任务;

  • 实战技能:开展操作系统入侵响应(如病毒木马清除、异常进程终止)、数据泄露应急处置、漏洞应急修补等实战训练;

  • 工具应用:学习应急响应工具(如 Autoruns、Process Monitor、病毒分析工具)的使用,提升处置效率;

  • 案例复盘:分析真实网络安全事件应急响应案例(如勒索病毒事件),总结处置经验。
    其他企业级攻防技能:学习社工与钓鱼、CTF 夺旗赛解析等内容,结合运维中企业安全防护需求深化理解。

证书备考:针对网安行业相关证书考试内容(含红蓝对抗、应急响应考点)进行专项复习,参加模拟考试,查漏补缺。

运维网工测试转行网络攻防知识库分享

网络安全这行,不是会几个工具就能搞定的。你得有体系,懂原理,能实战。尤其是从运维转过来的,别浪费你原来的经验——你比纯新人强多了。

但也要沉得住气,别学了两天Web安全就觉得自己是黑客了。内网、域渗透、代码审计、应急响应,要学的还多着呢。

如果你真的想转,按这个路子一步步走,没问题。如果你只是好奇,我劝你再想想——这行要持续学习,挺累的,但也是真有意思。

关于如何学习网络安全,笔者也给大家整理好了全套网络安全知识库,需要的可以扫码获取!

因篇幅有限,仅展示部分资料,需要点击下方链接即可前往获取

优快云大礼包:《黑客&网络安全入门&进阶学习资源包》免费分享

1、网络安全意识
在这里插入图片描述

2、Linux操作系统
在这里插入图片描述

3、WEB架构基础与HTTP协议
图片

4、Web渗透测试
在这里插入图片描述

5、渗透测试案例分享
图片

6、渗透测试实战技巧
图片

7、攻防对战实战
图片

8、CTF之MISC实战讲解
图片

关于如何学习网络安全,笔者也给大家整理好了全套网络安全知识库,需要的可以扫码获取!

因篇幅有限,仅展示部分资料,需要点击下方链接即可前往获取

优快云大礼包:《黑客&网络安全入门&进阶学习资源包》免费分享

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值