自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(21)
  • 收藏
  • 关注

原创 ERROR: Unable to find the kernel source tree for the currently running kernel.

这个问题通常是由于缺少 内核开发包 (kernel-devel) 或 内核源代码 (kernel-source) 引起的,NVIDIA 驱动需要这些文件来构建内核模块。禁用 nouveau 驱动并确保 kernel-devel 和 kernel-headers 已安装后,重新运行 NVIDIA 驱动安装程序。这样确保安装的内核开发包与当前内核版本完全一致。在 NVIDIA 驱动安装之前,需要禁用 Nouveau 开源驱动。

2025-03-13 15:15:56 303

原创 WebSocket(WS)协议系列(五)非对称加密

公钥 和 私钥 是成对的加密密钥,用于非对称加密(公钥加密,私钥解密)。它们是通过数学算法生成的,具有以下特点:公钥:可以公开共享,任何人都可以获取它。私钥:只有密钥的拥有者自己知道,应该保密。在非对称加密中,公钥加密 的信息只能用 私钥解密,而用 私钥加密 的信息只能用 公钥解密。例子:如果你用 某人的公钥 来加密消息,只有 该人 的私钥才能解密,别人无法解密。如果你用 自己的私钥 来加密消息,任何人都可以用你的公钥来验证你是消息的发送者(因为只有你能解密这个信息)。

2025-03-13 15:00:11 1027

原创 WebSocket(WS)协议系列(四)SSL/TLS协议

SSL(Secure Sockets Layer) 和 TLS(Transport Layer Security) 是用于在网络上实现安全通信的协议,它们通常用于加密数据传输,保护数据免受窃取、篡改和伪造。虽然 SSL 已被逐步淘汰,现代网络通信大多使用 TLS,但很多时候,我们仍然会把 SSL/TLS 一起提及,通常理解为同一个概念。

2025-03-07 01:01:01 1545

原创 WebSocket(WS)协议系列(三)加密

ws 和 wss 都是 WebSocket 协议的两种形式,它们分别代表了不同的传输层协议。它们之间的主要区别在于加密和安全性。ws 使用的端口通常是 80(与普通 HTTP 相同),这意味着它不会对数据进行加密。特点:数据是 明文传输 的,不提供任何加密。适用于不需要安全保护或在局域网内使用的应用。对于开放网络或公网上传输的敏感数据,不推荐使用 ws,因为它容易受到 中间人攻击(MITM) 等网络攻击的影响。

2025-03-07 00:33:30 673

原创 WebSocket(WS)协议系列(二)事件机制

事件机制是一种编程模型,通常用于处理异步事件。在这种模型中,程序不会一直轮询或等待某个任务的完成,而是当某个事件发生时,系统会自动触发特定的处理函数(通常被称为回调函数)来响应这个事件。

2025-02-19 07:34:53 1089

原创 WebSocket(WS)协议系列(一)基本概念

WebSocket(WS)协议是一种网络通信协议,提供了全双工、单连接、低延迟的通信方式,通常用于浏览器和服务器之间的实时数据交换。与传统的HTTP协议相比,WebSocket允许在客户端和服务器之间,可以在连接建立后,而不需要每次都重新建立连接。

2025-02-19 07:09:47 811

原创 如果MLlib 中没有所需要的模型,如何使用 Spark 进行分布式训练?

如果 MLlib 中没有你所需要的模型,并且不打算结合更强大的框架(如 TensorFlowOnSpark 或 Horovod),仍然可以使用 Spark 进行分布式训练,但需要手动处理训练任务的分配、数据准备、模型训练、结果合并和模型更新等过程。

2025-02-17 02:07:38 386

原创 windows怎么找conda路径?

conda info找到输出中的 base environment 字段,显示的路径即为 Conda 的安装路径。

2025-02-17 01:57:34 1130

原创 利用 Spark Streaming 和 HDFS 实现实时数据预处理与训练示例

Spark Streaming 是一个强大的工具,广泛应用于处理实时数据流。本文将以股票预测任务为例,展示如何结合 Spark Streaming 和 HDFS 实现一个简单的实时数据预处理和训练系统。

2024-12-28 03:02:04 932

原创 使用 ARIMA 对股票涨跌额进行预测(仅适合作业示例)

时间序列预测在金融领域中具有重要意义,尤其是在股票价格的预测上。本文以 ARIMA 模型为例,探讨如何基于历史数据对股票涨跌额进行预测,并通过 AIC 和 BIC 指标选择最优参数。

2024-12-28 02:22:30 1645

原创 Native Hadoop 库警告

解决 Native Hadoop 库警告 问题(Unable to load native-hadoop library for your platform...),需要确保 Hadoop 的原生库正确安装并配置。

2024-12-15 19:10:56 537

原创 使用 LSTM 对股票涨跌额进行预测(仅适合作业示例)

在机器学习和深度学习中,时间序列预测是一项常见且具有挑战性的任务。LSTM(Long Short-Term Memory)是一种常用的循环神经网络(RNN)结构,善于处理序列数据与长期依赖问题。因此,许多教程会以 LSTM 为例对股票价格或涨跌进行预测。本篇教程中的模型仅为示例用途,不具备实际预测价值。实际股市预测需要考虑极其复杂的因素,包括宏观经济、市场情绪、政策风险、突发事件等。本教程简化了许多环节,结果仅能作为参考代码与学习对象,并不建议将其用于真实的投资决策。

2024-12-12 14:35:40 769

原创 安装了 Miniconda,conda仍然无法执行:cannot execute: required file not found

尝试使用 Python 执行 conda,能启动,那么有可能是文件权限有问题导致初始化conda时失败,继而导致conda 命令无法执行。

2024-12-03 23:20:34 591

原创 conda init 执行遇到OpenSSL错误

解决 OpenSSL 相关的兼容性问题

2024-12-03 23:17:40 275

原创 WSL 中创建 Docker 各种网络的方法和解释教程

在 WSL 中,最常用的是 Bridge 和 Host 模式。

2024-11-18 13:37:47 1254

原创 WSL中搭建SPARK平台(下)

配置ssh免密、hadoop和spark配置文件

2024-11-18 03:34:42 965

原创 WSL中搭建SPARK平台(中)

本部分教程将指导您在Docker容器中构建一个Spark集群,包括配置主节点和工作节点。

2024-11-17 23:55:05 1104

原创 构建WSL 2

在 WSL 2 上安装 Docker Desktop,并在 Docker 设置中启用 WSL 集成。

2024-11-12 17:06:28 480

原创 WSL中搭建SPARK平台(上)

小白轻松搭建Hadoop+Spark

2024-11-12 00:10:17 460

原创 伺服控制的补偿算法

伺服控制的补偿算法:PID

2024-09-07 12:00:23 3142

原创 T-sne

t-SNE(t-分布邻域嵌入,t-Distributed Stochastic Neighbor Embedding)是一种常用于高维数据降维和可视化的算法。它通过将高维数据投射到二维或三维空间,使得数据的结构关系在低维空间中得到良好的保留,特别适用于展示数据的局部和全局结构。

2024-09-04 19:20:41 1431 1

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除