12、聚类算法在MNIST和贷款数据中的应用分析

聚类算法在MNIST和贷款数据中的应用分析

1. DBSCAN算法介绍

DBSCAN(Density-Based Spatial Clustering of Applications with Noise)是一种基于密度的空间聚类算法,它能够将具有足够密度的区域划分为簇,并将低密度区域中的点标记为噪声点。与其他聚类算法相比,DBSCAN有两个显著优势:一是可以明确地将点标记为离群点,避免对其进行聚类,从而减少离群点对聚类结果的影响;二是不需要预先指定聚类的数量。

1.1 DBSCAN算法参数

在使用Scikit - Learn库中的DBSCAN时,需要指定两个重要参数:
- eps :两个点被视为在同一邻域内的最大距离。默认值为0.5。如果eps设置过低,可能没有足够接近的点形成邻域,导致所有点都无法聚类;如果设置过高,许多点会被聚为一类,只有少数点被标记为离群点。
- min_samples :一个组被称为簇所需的最小样本数。默认值为5。当某个区域内的点数达到min_samples时,这些点成为核心点,与核心点距离在eps内的其他点也会被归入该簇,即使这些点周围的点数不足min_samples,它们被称为边界点。一般来说,随着min_samples的增加,聚类的数量会减少。

1.2 在MNIST数据集上应用DBSCAN

以下是在PCA降维后的MNIST数字数据集的前一百个主成分上应用DBSCAN的代码:

from sklearn.cluster impor

相关推荐

AI推理攻击:模型API如何泄露训练数据隐私

推理攻击(Inference Attacks)是一类利用机器学习模型预测行为反推训练数据信息的新型隐私威胁,其原理根植于模型对训练分布的过拟合特性——高置信度、低损失等输出信号天然携带成员身份或统计属性线索。这类攻击不依赖模型权重访问,仅通过标准API即可实施,技术价值在于绕过传统脱敏与权限控制,直接挑战‘数据不出域’的安全假设。典型应用场景涵盖医疗AI、金融风控、智能客服等敏感领域,尤其在GDPR与《个人信息保护法》强监管背景下,成员推断(Membership Inference)和模型逆向(Model

weixin_33966095的博客 345

传统数据科学家转型ANN实战指南:突破特征工程与实时建模瓶颈

人工神经网络(ANN)已从学术概念演变为解决高维稀疏特征、非结构化数据和毫秒级响应需求的核心技术。其本质是通过多层非线性变换实现自动特征抽象,克服传统方法在用户行为序列建模、多模态数据适配及在线学习中的固有局限。ANN的价值不在于取代XGBoost等成熟模型,而在于补足‘特征工程瓶颈’与‘系统响应滞后’两大现实短板,支撑推荐冷启动、金融实时风控、IoT时序异常检测等关键场景。对拥有丰富AB测试与SQL优化经验的资深数据科学家而言,掌握ANN意味着重构数据理解方式,而非重学数学推导——重点在于架构选型、可解释

alexhill2009的博客 426

工业级AI对抗防御实战:从数据清洗到在线监控的四大支柱

对抗样本攻击揭示了机器学习模型在输入空间中的非线性敏感性,其本质并非模型‘出错’,而是对训练数据中虚假统计关联的过拟合。理解这一原理是构建鲁棒AI系统的前提——它决定了防御不能依赖单点修补,而需覆盖数据、训练、推理与运维全生命周期。在金融风控、医疗影像和工业质检等高风险场景中,对抗鲁棒性直接关系到服务可靠性与业务安全底线。本文聚焦可落地的工业实践,系统解析靶向数据增强、TRADES对抗训练调优、双通道轻量净化及滑动窗口对抗敏感度监控等关键技术路径,并强调‘代价-收益匹配’这一核心决策逻辑,为工程师提供兼顾精

aijia7039的博客 409

量子增强AI:10个已验证的工程落地用例

量子机器学习(QML)并非替代传统AI,而是针对高维组合爆炸、指数级优化、概率建模失真和小样本泛化等经典计算难以突破的核心瓶颈,提供可量化加速的混合求解路径。其技术价值源于量子叠加、干涉与纠缠带来的并行表征能力,在梯度计算、核方法、生成建模、主成分分析等关键环节实现复杂度降维。当前主流云平台已提供量子体积(QV)≥128的稳定设备,支撑量子-经典协同架构在药物发现、金融风控、工业质检、芯片设计等真实场景中完成端到端验证。本文聚焦10个源自顶会论文与产业实践的量子-AI融合用例,全部具备开源代码、可复现环境与

weixin_33816300的博客 541

量子增强AI:NISQ时代混合架构实战指南

量子机器学习不是取代经典AI,而是通过混合架构在特定瓶颈环节实现加速。其核心在于利用量子硬件在高维空间并行采样、组合优化与概率幅干涉上的天然优势,弥补经典模型在小样本学习、NP-hard优化和物理约束生成等场景的短板。关键技术包括量子特征映射、变分量子算法与硬件噪声容忍设计,已在分子模拟、信用评分和跨模态检索等真实任务中验证可测提升。本文聚焦当前NISQ设备约束下的工程落地路径,提供从QUBO编码、PQC电路设计到量子-经典梯度协同的完整实操框架。

weixin_30416871的博客 369

生产环境ML系统落地:模型可观测性与服务韧性设计实战

机器学习模型上线后失效、延迟飙升、决策漂移——这些并非技术异常,而是生产环境固有特性。理解模型在真实系统中的行为,需从服务韧性设计、端到端可观测性、数据契约与决策治理闭环等工程维度切入。本文聚焦ML系统从‘能跑’到‘敢用’的关键跃迁,覆盖灰度发布熔断机制、混沌测试验证、P999延迟治理、多尺度漂移检测及模型卡片等可落地实践,特别强调特征缺失率、fallback触发率等生产级信号对业务连续性的决定性影响。

449

原型模型:可解释AI落地的务实技术路径

原型模型(Prototype-Based Models)是一种以真实样本为决策依据的可解释AI范式,其核心原理是将模型预测转化为‘与典型示例的相似性匹配’,从而天然具备可追溯、可验证、可沟通的技术特性。相比LIME、SHAP等事后解释方法,它从架构层面嵌入解释能力,避免代理拟合误差;相较注意力机制或反事实解释,它提供基于实证案例的闭环推理链条。该技术在金融风控、医疗辅助诊断、工业质检等高责任场景中展现出独特价值,尤其适用于需向监管方、临床专家或业务人员交付可信决策依据的实际工程任务。本文聚焦其工业级落地逻辑

CHJ_20160630的博客 508

使用ChIPSeeker进行ChIP-seq, ATAC-seq,cut&tag等富集峰的基因组注释

常规的下一代高通量测序(next generation sequencing, NGS)实验通常产生大量短片段(reads),通常我们需要将这些reads比对到参考基因组/转录组上,即将它们置于生物学上有意义的基因背景下,才能获得有意义的结果。一般我们认为会产生两种类型的数据(当然两者并无严格意义上的区分)

微生信 3320

手把手教你用ROS2 Humble给PX4无人机写个“画圆”程序:从C++代码到Gazebo仿真全流程

本文详细介绍了如何使用ROS2 Humble和PX4飞控实现无人机圆形轨迹控制,涵盖从环境配置、Gazebo仿真到C++代码实现的完整流程。通过实战教程,读者将掌握轨迹跟踪仿真的核心技术,包括ROS2与PX4的通信接口、圆形轨迹算法设计及Gazebo仿真调试技巧。

weixin_29056781的博客 257

基于ASP.NET+SQLServer的美妆网站的设计与实现

通过本次ASP.NET MVC美妆商城项目的开发,我们实现了一个功能完善、性能稳定的在线购物平台。该项目不仅提升了用户的购物体验,也为商家提供了一个高效的商品管理和销售渠道。未来,我们将持续优化系统功能,提升用户体验,以适应不断变化的市场需求。

毕业设计大牛哥 1501

Vscode搭配Keil Assistant插件,头文件红色波浪线终极修复指南

本文详细解析了Vscode搭配Keil Assistant插件时出现头文件红色波浪线问题的根源,即ARMCC与ARMCLANG编译器的兼容性问题,并提供了三种实用解决方案:复制文件夹、创建符号链接和手动配置includePath,帮助开发者彻底修复错误,恢复代码跳转和自动补全功能。

q1w3e5r7t9y的博客 352

ubuntu18.04安装R——无法连接上 dl.google.com:80 (6.6.6.6),连接超时&&E: 无法修正错误,因为您要求某些软件包保持现状,就是它们破坏了软件包间的依赖关系。

安装R的时候,sudo apt update 的时候出现错误: 查资料要修改/etc/apt/sources.list.d/google-chrome.list 文件 原来是: deb http://dl.google.com/linux/chrome/deb/ stable main 改为: deb [arch=amd64] http://dl.google.com/linux/chrom...

许希律的博客 4353

使用 FastAPI 构建高性能异步接口服务(含完整项目示例)

python复制编辑python复制编辑= 1: raise HTTPException(status_code=404, detail="用户不存在")特性FastAPI 支持情况类型注解✅自动文档✅异步支持✅ORM 集成✅(推荐 SQLModel)性能✅ 极高FastAPI 是你构建现代化、高性能 Python Web 应用的首选框架!

2501_92823525的博客 1302

uniapp - 鸿蒙真机运行报错hvigor ERROR: Failed :entry:default@CompileArkTS...,hvigor ERROR: default@CompileAr

uniapp鸿蒙报错> hvigor ERROR: Failed :entry:default@CompileArkTS... hvigor ERROR: default@CompileArkTS watch work[0] failed. 【HarmonyOS】工程编译后报错hvigor ERROR: Failed :entry:default@CompileArkTS,uniAPP鸿蒙开发无法编译运行启动报错,工程编译后报错,运行不起来,删除掉项目entry下的build和.preview缓存文件后重新

🏆 前端领域优质创作者 4792

【软考高级架构】案例题考前突击6——大数据架构

前一类的数据主要由流量方以接口的方式提供(比如对接的腾讯广点通平台),后一类则是某网特有的数据,通过买家的浏览、下单、付款日志算出来。1. 在数据层面只维护一张包含所有指标的MySQL表,表中的stday字段作为索引,stday=当天的保存实时数据,stday<当天的保存离线数据。典型的大数据架构,除了Lambda架构之外,还有kappa架构,这两个架构的区别如下标所示,请补充表中空(1)-(4)第二,实时数据只对接了内部的kafka消息,没有实时的获取第三方的曝光、点击、浏览数据。

qq837993702的博客 67

锂电池充电器电路设计 里面有电路

锂电池充电器电路设计 里面有电路 3.7V升压到5V电路设计。

廖雪峰Python教程[完整版]

廖雪峰的python教程整理的,已经排好版了,而且还是完整的,适合小白

VB摄像头监控

该VB模块可对摄像头捕获的画面进行录像等,可在创建的窗口进行控制

IMSL CNL 7.0.0 (x86-64)Crack

IMSL CNL 7.0.0 (x86-64)Crack intel的算法库破解文件,这是C++版本的破解文件

上一篇: 43、AI时代的法律挑战与应对
下一篇: 12、生产系统频率响应分析
code8
博客等级 码龄17年 65粉丝 1720原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符  | 博主筛选后可见
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值