3、高效近似概念稳定性:低差异采样的应用

高效近似概念稳定性:低差异采样的应用

1. 背景介绍

在当今的大数据时代,从复杂的概念格中发现相关概念是一项重要挑战。形式概念分析(Formal Concept Analysis,FCA)作为一种基于格和序理论的理论框架,用于构建概念格以进行数据分析。然而,概念格中大量的组合结构可能是无关的,这会导致即使是小数据集也具有较高的复杂度。因此,概念选择技术被广泛应用,通过相关性度量来筛选重要的概念、对象或属性。

在众多相关性度量中,稳定性指标被认为是评估概念相关性的重要指标。稳定性指标 $\sigma(c)$ 量化了概念 $c = (A, B)$ 的内涵 $B$ 对其外延 $A$ 中对象集合的依赖程度,它能反映概念中噪声的程度。但计算稳定性是一个 #P - 完全问题,对于大型概念,精确计算稳定性的时间复杂度可能是指数级的,这成为了实际应用中的瓶颈。

为了解决这个问题,随机蒙特卡罗采样(Monte Carlo Sampling,MCS)方法被引入用于近似计算稳定性。然而,MCS 存在收敛速度慢和稳定性估计不准确的问题。由于 MCS 是独立随机选择样本,会导致样本在概念内涵(或外延)的幂集空间中分布不均匀,某些区域样本过于集中,而其他区域则没有样本,从而削弱了采样过程的收敛速度,降低了稳定性估计的准确性。

2. 形式概念分析基础
  • 形式背景 :FCA 使用形式背景 $K = (G, M, I)$ 作为输入,其中 $G$ 是对象集合,$M$ 是属性集合,$I$ 是 $G$ 和 $M$ 之间的关系,$I \subseteq G \times M$。对于 $g \in G$ 和 $m \in M$,$
根据原作 https://pan.quark.cn/s/459657bcfd45 的源码改编 Classic-ML-Methods-Algo 引言 建立这个项目,是为了梳理和总结传统机器学习(Machine Learning)方法(methods)或者算法(algo),和各位同仁相互学习交流. 现在的深度学习本质上来自于传统的神经网络模型,很大程度上是传统机器学习的延续,同时也在不少时候需要结合传统方法来实现. 任何机器学习方法基本的流程结构都是通用的;使用的评价方法也基本通用;使用的一些数学知识也是通用的. 本文在梳理传统机器学习方法算法的同时也会顺便补充这些流程,数学上的知识以供参考. 机器学习 机器学习是人工智能(Artificial Intelligence)的一个分支,也是实现人工智能最重要的手段.区别于传统的基于规则(rule-based)的算法,机器学习可以从数据中获取知识,从而实现规定的任务[Ian Goodfellow and Yoshua Bengio and Aaron Courville的Deep Learning].这些知识可以分为四种: 总结(summarization) 预测(prediction) 估计(estimation) 假想验证(hypothesis testing) 机器学习主要关心的是预测[Varian在Big Data : New Tricks for Econometrics],预测的可以是连续性的输出变量,分类,聚类或者物品之间的有趣关联. 机器学习分类 根据数据配置(setting,是否有标签,可以是连续的也可以是离散的)和任务目标,我们可以将机器学习方法分为四种: 无监督(unsupervised) 训练数据没有给定...
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符  | 博主筛选后可见
 
红包 添加红包
表情包 插入表情
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值