TopK问题

文章提供了一个C语言程序,通过最小堆数据结构解决TopK问题,即从大量数据中找出最大的前K个数。程序首先建立一个小顶堆,然后逐个与剩余元素比较,如果新元素大于堆顶元素,则进行交换并调整堆。

TopK问题

Test.c

#define _CRT_SECURE_NO_WARNINGS 1
#include "Heap1.h"

void TestTopK()
{
	int n = 100000;
	int* a = (int*)malloc(sizeof(int) * n);
	srand(time(0));
	for (int i = 0; i < n; i++)
	{
		a[i] = rand() % 100000;  //使得a[i]的所有值都小于100000
	}
	a[5] = 100000 + 1;
	a[15] = 100000 + 2;
	a[25] = 100000 + 3;
	a[35] = 100000 + 4;
	a[9999] = 100000 + 5;
	a[0] = 100000 + 6;
	a[999] = 100000 + 7;
	a[75] = 100000 + 8;
	a[85] = 100000 + 9;
	a[95] = 100000 + 10;

	TopK(a, n, 10);
}

int main()
{
	TestTopK();
	return 0;
}

Heap.h

#define _CRT_SECURE_NO_WARNINGS 1
#include <stdio.h>
#include <stdlib.h>
#include <assert.h>

void AdjustDown(int* a, int n, int parent);
void TopK(int* a, int n, int k);

Heap.c

#define _CRT_SECURE_NO_WARNINGS 1
#include "Heap1.h"

void Swap(int* a, int* b)
{
	int tmp = *a;
	*a = *b;
	*b = tmp;
}

//向下调整
void AdjustDown(int* a, int n, int parent)
{
	assert(a);
	int child = parent * 2 + 1;
	while (child < n)
	{
		if (child + 1 < n && a[child + 1] < a[child])
		{
			child++;
		}
		if (a[child] < a[parent])
		{
			Swap(&a[child], &a[parent]);
			parent = child;
			child = parent * 2 + 1;
		}
		else
		{
			break;
		}
	}
}

//从很大一组数中选出最大的前K个数;例如从十亿个数中选出最大的前100个数
void TopK(int* a, int n, int k)
{
	assert(a);
	//1、用数组a的前k个数建小堆
	int* kMinHeap = (int*)malloc(sizeof(int) * k);
	assert(kMinHeap);
	for (int i = 0; i < k; i++)
	{
		kMinHeap[i] = a[i];
	}
	for (int i = (k - 1 - 1) / 2; i >= 0; i--)
	{
		AdjustDown(kMinHeap, k, i);
	}

	//2、将数组a中剩余的n-k个数,逐个和堆顶的数据进行比较。如果大于堆顶的数据,则交换。
	for (int i = k; i < n; i++)
	{
		if (a[i] > kMinHeap[0])
		{
			Swap(&a[i], &kMinHeap[0]);
			AdjustDown(kMinHeap, k, 0);
		}
	}
	for (int i = 0; i < k; i++)
	{
		printf("%d ", kMinHeap[i]);
	}
	printf("\n");

}

### 堆排序在Top-K问题中的应用 堆排序是一种高效的排序算法,其核心在于利用堆这种数据结构来实现元素的排序。堆可以分为最大堆和最小堆两种形式,其中最大堆的父节点总是大于或等于其子节点,而最小堆则相反。在处理Top-K问题时,通常会使用最小堆来维护最大的K个数。 #### 使用最小堆解决Top-K问题 当需要从一个包含n个元素的数组中找出前k大的元素时,可以采用以下策略: 1. **初始化最小堆**:首先创建一个大小为k的最小堆。 2. **遍历数组**:接着遍历整个数组中的每个元素。 3. **比较与替换**:对于每一个遍历到的元素,如果它比堆顶(即当前堆中最小的元素)还要大,则用这个元素替换掉堆顶,并重新调整堆以保持堆性质。 4. **结果获取**:遍历完成后,堆中的元素即为所求的前k大元素。 这种方法的时间复杂度大约是O(n logk),这比直接对整个数组进行排序然后取前k个元素要高效得多,特别是当n非常大且k相对较小的时候。 ```java /** * 使用最小堆求TOP-K问题 */ private int findTopK2(int[] arr, int k) { // 最小堆 MinHeap heap = new MinHeap(); // 建堆 heap.buildMaxHeap(arr, arr.length); for (int i = k; i < arr.length; i++) { // 如果当前值大于堆顶元素,则替换掉堆顶元素并调整堆 if (arr[i] > arr[0]) { arr[0] = arr[i]; heap.delete(arr, k); } } // 这里其实不需要返回值,只是因为在findTopK1中返回了index,这里也返回index,方便遍历 // 其实在此方法执行后,arr数组的钱K位就是所求元素,直接遍历即可 return k - 1; } ``` #### 复杂度分析 - **时间复杂度**:构建初始堆的时间复杂度是O(k),之后对于剩下的n-k个元素,每次插入堆的操作时间为O(logk),因此总的时间复杂度为O(n logk) [^2]。 - **空间复杂度**:由于只需要额外的空间来存储堆,所以空间复杂度是O(k)。 通过这种方式,我们可以有效地找到大量数据集中前k个最大的元素,这对于大数据处理来说是非常有用的技巧之一。
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值