数据流中的中位数

题目描述

如何得到一个数据流中的中位数?如果从数据流中读出奇数个数值,那么中位数就是所有数值排序之后位于中间的数值。如果从数据流中读出偶数个数值,那么中位数就是所有数值排序之后中间两个数的平均值。我们使用Insert()方法读取数据流,使用GetMedian()方法获取当前读取数据的中位数。

方法一

用锥来存放元素,将较小的元素存放在大顶锥中,锥顶为最大值;将较大元素存放在小顶锥中,锥顶为最小值。插入元素时,一直保持两个锥元素个数相等或者大顶锥中元素个数比小顶锥多一个。如果最终两锥中元素个数相等,锥顶元素之和的平均数为中位数,如果大顶锥中元素个数比小顶锥多一个,大顶锥锥顶元素为中位数。

class Solution {
public:
    priority_queue<int,vector<int>,less<int> >big;//大顶锥,放置较小的数据
    priority_queue<int,vector<int>,greater<int> >sma;//小顶锥,放置较大的数据
    void Insert(int num)
    {
        if(big.empty()||num<=big.top())
            big.push(num);
        else
            sma.push(num);
        if(big.size()==sma.size()+2)//偶数元素,让两个锥元素个数相等
        {
            sma.push(big.top());
            big.pop();
        }
        if(big.size()+1==sma.size())//奇数个元素,大顶锥元素比小顶锥多一个
        {
            big.push(sma.top());
            sma.pop();
        }
    }
    double GetMedian()
    {
        if(big.size()==sma.size()+1)
            return big.top();
        else
            return (big.top()+sma.top())/2.0;
    }
};

方法二

简单粗暴,直接放到容器中排序取中间值

class Solution {
public:
    void Insert(int num)
    {
        vec.push_back(num);
    }

    double GetMedian()
    {
        sort(vec.begin(),vec.end());
        int len=vec.size();
        if(len%2==1)
            return vec[len/2];
        else
            return (vec[len/2]+vec[len/2-1])/2.0;
    }
    private:
    vector<int>vec;
};
计算数据流中位数可以通过Flink的ProcessFunction来实现。 具体实现步骤如下: 1. 将数据流按照大小排序 2. 计算数据流的长度,如果是奇数,则中位数为第 (length+1)/2 个元素;如果是偶数,则中位数为第length/2个元素和第(length/2+1)个元素的平均值。 3. 在ProcessFunction的实现中,可以使用状态变量来保存数据流的有序列表,并计算中位数。 以下是一个简单的示例代码: ```java public class MedianFunction extends ProcessFunction<Integer, Double> { private ListState<Integer> values; @Override public void open(Configuration parameters) throws Exception { super.open(parameters); values = getRuntimeContext().getListState(new ListStateDescriptor<Integer>("values", Integer.class)); } @Override public void processElement(Integer value, Context ctx, Collector<Double> out) throws Exception { values.add(value); List<Integer> sortedValues = new ArrayList<>(); for (Integer v : values.get()) { sortedValues.add(v); } Collections.sort(sortedValues); int length = sortedValues.size(); if (length % 2 == 0) { double median = (sortedValues.get(length/2) + sortedValues.get(length/2 - 1)) / 2.0; out.collect(median); } else { double median = sortedValues.get(length/2); out.collect(median); } } } ``` 在上述代码中,我们使用了ListState来保存数据流中的元素,并在每次处理新元素时重新排序并计算中位数。注意,这只是一个简单的示例,实际应用中需要考虑更多的问题,比如数据倾斜、数据丢失等。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值