Stanford大学的Phoenix系统（单机多核MapReduce应用）

最新推荐文章于 2025-09-20 16:13:08 发布

原创最新推荐文章于 2025-09-20 16:13:08 发布 · 3.4k 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#mapreduce #reference #redhat #平台 #服务器 #api

Linux 同时被 3 个专栏收录

25 篇文章

订阅专栏

MapReduce

8 篇文章

订阅专栏

C/C++

6 篇文章

订阅专栏

本文介绍了Phoenix，一种在共享内存体系结构上实现的MapReduce，旨在提升多核平台上的程序执行效率并简化并发管理。通过提供简单的API和高效的运行时系统，Phoenix帮助程序员避免了并发管理的复杂性。文章详细说明了如何使用Phoenix，包括下载最新程序和源码，以及在kubuntu-11.10-desktop-amd64平台上的注意事项。同时，文中分享了在使用过程中遇到的问题及解决方案，例如在GNUmake编译时遇到的关于semaphore相关函数的未定义引用问题，并提供了通过添加参数-pthread来解决的方法。

一、简介：

1、Phoenix是在共享内存的体系结构上的MapReduce实现。它的目标是在多核平台上，使程序执行得更高效，而且使程序员不必关心并发的管理。事实上并发管理，尽管是经验丰富的程序员，也难免在这上面出错。

2、Phoenix由一组对程序应用开发者开放的简单API和一个高效的运行时组成。运行时系统处理程序的并发、资源管理和错误修复，它的实现是建立在P-thread之上的，当然也可以很方便地移植到其它的共享内存线程库上。

3、网站http://mapreduce.stanford.edu/可以下载到最新程序和源码。

二、本人所用平台：kubuntu-11.10-desktop-amd64

三、注意事项：操作系统必须是64位，需要用GNU make编译

四、问题汇总

Q1： make时遇到的问题：

undefined reference to `sem_wait'
undefined reference to `sem_post'
undefined reference to `sem_destroy'
undefined reference to `sem_init'

A1：调试时加参数 -pthread

注：：这些问题在Redhat服务器版上没有发生。