图解Facebook的服务器架构

facebook网络架构学习总结(F4) 1 简介 1.1 大规模快速演进 Facebook 的生产网络本身就是一个大型分布式系统,针对不同任务划分成不同层次并采 用不同的技术(a large distributed system with specialized tiers and technologies): 边缘(edge) 骨干(backbone) 数据中心(data centers) 我们基础设施的核心设计哲学是具备下面两种能力: 快速演进(move fast) 支撑快速增长(support rapid growth) 同时 阅读详情

大体层次划分

 

Facebook的架构可以从不同角度来换分层次。

 

一种是:

一边是PHP整的经典的LAMP stack;另外一边是非PHP整的各种service。


lamp services


Facebook的页面从刚创立的时候扎克伯格写的,到现在,都用PHP开发。后端有用各种语言开发的service。它们之间用跨语言的thrift RPC通信(Scribe也是建立在Thrift之上)。

 

另外一个角度划分的层次是:

 

layers


前面是负载局衡器(没说是用硬件的还是软件的);负责分配前端的Web服务器,Web服务器是用PHP来聚合数据;最后面是 Services,Memcached和数据库。

有意思的是对后面三种的定性:

Services – 快速,复杂; 自己开发的业务进程,来实现复杂的业务逻辑,速度快。

Memchached – 快速,简单;Memchached做简单的key-value缓存,服务应用快速的读请求。

数据库– 缓慢,持久。数据库做持久存储,磁盘IO自然慢,不过有memcached做缓存没关系。

 

 

 

 

NewsFeed的架构

 

写:

Bob更新状态,Web服务器上的PHP程序除了将内容到MySQL数据库之外,也将该行为动态的ID通过Scribe发到一个Leaf Server上(根据Bob的用户ID选的Leaf Server)。

 

write

 

 

读:

另一个人Alice打开Facebook,加载主页,PHP程序向Aggregator服务器查询(Thrift调用),Aggregator从若干个Leaf Server里头读出Alice的朋友的所有行为动态/action的前四十个,aggregator做聚合和一定的排序,返回给PHP程序。

 

read 1


PHP程序获得这些行为动态的ID之后,从Memcached中读出这些ID对应的内容,如Memcached没有则从MySQL数据库中读,汇聚后生成HTML返回给浏览器。

 

 read 2

 

 

Chat的架构

 

页面请求,仍WEB服务器处理(PHP)处理,当然也依赖web tier之后的各种Service。比如查看消息历史啊,在线用户列表啊,发送聊天消息啊。

 

接收聊天消息,则没通过PHP服务器,而是专用的用Erlang写的Channel服务器来处理,通过long-polling来接收聊天消息。Channel服务器是Chat服务的核心部件。发送的消息通过web tier发到Channel服务器。

 

后方有用C++写的chatlogger服务器来做历史记录的读写。

 

同样也用C++写了presence服务器来从channel服务器汇集在线状态。

 

系统的简化结构如下图所示:

 

 chat

 

 

 

Web tier, chatlogger, presence, channel 都是多个服务器组成的集群。

Channel服务器有根据User ID做分区,每个分区由一个高可用的Channel集群服务。

Webtier, chatlogger, presence,在公开的文章和PPT中并没说这些集群具体怎么做分布和冗余备份的。

 

 

 

 

互联网上的资料:

 

 

http://www.infoq.com/presentations/Scale-at-Facebook

Facebook前工程总监Aditya Agarwal在QCon London2010 上的演讲。

 

http://www.infoq.com/presentations/Facebook-Software-Stack

Aditya Agarwal在 QCon SanFrancisco 2008上的演讲,和QCon London 2010 上的没什么区别...

 

http://www.infoq.com/presentations/Evolution-of-Code-Design-at-Facebook

Facebook工程师Nick Schrock在QCon London2011上介绍它们是怎么写代码的。

 

http://www.infoq.com/presentations/Infrastructure-at-Facebook

Facebook的基础平台(Infrastructure)团队经理Jason Sobel在QCon San Francisco 2010上的演讲

 

http://www.youtube.com/watch?v=T-Xr_PJdNmQ&feature=player_embedded

Velocity 2010: Tom Cook, "A Day in theLife of Facebook Operations"

 

http://www.erlang-factory.com/upload/presentations/31/EugeneLetuchy-ErlangatFacebook.pdf

 

http://www.facebook.com/note.php?note_id=14218138919

 

 


-------------------------------------------------------------------------------------------------

更多博文请订阅RSS,更多微博请关注@千里孤行Nerd

全球顶尖网站架构设计精华:Facebook, Google, Amazon篇 本文还有配套的精品资源,点击获取 简介:网站架构设计是构建高效、可扩展且可靠在线服务的核心。本文集合了123篇关于Facebook、Google和Amazon的架构设计文章,涵盖了这些互联网巨头的核心架构理念、技术栈、演化历程以及面临的挑战和解决方案。Facebook以社交网络为核心,采用了动态内容分发网络(CDN)、大数据处理框架(Hadoop/Spark)、缓存系统(M... 阅读详情

相关推荐

智能车竞赛疯狂电路组:Altium Designer赛道设计与计分策略全解析

本文全面解析智能车竞赛疯狂电路组中,如何利用Altium Designer进行专业赛道设计。从软件基础操作、图层管理与封装库调用,到赛道拓扑绘制、核心尺寸规范,详细拆解设计全流程。文章深入结合计分策略,指导如何在设计阶段植入策略点,优化路径与元器件布局,以在比赛中获得时间优势,并提供了从图纸输出到实地测试的完整避坑指南。

beta5的博客 586

数据中台开源技术栈:一图看懂全面的数据管理与应用架构

随着数字化时代的到来,数据管理和应用架构变得越来越重要。数据平台作为一个集中管理和利用数据的架构,为组织提供了促进数据驱动决策和业务创新的能力。本文通过一幅图表,将数据平台技术栈的组成部分清晰呈现,助您深入了解数据中台的全面数据管理与应用架构。

顺其自然~专栏 1876

告别Keil4!手把手教你用Keil C51 V9.61编译51单片机代码(附最新激活方法)

本文详细介绍了Keil C51 V9.61在51单片机开发中的全栈升级指南,包括编译速度提升、调试器性能优化和现代开发支持等核心优势。通过智能安装方案、项目迁移实战和新特性深度应用,帮助开发者告别Keil4,大幅提升开发效率。附有最新激活方法和实用技巧,适用于嵌入式开发工程师。

weixin_26886855的博客 422

浅谈facebook服务器架构

大体层次划分 Facebook的架构可以从不同角度来换分层次。 一种是:一边是PHP整的经典的LAMP stack;另外一个是非PHP整的各种service。 Facebook的页面从刚创立的时候扎克伯格写的,到现在,都用PHP开发。后端有用各种语言开发的service。它们之间用跨语言的thrift RPC通信(Scribe也是建立在Thrift之上)。 另外一个角度划分的层次是

fableboy的学习点滴 871

亚马逊(Amazon ads)广告API申请步骤(已经更新完)

你如果是自己的店铺使用,就选择左边的、如果是授权的那种给别人用就选右边的。审核通过了才能进行下一步,我目前就是刚申请完,后续会持续更新!然后会调整到,下面的页面,选择Agency然后右上角点击创建。审核通过会发邮件到你的企业邮箱、时间大概是1-7天左右。输入对应的信息,点击提交审核,就可以开始申请了。1、广告平台跟卖家平台是分开的,这个概念要清楚。2、注册广告一定要用企业邮箱!回到首页,点击成为合作伙伴。注册了以后会跳转到广告。然后再点击加入合作伙伴。然后会弹出下面的页面。

阿泽的博客 5661

手把手教你学simulink(31.17)--双向DCDC电源场景示例:基于simulink 的双向DCDC应用:车载充电器的pi控制

通过引入PI控制器,系统可以更精确地控制电压和电流,确保充电和放电过程的稳定性和高效性。

MHD0815的博客 208

Facebook架构解读

从我看过的各种资料,还有与各式人等的交谈中,可以得出Facebook现在的架构是这样的: Web前端用PHP语言编写,然后用HipHop Compiler[1]转换为C++语言,再用g++编译器编写,从而提供高性能的模板与web逻辑执行层。 完全依赖静态编译所造成的限制,让Facebook开始启用HipHop Interpreter [2]及HipHop虚拟机,将PHP代码转译为HipHop By...

博客 3306

【软考高级架构】案例题考前突击6——大数据架构

前一类的数据主要由流量方以接口的方式提供(比如对接的腾讯广点通平台),后一类则是某网特有的数据,通过买家的浏览、下单、付款日志算出来。1. 在数据层面只维护一张包含所有指标的MySQL表,表中的stday字段作为索引,stday=当天的保存实时数据,stday<当天的保存离线数据。典型的大数据架构,除了Lambda架构之外,还有kappa架构,这两个架构的区别如下标所示,请补充表中空(1)-(4)第二,实时数据只对接了内部的kafka消息,没有实时的获取第三方的曝光、点击、浏览数据。

qq837993702的博客 68

FaceBook 技术架构

技术构架: Facebook使用LAMP(Linux、 Apache、 MySQL、 PHP)作为技术构架。Facebook的一个技术构架工程师Steven Grimm在博客中写到: 几乎我们所有的服务器都运行开源软件。我们的Web服务器是Linux,Apache和PHP。我们数据库是MySQL。我们使用memchached来保证网站的快速反应。一些后台应用Python、Perl和Ja...

dodomail的专栏 1254

3年爬虫老狗亲测2026最新OpenClaw:熬3天的DOM+反爬+存储,现在18分钟零核心代码搞定!

本文分享了跨境电商竞品监控系统的技术升级历程。作者通过对比传统爬虫技术(Selenium+Scrapy)与OpenClaw 2026的实践应用,展示了AI驱动的自动化爬虫变革。传统方案需3000+行代码维护DOM结构、反爬策略,耗时3天完成2000个SKU监控;而采用基于GPT-5o-mini的OpenClaw 2026后,仅需自然语言描述需求,18分钟即可完成全流程,效率提升240倍。重点介绍了四大核心功能:动态验证码自动识别

专注于Python爬虫开发,分享爬虫技巧、项目实战与反爬经验,使用Scrapy、BeautifulSoup等工具,解决数据抓取难题。 2092

【调优】OpenClaw从零开始高阶调优之skill篇

本文详细解析了OpenClaw技能系统的核心机制。首先介绍了技能的分层加载逻辑,按照优先级从高到低依次为:工作区专属技能、全局共享技能、出厂自带技能和自定义路径技能。通过流程图展示了从扫描到注册的完整加载流程,并解释了同名技能覆盖规则。随后深入剖析了SKILL.md文件结构,包含YAML元数据定义技能属性和Markdown正文说明使用方法,以公众号写作技能为例展示了具体配置。文章还提供了技能优先级切换的实用技巧,帮助用户灵活管理不同版本的技能。

海兰 240

各大公司架构资料

图解Facebook的服务器架构

lzx1104的专栏 892

在Allegro设计界面中如何修改封装焊盘

在高密度板的情况下,SUIPLA(支持内层没有的焊盘摘掉)打勾,在高密度板的情况下,内层没有的焊盘摘掉可以增加走线的空间。3、修改完焊盘后,选择File→Update to Design(更新到设计)。然后关闭焊盘修改对话框即可。,将会定期不定期更新技术文章,互相学习交流。或者点击Options选项卡下要修改的焊盘,然后点击Edit修改。在Allegro PCB设计界面中修改封装焊盘的方法。2、然后点击封装上要修改的焊盘,右击选择Edit。修改完成后如下图所示。

bhxc809751502的博客 7809

Facebook Messenger背后的技术架构:即时通讯的实现之道

Facebook Messenger的成功不仅仅在于其简洁易用的界面和丰富的功能,更在于其强大的技术架构支持。从分布式系统、消息推送、数据同步,到高效的存储与加密,Facebook Messenger通过前沿的技术创新,解决了即时通讯中的各种挑战,为全球用户提供了稳定、安全和便捷的服务。随着技术的不断进步,我们可以预见,Messenger将在未来继续引领即时通讯领域的发展,探索更多与人工智能、虚拟现实等技术结合的可能性,为用户带来更加丰富和个性化的互动体验。1. 高并发消息传输:分布式架构的核心。

AdsMagics的博客 651

Statistics and Machine Learning Toolbox

Statistics and Machine Learning Toolbox(带书签),MATLAB统计学习工具

pscad IEEE标准系统搭建说明

pscad IEEE标准系统搭建说明,包含典型的IEEE 9节点、14节点、30节点、39节点和118节点系统。内含标准测试系统的原始数据和潮流结果。

Facebook 的框架及技术栈

然后在需要使用圆角边框的元素中引用这个 mixin,如,可以方便地为按钮添加圆角边框,并且可以根据需要调整半径值。

yournameplease的专栏 1228

ssm框架搭建

这个是一个在idea上成功跑起来的ssm框架项目,保存在这里方便以后使用直接下载

从上百幅架构图中学大型网站建设经验(上)

从上百幅架构图中学大型网站建设经验(上) 浏览次数: 344次 2011年10月06日 结构之法 算法之道 字号: 大 中 小 分享到: QQ空间 新浪微博 腾讯微博 人人网 豆瓣网 开心网 更多 1 引言 近段时间以来,通过接触有关海量数据处理和搜索引擎的诸多技术,常常见识到不少精妙绝伦的架构图。除了每每感叹于每幅图表面上的绘制的精...

weixin_30736301的博客 2675

Probability and Statistics - 4th edition

Probability and Statistics - 4th edition

facebook 架构_facebook系统架构简介

facebook 架构How your social media data on Facebook are organized and stored 如何在Facebook上组织和存储您的社交媒体数据 There is no need for an introduction to Facebook. Facebook has more than 1 billion active users wh...

weixin_26714375的博客 2411

浅谈Facebook的服务器架构

大体层次划分   Facebook的架构可以从不同角度来换分层次。   一种是:   一边是PHP整的经典的LAMP stack;另外一边是非PHP整的各种service。     Facebook的页面从刚创立的时候扎克伯格写的,到现在,都用PHP开发。后端有用各种语言开发的service。它们之间用跨语言的thrift RPC通信(Scribe也是建立在Thrif

Go for IT 2229

Facebook技术架构

Facebook MySQL,Multifeed(a custom distributed system which takes the tens of thousands of updates from friends and picks the most relevant), Thrift, Memcached,Operations. Much of Fa...

weixin_30770495的博客 296

Facebook 的系统架构

根据我现有的阅读和谈话,我所理解的今天Facebook的架构如下: Web 前端是由 PHP 写的。Facebook 的 HipHop [1] 会把PHP转成 C++ 并用 g++编译,这样就可以为模板和Web逻贺业务层提供高的性能。 业务逻辑以Service的形式存在,其使用Thrift [2]。这些Service根据需求的不同由PHP,C++或Java实现(也可以用到了其它的一些语言……) 用Java写的Services没有用到任何一个企业级的应用服务器,但用到了Face

542

脸书Facebook框架用到的技术总结

FacebookMySQL,Multifeed (a custom distributed system which takes the tens of thousands of updates from friends and picks the most relevant), Thrift, Memcached,Operations.  Much of Facebook’s interacti...

mrleeapple的专栏 4001

Facebook 网站架构总结

Facebook是一个社会化网络站点,它于2004年2月4日上线。每个用户在facebook上有自己的档案和个人页面,用户之间可以通过各种方式发生互动:留言、发站内信,评论日志。虽然目前在国内无法访问facebook,但其强悍的技术架构还是值得我们去研究分析和总结的,或许我们可以从中得到一点启发。 facebook的设计原则是模块化原则、整合化原则、清晰化原则,其架构设计的目标是简单、高效。...

weixin_30764771的博客 398

浅析facebook的信息架构

facebook的信息架构设计,是目前为止互联网上我见过的最合理的信息架构。 每次培训 ,我基本都需要拿20分钟左右的时间来解析它,包括老的、新的、被抄袭的。 一直打算把这个解析过程写下来,但讲的时候可以图音并茂,写的时候确实表达起来很难。 今日权且一试,希望能把培训师讲到的内容表达出30%。(只写现在界面上表现出来的东西,不分析栏目划分已经扩展性问题了) 先看facebook老版界面的信...

Bobby的部落阁 384
上一篇: 进程与线程的区别联系
下一篇: 百度图像搜索探秘
overstack
博客等级 码龄14年 115粉丝 55原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值