26、FaSST：高性能RPC与事务处理系统解析

FaSST：高性能RPC与事务处理系统解析

1. RPC限制

FaSST旨在提供通用的RPC，但目前不支持消息大小超过网络MTU（在Infiniband网络中为4KB）的工作负载。这类工作负载在基于RPC和单边RDMA的设计中，很可能会受到网络带宽的限制，性能相近。不过，如果有需要，可以通过几种不影响性能的方式来解决这个限制，例如在RPC层对不频繁的小但大于4KB的消息进行分段，或者采用三消息交换机制，让发送者请求接收者使用单边READ来获取大消息有效负载。

此外，FaSST限制每个协程在每个批次中向每个目标机器发送一条消息，不过该消息可以包含多个合并的请求。这一限制是为了保持RECV队列较小，以便NIC能够缓存它们。考虑一个包含N个节点、每个节点有T个线程、每个线程有c个协程的集群。对于给定的线程，有N个对等线程，以及N * c个协程可以向其发送请求。在任何时候，每个线程必须在其RECV队列中准备与可能接收到的请求数量相同的RECV。如果允许每个协程向每个目标机器发送m条消息，则每个RECV队列需要维护(N * c * m)个RECV。对于一个较大的集群（N = 100，c = 20，T = 14），每台机器需要14个大小为2000 * m的RECV队列。在实验中，m = 1对于工作负载来说已经足够，并且效果良好。但较大的m值会导致NIC缓存抖动，从而降低RPC性能。

为了支持更大的集群，可能需要减小RECV队列的大小。可以通过将本地线程允许向特定远程机器发送的请求数量从c减少到较小的数量来实现。如果某个协程的线程对远程机器的请求预算暂时耗尽，该协程将让出执行权。这种方法适用于大型集群和没有高偏差的工作负载，因为在这种情况下，多个协程向同一远程机器发送请求的概率较小。