levelDB源码笔记(4)- SkipList

本文深入探讨了SkipList作为LevelDB memtable底层数据结构的原理及其内存优化技术,包括使用内存池、placement new操作进行高效内存分配,并通过memory barrier实现线程同步。同时解释了在插入操作中使用Barrier的重要性,以及在不同内存模型下的volatile关键字作用。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

skipList是LevelDB的memtable实际采用的数据结构.其原理可以自行google

SkipList应用概率保持平衡,可以用来替代平衡树,优点是实现简单。这里每个链表从小到大排列,height=0是所有节点的链表,height越高,链表节点越稀少。

几个tips:

i) 使用内存池和placement new操作内存:

template<typename Key, class Comparator>
typename SkipList<Key,Comparator>::Node*
SkipList<Key,Comparator>::NewNode(const Key& key, int height) {
  char* mem = arena_->AllocateAligned(
      sizeof(Node) + sizeof(port::AtomicPointer) * (height - 1));
  return new (mem) Node(key);
}

ii)memory barrier。

在SkipList的实现中,内部并没有使用到锁,只是用到了AtomicPointer。AtomicPointer可以保存一个void*,利用了memory barrier来实现同步。(似乎说mutex已经带了mb的操作,但是对单个int或者位的操作,不必用到mutex,用mb可以更快?)

inline void MemoryBarrier() {
  // See http://gcc.gnu.org/ml/gcc/2003-04/msg01180.html for a discussion on
  // this idiom. Also see http://en.wikipedia.org/wiki/Memory_ordering.
  __asm__ __volatile__("" : : : "memory");
}

Acquire_Load(){void* result = rep_; MemoryBarrier();return result;}
Release_Store(void* v){MemoryBarrier();rep_ = v;}

An operation has acquire semantics if other processors will always see its effect before any subsequent operation's effect. An operation has release semantics if other processors will see every preceding operation's effect before the effect of the operation itself.

acquire保证其他线程先看到执行当前命令,而后执行后续指令;release保证其他线程先看到其他前序指令执行,而后执行当前指令

我们来分析下如果在Insert中的prev[i]->SetNext(i, x);不使用Barrier会有什么问题?如下两条语句:
x->NoBarrier_SetNext(i, prev[i]->NoBarrier_Next(i));
prev[i]->SetNext(i, x);
实际上等效于如下三句:
x->next=prev[i]->next
MemoryBarrier()
prev[i]->next=x

假设如果没有内存Barrier,可能会出现如下一种情况,另一个并发线程,可能会看到不正确的内存更新顺序,比如它可能看到prev[i]->next已经是x了,但是x的next还未被正确更新,因为x有可能是存在高速缓存中的,还未刷到内存,这样就会有问题。通过Barrier就可以保证,如果用户看到了prev[i]->next=x那么x->next也肯定已经被正确的设置了。

在强内存模型下,(X86-64,AMD64的内存模型都是强内存模型)volatile关键字声明的变量已经具备load acquire和store release的功能了,但在其他如安腾等是弱内存模型,需要另外的实现


参考:http://duanple.blog.163.com/blog/static/70971767201242491334104/


评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值