开放平台的技术问题

随着业务量的增长,开放平台面临技术挑战,如Web容器的性能优化、数据处理的高效存储与检索、授权与黑名单管理、多维度告警分析及安全扫描等。目前采用Jetty容器、Hadoop的HDFS和HBase进行优化,并寻求进一步解决方案。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

         经历了近三年的平台发展,随着业务量跳跃增长和开放尺度的不断加大,问题随之而来,开放平台技术问题这个小短篇就是想摆出问题,有些东西已经起步,有些东西还是空白,有些东西做的粗糙,有些东西还处于想想。希望有类似问题的,有业余时间掺和的,有兴趣加入一起搞的,欢迎随时mailfangweng@taobao.com 开放平台内部将会有少量人各自负责一些内容作为专题来做精做足。开放平台团队的优势是有业务试验田(每天10多亿的调用而且正在翻翻),劣势就是时间要自己挤(不论你是业余还是团队内),我们有业务的压力和其他创新的需求,而提出的这些技术问题当前是从系统技术角度谈的,业务上的难点就不提在这里了,废话不多说。

        

Web容器

省,快,稳,新

1.            每天10亿次的服务调用,如果能够在读取所有数据前就拦截掉一些系统或业务校验不通过错误请求,那么节省的上行带宽和连接资源就是一笔不小的财富。这仅仅只是省的一种方式,当前我们做了streaming Lazyparser如何省的更多,还待在容器上做更多文章。

2.            测试过Jettytomcatjbossweb3,最终选择了Jetty,不是因为jetty最快,而是在类似于Servlet3Continuation特性下我们妥协了部分性能的损失。但Jetty的底层却有很大的机会去提升(特别是Jetty的框架可植入,给了我们很大的灵活性,Jetty的整体事件驱动模型是做的很不错的),所以如何让容器更快,需要我们做更多的事。

3.             先看看下面的图:

评论 10
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值