
scala
文章平均质量分 69
tornadowp
6年IT行业工作经验,熟悉无线,搜索及WEB业务;具有技术研发、项目管理、运营及统计分析工作经验,大规模分布式系统设计及开发经验,千万级以上数据处理经验;熟悉主流开发技术如Java、Android、数据库应用及SQL编程、 Linux应用及shell编程、Python、及AJAX、Html、CSS等;英语6级;学习力强,善于沟通。
展开
-
little spider for scala
用scala 写了个spider, 它的构造如下: . producer:原创 2014-08-17 17:14:42 · 2508 阅读 · 0 评论 -
hammal 异构数据实时交换平台
互联网公司的数据部门每天会面临大量数据的导入导出,它们来自不同类型的数据源,去往不同的目的地,它们数据量大的惊人,数据交换会带来额外的开销,执行效率差别很大。因此,我们需要这样的数据交换平台,1,满足异构数据的导入导出;2,数据交换的性能开销越低越好;3,数据传输过程避免过多的磁盘IO操作,实现全内存;4,良好的开放API,采用framework_plugin构建,业务方个性化plugin.基于这样的思想,京东开发了plumber系统,taobao推出了DataX系统,前者基于clojure,后者基于jav原创 2014-09-08 20:29:15 · 4472 阅读 · 0 评论