
分布式
文章平均质量分 79
boJIke
世界第一退堂鼓选手,著名电影、电视剧观众。
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
Spring Boot系列(一):Spring Boot 入门篇
构建微服务:Spring boot 入门篇什么是spring bootSpring Boot是由Pivotal团队提供的全新框架,其设计目的是用来简化新Spring应用的初始搭建以及开发过程。该框架使用了特定的方式来进行配置,从而使开发人员不再需要定义样板化的配置。用我的话来理解,就是spring boot其实不是什么新的框架,它默认配置了很多框架的使用方式,就像maven整合了所有的jar包,spring boot整合了所有的框架(不知道这样比喻是否合适)。使用spring boot有什么好处其实原创 2021-10-13 10:01:18 · 183 阅读 · 0 评论 -
分布式TF入门学习整理(一)
2017年,Facebook在ResNet50上采用了分布式训练,开启了分布式深度学习的的大规模应用时代。通过使用分布在32个服务器上的256个GPU进行训练,大大提升了模型训练的速度和精度。在面对海量数据和复杂模型时,计算资源很容易称为深度学习的瓶颈,分布式学习的应用则很好地解决了这一难题。在推荐广告领域,算法工程师面对的往往是数以亿计的大规模稀疏数据,分布式学习就显得尤为重要。作为工业界的宠儿(雾),tensorflow提供了一整套分布式训练的代码框架,许多公司都会直接采用或进行二次开发。本文简要介绍了原创 2021-10-09 10:55:11 · 736 阅读 · 0 评论 -
大数据和分布式入门:主流分布式缓存组件(一)
在大数据处理当中,核心指导思想始终是分布式,基于分布式思想,我们有了Hadoop等开源技术框架,能够以更低的成本完成企业大数据系统平台搭建,支持业务进展。今天大数据和分布式入门,我们主要来聊聊主流的大数据分布式缓存组件。分布式缓存服务大数据处理平台主要由上层的分布式计算组件和底层的分布式存储系统两层构成。存储层的热门产品主要有HDFS、Ceph及OpenStack Swift等,计算层的热门产品主要有MapReduce和Spark等。以Hadoop生态为例,存储组件为HDFS,计算组件是MapRed转载 2021-10-09 10:51:40 · 453 阅读 · 0 评论