- 博客(11)
- 收藏
- 关注
原创 idea plugins连不上
1.先确定自己的网络是移动、联通还是电信2.配置最近的DNS服务器地址2.1mac电脑进入设置,随之进入网络,高级设置配置DNS服务器2.2使用sudo killall -HUP mDNSResponder刷新DNS3.再次进入idea打开设置,进入plugins就可以加载出来了如果是windows系统,配置DNS,以及刷新DNS,操作不同,但是原理相同,一样的顺序...
2020-02-12 13:34:00
1443
2
转载 ebay
eaby技术架构变迁 最近在infoq上面看到 ebay介绍其系统架构变迁以及系统设计分享方面的讲座,其中陈述了ebay从1995年到2006年之间系统架构的变化过程。从这里,我们可以学习到许多宝贵的经验来设计一个大容量,高并发,分布式的系统。 ebay的系统架构的变迁主要经历了4个阶段,下面一幅图展现了ebay系统架构变迁的时间表&...
2018-11-29 17:10:03
600
1
转载 hbase基础介绍
本文由毕杰山同学贡献 ,原文首发于公众号:NoSQL漫谈 链接:https://mp.weixin.qq.com/s/CXsGcbbsKTMXotlwRFQ5xw开篇用惯了Oracle/MySQL的同学们,心目中的...
2018-09-07 14:34:25
568
转载 MapReducer源码解析
MapReducer源码解析(笔记) 第一步,读取数据源,将每一行内容解析成一个个键值对,每个键值对供map函数定义一次,数据源由FileInputFormat:指定的,程序就能从地址读取记录,读取的记录每一行内容是如何转换成一个个键值对?Mapper函数是如何调用键值对?这是由InputFormatClass完成的,它在我们的例子中的具体实现类是TextInputForm...
2018-09-06 14:57:26
846
转载 mapreduce
1.1 MapReduce是什么 Hadoop MapReduce是一个软件框架,基于该框架能够容易地编写应用程序,这些应用程序能够运行在由上千个商用机器组成的大集群上,并以一种可靠的,具有容错能力的方式并行地处理上TB级别的海量数据...
2018-09-05 15:03:04
156
转载 Yarn
YARN架构设计详解一、YARN基本服务组件 YARN是Hadoop 2.0中的资源管理系统,它的基本设计思想是将MRv1中的JobTracker拆分成了两个独立的服务:一个全局的资源管理器ResourceManager和每个应用程序特有的ApplicationMaster。其中ResourceManager负责整个系统的资源管理和分配,而ApplicationMaster负责单...
2018-09-04 13:34:48
218
转载 hadoop
1、对hdfs的操作方式:hadoop fs fs *****hadoop fs -ls / 查看hdfs的跟目录下的内容hadoop fs -lsr / 递归hdfs的根目录下的内容hadoop fs mkdir &nbs...
2018-08-30 18:28:07
147
转载 Spark Streaming和Flink的Word Count对比
准备:nccat for windows/linux 都可以 通过 TCP 套接字连接,从流数据中创建了一个 Spark DStream/ Flink DataSream, 然后进行处理, 时间窗口大小为10s 因为 示例需要, 所以 需要下载一个netcat, 来构造流的输入。代码:spark streamingpackage cn.kee.spark;publ...
2018-08-30 18:25:31
287
转载 Java虚拟机(四)——对象的创建、存储和定位
版权声明:本文为博主原创文章,转载请注明出处。 https://blog.youkuaiyun.com/ylyg050518/article/details/52319003 ...
2018-08-30 18:23:02
356
转载 java对象在内存中的结构
今天看到一个不错的PPT:Build Memory-efficient Java Applications,开篇便提出了一个问题,在Hotspot JVM中,32位机器下,Integer对象的大小是int的几倍?我们都知道在Java语言规范已经规定了int的大小是4个字节,那么Integer对象的大小是多少呢?要知道一个对象的大小,那么必须需要知道对象在虚拟机中的结构是怎样的,来看看Hotsp...
2018-08-30 15:35:16
3488
1
转载 深入java虚拟机 class类文件结构
平台无关性Java是与平台无关的语言,这得益于Java源代码编译后生成的存储字节码的文件,即Class文件,以及Java虚拟机的实现。不仅使用Java编译器可以把Java代码编译成存储字节码的Class文件,使用JRuby等其他语言的编译器也可以把程序代码编译成Class文件,虚拟机并不关心Class的来源是什么语言,只要它符合一定的结构,就可以在Java中运行。Java语言中的各种变量、关键...
2018-08-27 15:13:50
167
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人