- 博客(6)
- 收藏
- 关注
原创 个人总结Hadoop题库3
第四章 YARN与MapReduceMapReduce程序只能对key排序 TMapReduce中,OutputFormat主要用于描述输出数据的格式,采用NullWritable可以省略输出的key或value。 TYARN中,任务进度监控是向哪个组件汇报的? ApplicationMasterMapReduce的Shuffle过程中哪个操作是最后做的? 合并MapReduce编程模型中以下组件哪个是最后执行的? Reducer在MapReduc
2022-06-19 15:25:09
1280
原创 软件工程笔记
6.为什么要引入高响应比优先调度算法?它有何优点? 答:.因为高响应比优先调度算法既考虑了作业的等待时间,又考虑了作业运行时间的调度算法,因此,既照顾了短作业,又不致使作业的等待时间过长,从而改变了处理机调度的性能。8.在抢占调度方式中,抢占的原则是什么? 答:优先权原则,即可以让优先级高的先用当前有进程的处理机。 短进程优先原则,即允许让新到的短进抢占当前进程的处理机。新到达的进程比正在执行的进程的运行时间明显短。 时间片原则,即各进程按时间片轮转运行时,当正在...
2022-05-29 21:44:40
1117
原创 关于数据结构
关于数组(array)数组是由有限个相同类型的变量所组成的有序集合,它的物理存储方式是顺序存储,访问方式是随机访问。利用下标查找、更新数组元素的时间复杂度是O(1),中间插入、删除数组元素的时间复杂度是O(n)。数组是最为简单、最为常用的数据结构。数组的另一个特点是顺序存储,即数组中的每一个元素,都存储在小小的内存单元中,并且元素之间紧密排列,即不能打乱元素的存储顺序,也不能跳过某个存储单元进行存储。数组的基本操作 1.读取元素,根据数组下标进行读取,叫做随机读取。2.更....
2022-05-17 15:23:30
331
原创 个人总结Hadoop题库2
第三章 HDFSNameNode负责管理metadata,client端每次读写请求,它都会从磁盘中读取或则会写入metadata信息并反馈client端。 FNameNode本地磁盘保存了Block的位置信息。 FDataNode一旦发生故障将导致整个集群不可用 FNameNode管理了两个文件,其中fsimage体现了其最新的状态 T当Namenode宕机时SecondaryNamenode能接替Namenode的职责 FHDFS在安全模式可以上传文件,但不能删除文件
2022-05-14 15:31:09
2787
原创 个人总结hadoop题库
大数据的数据量现在已经达到了哪个级别?( ) PB狭义的Hadoop是一个适合大数据分布式存储和分布式计算的平台,不包括下面哪个组件?(Hbase ) HBase HDFS MapReduce YarnXML文件属于非结构化数据。 F 半结构化数据平台化构架不是大数据发展的主流趋势。 F对于GFS架构,下面哪个说法是错误的?AA. GFS Master节点管理所有的文件系统所有数据块。B. GFS存储的文件都被分割成固定大小的块,每个块都会被复制到多个块服务器上(可靠.
2022-05-06 17:51:56
2580
原创 用Java写冒泡排序
/*3.数组排序(冒泡排序)在冒泡排序的过程中,不断地比较数组中相邻的两个元素,较小者向上浮,较大者往下沉,整个过程和水中气泡上升的原理相似。 */public class Example30 { public static void main(String[] args) { int[] arr={9,8,3,5,2}; System.out.print("冒泡排序前:"); printArray(arr); bu...
2022-05-06 17:37:42
3133
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人