Avatar notebook default
35篇文章 · 60888字 · 6人关注
  • 2020-02-17 TODOLIST

    https://my.oschina.net/dabird/blog/3046769

  • Hadoop面试问题和回答4

    1 HDFS数据块复制时的目的节点的选择原则? 1 和客户端在同一节点或者同一个机架2 选择其他机架3 和第二个一样的机架但是不用的节点上 2 ...

  • Hadoop的全局排序

    方法一 设置一个分区,当文件较大时效率低 方法二 创建一系列有序的文件,然后归并排序这些文件,得到一个全局有序的文件。(1000个1-10000...

  • Hadoop和Yarn中的任务调度算法和任务队列

    参考:Yarn 资源调度策略hadoop的三种任务调度的原理 1 Yarn 资源调度策略 1)队列调度:FIFO Scheduler FIFO ...

  • HDFS块大小默认为什么是64MB(或者是128MB)

    1 HDFS的设计特点? 可以进行超大文件存储对商用硬件要求不高式数据访问:适合一次写入,多次读出的场景,适合用来做数据分析,并不适合用来做网盘...

  • Resize,w 360,h 240
    Datandoe数据节点

    Datanode以存储数据块(Block)的形式保存HDFS文件 同时Datanode还会响应HDFS客户端读、写数据块的请求 Datanode...

  • Namenode名字节点

    对于Namenode的分析,分以下几个部分: 文件系统目录树管理 数据块和数据节点管理 租约管理租约是Namenode给与租约持有者(客户端)在...

  • Resize,w 360,h 240
    Hadoop RPC

    Hadopp作为分布式存储系统,为了便于各个节点之间的通信和交互,基于IPC进程间通信模型,实现了一套高效的轻量级RPC框架,这套RPC框架底层...

  • Resize,w 360,h 240
    面试必看:Hadoop源码2.X概述

    1 HDFS基本概念 数据块(Block) 128M 最小处理单元 冗余备份 名字节点(NameNode) 管理:1、文件系统的命名空间:文...

文集作者