WHOAMI
Xu Jiang
技术人的日常.
  • distributed-file-system-design

    忙着开发软件,最近一直没什么时间写作。 今天我们谈一下关于分布式文件系统。 分布式文件系统在一直在存储领域拥有举足轻重的地位,涉及知识也比较多。 主流分布式系统设计,主要分为三个方向: [1] 分布式存储系统 [2] 分布式计算系统 [3] 分布式管理系统 今天我们...

    • hdfs
  • HDFS & MapReduce异构存储性能测试白皮书

    title: HDFS & MapReduce异构存储性能测试白皮书 author: whoami categories: Storage tags: HDFS date: 2016-10-27 description: The Truth About MapReduce Perf...

    • hdfs
  • hdfs-balancer均衡器使用

    简介 Hadoop的HDFS集群非常容易出现机器与机器之间磁盘利用率不平衡的情况,比如集群中添 加新的数据节点。当HDFS出现不平衡状况的时候,将引发很多问题,比如MR程序无法很好 地利用本地计算的优势,机器之间无法达到更好的网络带宽使用率,机器磁盘无法利用等 等。可见,保证HDFS中的...

    • hdfs
  • HDFS_NFS_Gateway

    1、mount hdfs,关闭 linux自带的几个和 hdfs需要启动冲突的服务 参考: (1) service nfs stop and service rpcbind stop (2) hadoop portmap or hadoop-daemon.sh start po...

    • hdfs