当前位置:   article > 正文

【林子雨大数据】HDFS学习笔记_大数据技术原理与应用林子雨分布式文件系统hdfs笔记

大数据技术原理与应用林子雨分布式文件系统hdfs笔记

*解决海量式的分布式存储

一、分布式文件系统

1,计算机集群结构

【交换机】:光纤交换机

2.分布式文件系统的结构

主节点:名称节点

从节点:数据节点

二、HDFS

目标:

  • 兼容廉价的硬件设备
  • 流数据读写
  • 大数据集
  • 简单的文件模型
  • 强大的跨平台兼容性

局限性:

  • 不适合低延迟数据访问(实时处理需求)
  • 无法高效存储大量小文件
  • 不支持多用户写入及任意修改文件【为了方便批处理而舍弃了一些功能】

块:

声明:本文内容由网友自发贡献,不代表【wpsshop博客】立场,版权归原作者所有,本站不承担相应法律责任。如您发现有侵权的内容,请联系我们。转载请注明出处:https://www.wpsshop.cn/w/笔触狂放9/article/detail/911831
推荐阅读
相关标签
  

闽ICP备14008679号