实战化教学领导品牌  全国咨询热线:400-009-1906

首页>视频下载>Hadoop视频教程

Hadoop视频教程

已有0人在学习

|
分享

类 型:高级教程

适合对象:Hadoop学习者

加群讨论
微信关注
  • 课程目录
  • 课程介绍
  • 课件下载
  • 课程评论

16.MR代码-FOF代码a

MR代码-FOF代码a 开始学习

  Hadoop简介

  – 分布式存储系统HDFS (Hadoop Distributed File System )

  • 分布式存储系统

  • 提供了高可靠性、高扩展性和高吞吐率的数据存储服务

  – 分布式计算框架MapReduce

  • 分布式计算框架

  • 具有易于编程、高容错性和高扩展性等优点。

 

  HDFS优点:

  – 高容错性

  • 数据自动保存多个副本

  • 副本丢失后,自动恢复

  – 适合批处理

  • 移动计算而非数据

  • 数据位置暴露给计算框架

  – 适合大数据处理

  • GB 、TB 、甚至PB 级数据

  • 百万规模以上的文件数量

  • 10K+ 节点 – 可构建在廉价机器上

  • 通过多副本提高可靠性

  • 提供了容错和恢复机制

源代码

所属章节:源代码

看过该课程的同学还看过