美文网首页
Hadoop理论知识

Hadoop理论知识

作者: 夙夜M | 来源:发表于2017-08-25 20:22 被阅读0次

1、hadoop的概念:分布式文件存储和计算框架

hdfs:使用分布式思想存储海量数据

MapReduce:分布式计算程序的编程框架

2、hadoop的副本存放策略

上传和下载底层原理

3、hive的概念

hive是由Facebook实现并开源的一款基于hadoop的类SQL数据仓库工具,

使用HQL查询功能将结构化的数据映射为一张数据库表,底层数据存储在hdfs,

Hive的本质是将HQL语句转化为MR任务运行,使不熟悉MapReduce的用户能够根据HQL语句进行数据ETL操作。

4、zookeeper的选举算法

相关文章

网友评论

      本文标题:Hadoop理论知识

      本文链接:https://www.haomeiwen.com/subject/eetkdxtx.html