Hadoop生态圈介绍
发布时间：2023-07-14 19:00
hadoop生态：
1、hadoop的核心组件：
（hdfs）分布式存储、（mapReduce）分布式计算、（Yarn）资源调度与任务管理、Common
2、Lucene：索引检索工具包
3、Nutch：开源的搜索引擎
4、HBase/Cassandra：基于google的BigTable开源的列式存储的非关系型数据库
5、Hive：基于SQL的分布式计算引擎，同时是一个数据仓库
6、Thrift/Avro:Rpc框架，用户网络通讯
7、BigTop：项目测试、打包、部署
8、Oozie（乌贼）/Azakban：大数据的工作流框架
9、Chukwa/Scribe/Flume:数据收集框架
10、Whirr：部署为云服务的类库
11、sqoop：数据迁移的工具
12、Zookper：分布式协调框架
13、HAMA：图计算框架
14、solr：索引服务器
15、Pig：基于Pig Latin脚本的计算引擎
16、Mahout：机器学习框架
相关推荐
SAP Fiori应用索引大全工具和 SAP Fiori Tools 的使用介绍
AR独角兽的死亡教训：融资3亿美元后，成投资人提线木偶，营销大于产品技术...
语义分割CVPR2020-CascadePSP: Toward Class-Agnostic and Very High-Resolution Segmentation与类别无关和甚高分辨率的分割
【GoggLeNet 的 inception 结构】 与 【ResNet 的 Residual 结构】 tensor拼接方式的区别
seaborn.load_dataset报错URLError: ＜urlopen error [WinError 10060] 由于连接方在一段时间后没有正确答复或连接的主机没有反应，连接尝试失败。＞