大数据—Hadoop生态圈
发布时间：2023-01-16 23:30
前言
整理了一下目前常用的hadoop组件，后续将会对这些组件的具体应用场景和使用细节进行展开分析。如果大家发现有更好的建议欢迎大家在下方留言。
生态圈
数据存储：HDFS
HDFS，它是 Hadoop 技术体系中的核心基石，负责分布式存储数据，你可以把它理解为一个分布式的文件系统。此文件系统的主要特征是数据分散存储，一个文件存储在 HDFS 上时会被分成若干个数据块，每个数据块分别存储在不同的服务器上。
如上图：
- NameNode：HDFS管理节点，存储元数据，同时负责读，写调度和存储分配。
- DataNode：数据存储节点，用来存储数据。在DataNode上的每个数据块会根据设置的副本数进行分级复制，保证同一个文件的每个数据块副本都不在同一台机器上。
相关推荐
【云原生丨Docker系列3】Docker容器的基本操作方法
【安卓基础】Android直接通过路径来操作其他应用的私有目录，可以吗？
为 Serverless Devs 插上 Terraform 的翅膀，解耦代码和基础设施，实现企业级多环境部署（下）
以下linux进程内存空间中按低地址,操作系统(本科)期末复习指导
STM32超声波避障小车(stm32f103c8t6/HAL/舵机云台+超声波)
CTC Algorithm Explained Part 2：Decoding the Network（CTC算法详解之解码篇）
【论文阅读笔记】NITRE 2022 Challenge on Efficient Super-Resolution: Methods and Results
深度学习与自然语言处理教程(5) - 语言模型、RNN、GRU与LSTM（NLP通关指南·完结）
9.6.c语言编写程序，能够输入100个学生的学号和姓名，并将学生按照学号由小到大排序。当输入一个学号时能用(二分查找)折半查找法找出该学生的姓名。