博客
关于我
强烈建议你试试无所不能的chatGPT,快点击我
DataNode 工作机制
阅读量:4321 次
发布时间:2019-06-06

本文共 360 字,大约阅读时间需要 1 分钟。

  • 根据客户端或namenode的调度存储和检索数据,并且定期向namenode发送所存储的块(block)的列表

  • 数据块在DataNode进程所在的节点上以文件的形式存储在本地磁盘上

    • 一个是数据本身

    • 一个是元数据(数据块的长度,块数据的校验和,以及时间戳)

  • DataNode工作机制

  • datanode启动时,每个datanode对本地磁盘进行扫描,将本datanode上保存的block信息汇报给namenode 。namenode在接收到的block信息以及该block所在的datanode信息等保存在内存中。 DataNode启动后向NameNode注册,通过后周期性地向NameNode上报所有的块信息

转载于:https://www.cnblogs.com/xiangyuguan/p/11007482.html

你可能感兴趣的文章
spring特点与好处
查看>>
html 自制属性
查看>>
面向对象术语概念
查看>>
细胞(cell) 矩阵快速幂
查看>>
HDU - 1272 小希的迷宫
查看>>
EntityFramework(1)基础概念与Database First
查看>>
Spring Boot 任务
查看>>
2018APIO 进京赶考
查看>>
Duilib程序添加托盘图标显示
查看>>
在windows上搭建redis集群(redis-cluster)
查看>>
【省选十连测之九】【DP】【组合计数去重】【欧拉函数】基本题
查看>>
文件上传功能 -- jquery.form.js/springmvc
查看>>
阿里云ecs(phpstudy一件包)
查看>>
Python核心编程的四大神兽:迭代器、生成器、闭包以及装饰器
查看>>
linux /proc/sys/fs/file-nr /proc/sys/fs/file-max /etc/security/limits.conf 三者的关联
查看>>
AndroidStudio-快捷键
查看>>
用python DIY一个图片转pdf工具并打包成exe
查看>>
6月14 空控制器和空操作及命名空间
查看>>
volicity文法学习和总结
查看>>
block 块的内部结构
查看>>