RENKTH 最近的时间轴更新
RENKTH

RENKTH

V2EX 第 401368 号会员,加入于 2019-04-13 15:17:05 +08:00
RENKTH 最近回复了
2019-11-12 20:55:24 +08:00
回复了 RENKTH 创建的主题 问与答 这个 300M 如何计算?为什么我算的 150M 左右
这是 Hadoop 权威指南 3.1 节内容 大量的小文件的内容,我自己算需要的的内存大小是 150x1000000/1024/1024=143.051 但是不知道为什么书里说需要 300m 大小
2019-11-12 20:31:23 +08:00
回复了 RENKTH 创建的主题 问与答 这个 300M 如何计算?为什么我算的 150M 左右
据存储在内存中,因此该文件系统所能存储的文件总数受限于 namenode 的内存容量。根据经验,每个文件、目录、数据块的存储信息大约占 150 字节。举例来说,如果有一百万个文件,每个文件占用一个数据块,那至少需要 300MB 的内存。


没复制完 补上
2019-10-10 12:51:54 +08:00
回复了 RENKTH 创建的主题 问与答 Python yield 如何实现的切换上下文
关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   3485 人在线   最高记录 6679   ·     Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 · 13ms · UTC 11:13 · PVG 19:13 · LAX 03:13 · JFK 06:13
Developed with CodeLauncher
♥ Do have faith in what you're doing.