128G内存能够存128g、1024m、1024kb、1024byte150字节(一个文件块占用150字节)=9亿。
计算:一个文件对应一个切片->maptask。
解决办法:har归档重点、自定义Inputformat->减少nn内存。
CombineTextInputformat->减少切片数->减少maptask。
jvm重用:开始块大小、副本数。
由于服务器上一致跑着项目,时间久了日志会越来越大,这样很占内存,如不即使清理,有可能会把服务器的服务搞崩。
有一个简单的方法,就是不用停止服务,可以对日志进行动态清楚。
服务器主板,或工作站级电脑,都可以支持128G的内存。\x0d\x0a1、个人电脑,主板最多4个插槽。\x0d\x0a2、目前单条内存最大容量是16G。因此,16x4=64。\x0d\x0a3、工作站级和服务器主板,一般都至少有8个内存插槽,有的有12或更多。这样,足够配置128G或更高的内存了。欢迎分享,转载请注明来源:夏雨云
评论列表(0条)