128G内存能够存128g、1024m、1024kb、1024byte150字节(一个文件块占用150字节)=9亿。
计算:一个文件对应一个切片->maptask。
解决办法:har归档重点、自定义Inputformat->减少nn内存。
CombineTextInputformat->减少切片数->减少maptask。
jvm重用:开始块大小、副本数。
由于服务器上一致跑着项目,时间久了日志会越来越大,这样很占内存,如不即使清理,有可能会把服务器的服务搞崩。
有一个简单的方法,就是不用停止服务,可以对日志进行动态清楚。
服务器主板,或工作站级电脑,都可以支持128G的内存。\x0d\x0a1、个人电脑,主板最多4个插槽。\x0d\x0a2、目前单条内存最大容量是16G。因此,16x4=64。\x0d\x0a3、工作站级和服务器主板,一般都至少有8个内存插槽,有的有12或更多。这样,足够配置128G或更高的内存了。如果内存是128g可能还真的是服务器,如果磁盘128g那就是一个固态硬盘。服务器一般看cpu,都是多线程的,我单位的服务器是双E5cpu,双电源。服务器不要频率多高,他更多的是交换数据,需要多线程同时工作,还有极强的稳定性,当前服务器操作系统多为server2008的!手打不易,望采纳欢迎分享,转载请注明来源:夏雨云
评论列表(0条)