服务器128G内存能处理多大日志文件

具体如下。

128G内存能够存128g、1024m、1024kb、1024byte150字节（一个文件块占用150字节）=9亿。

计算：一个文件对应一个切片->maptask。

解决办法：har归档重点、自定义Inputformat->减少nn内存。

CombineTextInputformat->减少切片数->减少maptask。

jvm重用：开始块大小、副本数。

由于服务器上一致跑着项目，时间久了日志会越来越大，这样很占内存，如不即使清理，有可能会把服务器的服务搞崩。

有一个简单的方法，就是不用停止服务，可以对日志进行动态清楚。

看服务器有几核几G吧，越大储存越多数据。

拓展资料：

服务器是计算机的一种，它比普通计算机运行更快、负载更高、价格更贵。服务器在网络中为其它客户机（如PC机、智能手机、ATM等终端甚至是火车系统等大型设备）提供计算或者应用服务。服务器具有高速的CPU运算能力、长时间的可靠运行、强大的I/O外部数据吞吐能力以及更好的扩展性。

根据服务器所提供的服务，一般来说服务器都具备承担响应服务请求、承担服务、保障服务的能力。服务器作为电子设备，其内部的结构十分的复杂，但与普通的计算机内部结构相差不大，如：cpu、硬盘、内存，系统、系统总线等。

---