服务器128G内存能处理多大日志文件

具体如下。
128G内存能够存128g、1024m、1024kb、1024byte150字节（一个文件块占用150字节）=9亿。
计算：一个文件对应一个切片->maptask。
解决办法：har归档重点、自定义Inputformat->减少nn内存。
CombineTextInputformat->减少切片数->减少maptask。
jvm重用：开始块大小、副本数。
由于服务器上一致跑着项目，时间久了日志会越来越大，这样很占内存，如不即使清理，有可能会把服务器的服务搞崩。
有一个简单的方法，就是不用停止服务，可以对日志进行动态清楚。

---