ulimit -n 10240 (默认是1024)
否则可能导致:Exception increateBlockOutputStream java.io.EOFException
2,用户可以启动最大的进程数
ulimit -u 10240
可以用lsof命令查看打开的文件句柄和进程。
3,配置hdfs里面datanode的同时处理文件数,hdfs-site.xml
点击(此处)折叠或打开
-
dfs.datanode.max.xcievers -
4096
点击(此处)折叠或打开
额(⊙o⊙)…进来看看那