Добавить ulimit -n 16384 в hdfs users .bashrc (или /etc/profile, это установит значение для всех пользователей]
Если у пользователя нет домашнего каталога, добавьте ulimit -n 16384 в
Затем вам необходимо перезагрузить компьютер.