kudu 文件描述符超过阀值
kudu 文件描述符缺省打开文件数为32768
在/etc/security/limits.d/下找到了cloudera的limit配置文件，里面限制为32768
/etc/security/limits.d/cloudera-scm.conf
文章图片
文章图片
修改：
32768会覆盖系统配置，cm启动的进程最大打开文件数都是32768.要修改这个配置，需要修改cm安装的没个服务的最大文件描述符
文章图片
【hadoop|kudu 文件描述符 更改】其他如HDFS、Hive、Yarn、Hbase 都有最大进程文件描述符数设置。同样类似修改。
推荐阅读
- 大数据|大数据开发技术hive篇
- HBase的 rowkey 设计原则
- 大数据|hadoop安装
- 大数据|hbase安装
- Gank Spark
- HBase 数据存储结构详细解读
- Hive中order by，sort by，distribute by，cluster by的区别
- Hive 函数使用（一）（datediff,row_number,partition）
- SCD|一种基于SparkSQL的Hive数据仓库拉链表缓慢变化维（SCD2+SCD1）的示例实现
- hadoop|Import/Export实现hbase集群间迁移