怎么加大mysql内存 mysql内存不断增加( 二 )


那么这么大页内存是分配给谁的呢?
查询一下:
shell /proc/sys/vm/hugetlb_shm_group
27
shell id 27
uid=27(mysql) gid=27(mysql) groups=27(mysql)
hugetlb_shm_group 文件里填的是指定大页内存使用的用户组 id,这里查看到是 MySQL 组 id , 那既然是给 MySQL 的为什么 free 等于 total,并且 mysql 还只有 20 多 G 实际使用内存呢?
原来在 MySQL 中还有专门启用大内存页的参数,在 MySQL 大内存页称为 large page 。
查看 MySQL 配置文件
发现配置文件中确实有 large-page 配置,但出于禁用状态 。
后与业务确认,很早之前确实启用过 mysql 的 large page,不过后面禁用了 。排查到这基本就有了结论 。
结论
这套环境之前开启了 20000 的大内存页,每页大小为 2MB,占用了 40G 内存空间,给 MySQL 使用 , 并且 MySQL 开启了 large page,但后来不使用的时候,只关闭了 MySQL 端的 large page 参数,但没有实际更改主机的关于大内存页的配置 , 所以导致,实际上主机上的还存在 20000 的大内存页,并且没在使用,这一部分长期空闲,并且其他程序不能使用 。
所以 MySQL 在使用 20G 内存左右,整个主机内存就饱和了,然后在部分条件下,就触发了 OOM , 导致 mysqld 被 kill,但主机上又有 mysqld_safe 守护程序,所以又再次给拉起来,就看到了文章初的偶尔连接不上的现象 。
MYSQL怎么更改内存表容量Linux 进程通过 C 标准库中的内存分配函数 malloc 向系统申请内存 , 但是到真正与内核交互之间,其实还隔了一层,即内存分配管理器(memory allocator) 。常见的内存分配器包括:ptmalloc(Glibc)、tcmalloc(Google)、jemalloc(FreeBSD) 。MySQL 默认使用的是 glibc 的 ptmalloc 作为内存分配器 。
内存分配器采用的是内存池的管理方式,处在用户程序层和内核层之间 , 它响应用户的分配请求,向操作系统申请内存,然后将其返回给用户程序 。
为了保持高效的分配,分配器通常会预先向操作系统申请一块内存,当用户程序申请和释放内存的时候,分配器会将这些内存管理起来,并通过一些算法策略来判断是否将其返回给操作系统 。这样做的最大好处就是可以避免用户程序频繁的调用系统来进行内存分配 , 使用户程序在内存使用上更加高效快捷 。
关于 ptmalloc 的内存分配原理,个人也不是非常了解,这里就不班门弄斧了,有兴趣的同学可以去看下华庭的《glibc 内存管理 ptmalloc 源代码分析》【文末链接】 。
关于如何选择这三种内存分配器,网上资料大多都是推荐摒弃 glibc 原生的 ptmalloc,而改用 jemalloc 或者 tcmalloc 作为默认分配器 。因为 ptmalloc 的主要问题其实是内存浪费、内存碎片、以及加锁导致的性能问题,而 jemalloc 与 tcmalloc 对于内存碎片、多线程处理优化的更好 。
目前 jemalloc 应用于 Firefox、FaceBook 等,并且是 MariaDB、Redis、Tengine 默认推荐的内存分配器,而 tcmalloc 则应用于 WebKit、Chrome 等 。
【怎么加大mysql内存 mysql内存不断增加】怎么加大mysql内存的介绍就聊到这里吧,感谢你花时间阅读本站内容,更多关于mysql内存不断增加、怎么加大mysql内存的信息别忘了在本站进行查找喔 。

推荐阅读