MongoDB 生产环境笔记

  • 时间:
  • 浏览:0
  • 来源:5分快乐8_5分快乐8官网

echo "net.ipv4.tcp_keepalive_time = 500" >> /etc/sysctl.conf

sysctl -p

八、同步时间

是因为着他们都他们都部署的是副本集群,他们都他们都必须配置脚本,让这几台节点的的时间同步。

MongoDB 必须使用 glibc 库,最好版本大约是 2.13 上。

Mongodb 官网建议将该值设置为 500 。

CentOS 6

/etc/init.d/disable-transparent-hugepages start

配置 tuned 和 ktune

tuned和ktune是Red Hat和CentOS上可用的动态内核调优工具,都可不可以禁用 THP 。

cat <>/usr/lib/systemd/system/mongodb.service

[Unit]

Description= mongodb service manager

[Service]

脚本禁用 THP

创建 init.d 脚本 /etc/init.d/disable-transparent-hugepages

cat /sys/kernel/mm/transparent_hugepage/enabled

cat /sys/kernel/mm/transparent_hugepage/defrag

必须配置的点有:

sysctl -w vm.swappiness=1

-f (file size): unlimited

-t (cpu time): unlimited

-v (virtual memory): unlimited [1]

-l (locked-in-memory size): unlimited

-n (open files): 65000

-m (memory size): unlimited [1] [2]

-u (processes/threads): 65000

他们都他们都都可不可以直接更改用户的默认配置,也都可不可以通过配置 systemd 服务,并参数写入 Service。

查看系统的默认值:

LimitMEMLOCK=infinity

sysctl net.ipv4.tcp_keepalive_time

生效配置

WARNING: soft rlimits too low. rlimits set to 4096 processes, 65535 files. Number of processes should be at least 32767.5 : 0.5 times number of files.

官网的推荐配置是:

在官方文档中最后一行写到: THP is not recommended for database workloads. 也什么都 THP 不适用于在数据库上。是因为着数据库是不连续的内存访问模式,他们都他们都必须禁用THP以确保使用MongoDB获得最佳性能。

完整版的有关 Huge Pages 和Transparent Huge Pages的介绍见 :文章

五、禁用 Transparent Huge Pages (THP)

在启动的前一天他们都他们都都可不可以看后类似于的日志:

vm.zone_reclaim_mode

打上去swap分区

设置 swappiness 参数

内核和文件系统版本

禁用 Transparent Huge Pages (THP)

ulimit 设置

tcp_keepalive_time

同步时间

一、vm.zone_reclaim_mode 参数

设置内核参数 vm.zone_reclaim_mode ,该参数是设置当有2个 内存区域的内存耗尽的前一天,是从内部内部结构回收,还是去下有2个 内存区域寻找,0为去下有2个 区域寻找,非0表示当前区域回收。

MongoDB 生产环境笔记

一、vm.zone_reclaim_mode 参数

二、打上去 swap 分区

三、设置 swappiness 参数

四、内核和文件系统版本

五、禁用 Transparent Huge Pages (THP)

六、ulimit 设置

七、tcp_keepalive_time

八、同步时间

MongoDB 生产环境笔记

在生产环境中,他们都他们都配置MongoDB必须注意点有什么都,而必须一安装就都可不可以使用。他们都他们都必须配置什么都内核和系统参数。是因为着那此参数是会影响到他们都他们都 MongoDB 的性能的。

是因为着你的MongoDB 实例所在的服务器还有其它业务和应用,没人 修改下面的参数必须注意是否会影响其它应用的性能和运行状况。

LimitAS=infinity

MongoDB 生产环境笔记

目录

cat "vm.swappiness = 1" >> /etc/sysctl.conf

sysctl -p

esac

chmod 755 /etc/init.d/disable-transparent-hugepages # 设置具有可执行权限

chkconfig --add disable-transparent-hugepages # 设置开机自启

中间的配置必须重启主机并能生效。

三、设置 swappiness 参数

在 Linux 系统中,都可不可以通过查看 /proc/sys/vm/swappiness 内容的值来选折 系统对 SWAP 分区的使用原则。当swappiness 内容的值为 0 时,表示最大限度地使用物理内存,物理内存使用完毕后,才会使用 SWAP 分区。当swappiness 内容的值为 5000 时,表示积极地使用 SWAP 分区,倘若把内存中的数据及时地置换到 SWAP 分区。

默认值为 0,表示必须在物理内存使用完毕后才会使用 SWAP 分区,

THP hides much of the complexity in using huge pages from system administrators and developers. As the goal of THP is improving performance, its developers (both from the community and Red Hat) have tested and optimized THP across a wide range of systems, configurations, applications, and workloads. This allows the default settings of THP to improve the performance of most system configurations. However, THP is not recommended for database workloads.

LimitCPU=infinity

mkdir /etc/tuned/no-thp

cat << EOF >>/etc/tuned/no-thp/tuned.conf

[main]

include=virtual-guest

sysctl -w vm.zone_reclaim_mode=0

sysctl -a |grep vm.zone_reclaim_mode

二、打上去 swap 分区

是因为着内存空间必须没人 丰富句子,他们都他们都都可不可以为系统配置 swap 分区。具体配置见文章 linux系统打上去swap(虚拟内存)分区。

Huge pages can be difficult to manage manually, and often require significant changes to code in order to be used effectively. As such, Red Hat Enterprise Linux 6 also implemented the use of transparent huge pages(THP). THP is an abstraction layer that automates most aspects of creating, managing, and using huge pages.

[vm]

transparent_hugepages=never

EOF

tuned-adm profile no-thp

测试修改是否生效

2019-04-12T10:11:26.665+05000 I CONTROL [initandlisten] ** WARNING: /sys/kernel/mm/transparent_hugepage/enabled is 'always'.

2019-04-12T10:11:26.665+05000 I CONTROL [initandlisten] ** We suggest setting it to 'never'

2019-04-12T10:11:26.665+05000 I CONTROL [initandlisten]

2019-04-12T10:11:26.665+05000 I CONTROL [initandlisten] ** WARNING: /sys/kernel/mm/transparent_hugepage/defrag is 'always'.

2019-04-12T10:11:26.665+05000 I CONTROL [initandlisten] ** We suggest setting it to 'never'

中间的警告什么都 是因为着他们都他们都必须设置 /sys/kernel/mm/transparent_hugepage/defrag 和/sys/kernel/mm/transparent_hugepage/enabled 有2个 参数设置为 never ,中间参数的设置什么都 代表着 Transparent Huge Pages(THP), 在了解 THP 前,他们都他们都必须先了解下 Huge Pages(标准页),Huge Pages是从Linux Kernel 2.6后被引入的。目的是使用更大的内存页面(memory page size) 以适应没人 大的系统内存,让操作系统都可不可以支持现代硬件架构的大页面容量功能。而THP(Transparent Huge Pages) 是从RHEL6 始于引入的有2个 功能,THP 是有2个 抽象层, 都可不可以自动创建、管理和使用传统大页的大多数方面。

要在 tuned和ktune 中禁用 THP, 必须他们都他们都将配置文件的THP值设置为 never,倘若 tuned 是因为着 ktune 会更改他们都他们都设置的值。

sysctl -a |grep vm.swappiness

四、内核和文件系统版本

在 Linux 系统上运行 MongoDB ,他们都他们都建议使用 Linux内核版本2.6.36是因为着更高版本,使用 XFS 是因为着是 EXT4 文件系统,强烈建议使用 XFS 文件系统。是因为着 EXT4 和 WiredTiger 同时使用会有是因为着冒出性能问提。

echo "vm.zone_reclaim_mode = 0" >> /etc/sysctl.conf

sysctl -p

LimitFSIZE=infinity

LimitNPROC=65000

Type=forking

User=mongodb

Group=mongodb

PIDFile=/opt/mongodb/logs/mongod.pid

ExecStart= /opt/mongodb/bin/mongod -f /opt/mongodb/mongodb.conf

ExecStop= /opt/mongodb/bin/mongod --shutdown --dbpath /opt/mongodb/data

Restart=always

[Install]

WantedBy=multi-user.target

EOF

七、tcp_keepalive_time

该参数用于 TCP 发送 keepalive 探测消息的间隔时间(秒),用于确认 TCP 连接是否有效。

对于 WiredTiger 储存引擎,在压力比较大的状况下,WiredTiger 会将数据放置在 swap 分区里。

systemctl -w net.ipv4.tcp_keepalive_time=500

永久更改,

cp -r /etc/tune-profiles/default /etc/tune-profiles/no-thp

echo "set_transparent_hugepages never" >>/etc/tune-profiles/no-thp/ktune.sh

tuned-adm profile no-thp

CentOS 7

查看 Transparent Huge Pages 状况

cat /sys/kernel/mm/transparent_hugepage/enabled

[always] madvise never

cat /sys/kernel/mm/transparent_hugepage/defrag

[always] madvise never

生效配置:

always madvise [never]

六、ulimit 设置

通常系统默认给用户的最大进程运行运行数和最大都可不可以打开的文件数是比较低的,什么都在启动 MongoDB 的前一天他们都他们都会看后以下警告。

作者:理想三旬

    

出处:https://www.cnblogs.com/operationhome/

case $1 in

start)

cat /proc/sys/net/ipv4/tcp_keepalive_time

临时更改

官方文档链接:https://docs.mongodb.com/manual/administration/production-notes/

LimitNOFILE=65000

是因为着他们都他们都运行的主机系统 RHEL / CentOS 的内核版本在 2.6.32-5003 及以上,他们都他们都都可不可以把该值设置为 1。

When RHEL 7 / CentOS 7 run in a virtual environment, the tuned tool automatically invokes a performance profile derived from performance throughput, which automatically sets the readahead settings to 4MB. This can negatively impact performance.