收藏本站 | RSS订阅大数据运维|云计算|攻防安全|AI|互联网时代守护先锋
你现在的位置:首页 » Hadoop » 正文
04月08日

基于hadoop集群中的linux内核优化

作者 : Petter | 分类 : Hadoop | 超过 1479 人围观 | 已有 0 人发表了看法

1、禁用swap
cat /etc/sysctl.conf
vm.swappiness = 0
sysctl -p 生效
swapoff -a 永久关闭swap
swapon -a 永久开启swap
默认值30,值越大用到swap概率就增加。虚拟机内存大于2G的默认建议配置5或更低。

2、内核优化

SRE实战,互联网时代守护先锋!让网站飞一会, 阿里云优惠促销大全。
cat < /etc/sysctl.conf
net.ipv6.conf.all.disable_ipv6 = 1
net.ipv6.conf.default.disable_ipv6 = 1
net.ipv6.conf.lo.disable_ipv6 = 1
vm.swappiness = 0
net.ipv4.neigh.default.gc_stale_time = 120
net.ipv4.conf.all.rp_filter = 0
net.ipv4.conf.default.rp_filter = 0
net.ipv4.conf.default.arp_announce = 2
net.ipv4.conf.lo.arp_announce = 2
net.ipv4.conf.all.arp_announce = 2
net.ipv4.tcp_max_tw_buckets = 5000
net.ipv4.tcp_syncookies = 1
net.ipv4.tcp_max_syn_backlog = 1024
net.ipv4.tcp_synack_retries = 2
net.ipv4.tcp_rmem = 8192 262144 4096000
net.ipv4.tcp_wmem = 4096 262144 4096000
net.ipv4.tcp_max_orphans = 300000
net.ipv4.tcp_tw_reuse = 1
net.ipv4.tcp_tw_recycle = 1
net.ipv4.ip_local_port_range = 1025 65535
net.ipv4.tcp_max_syn_backlog = 100000
net.ipv4.tcp_fin_timeout = 30
net.ipv4.tcp.keepalive_time = 1200
net.ipv4.tcp_max_tw_buckets = 5000
net.ipv4.netfilter.ip_conntrack_tcp_timeout_established = 1500
kernel.msgmnb = 65536
kernel.msgmax = 65536
kernel.sysrq = 1
net.ipv4.icmp_echo_ignore_all = 0
net.ipv4.tcp_max_orphans = 3276800
fs.file-max = 800000
net.core.somaxconn=32768
net.core.rmem_default = 12697600
net.core.wmem_default = 12697600
net.core.rmem_max = 873800000
net.core.wmem_max = 655360000
EOF

sysctl -p 生效


上一篇:Flask入门第二天 下一篇:mongodb安装步骤和索引创建方法
640*60广告位

额 本文暂时没人评论 来添加一个吧

发表评论

必填

选填

选填

◎欢迎参与讨论,请在这里发表您的看法、交流您的观点。

广告赞助
  • 点击查看详情