Linux优化

时间:2021-6-12 作者:qvyue

Linux配置优化

引用来源:黑马大数据

  • 1 Swappiness虚拟内存swappiness是Linux的一个内核参数,控制系统在使用swap虚拟内存时,内存使用的相对权重。swappiness参数值可设置范围在0到100之间。此参数值越低,就会让Linux系统尽量少用swap虚拟内存分区,多用内存;参数值越高就是反过来,使内核更多的去使用swap空间。推荐设置为10
根据服务器硬件配置会有变化
临时生效:sysctl-wvm.swappiness=10
永久生效:echo"vm.swappiness=10">>/etc/sysctl.conf
  • 2关闭内存动态分配(内存页透明化)
    自CentOS6版本开始引入了TransparentHugePages(THP透明的巨大的页面),从CentOS7版本开始,该特性默认就会启用。TransparentHugePages是在运行时动态分配内存的,而标准的HugePages是在系统启动时预先分配内存,并在系统运行时不再改变。因为TransparentHugePages是在运行时动态分配内存的,所以会带来在运行时内存分配延误。因此,尽管THP的本意是为提升内存的性能,不过某些数据库厂商还是建议直接关闭THP(比如说Cloudera、ORACLE、MariaDB、MongoDB等),否则可能会导致性能出现下降。
临时生效:echonever>/sys/kernel/mm/transparent_hugepage/defragechonever>/sys/kernel/mm/transparent_hugepage/enabled
永久生效:echo"echonever>/sys/kernel/mm/transparent_hugepage/defrag">>/etc/rc.localecho"echonever>/sys/kernel/mm/transparent_hugepage/enabled">>/etc/rc.local
  • 3 最大文件句柄
    MaximumFileHandles,大数据服务可能会打开非常大量的文件句柄。通过编辑/etc/security/limits.conf来增加限制,添加类似的内容:
*hardnofile50000
*softnofile50000

第一行是指定用户,前面的*代表所有用户。

  • 4最大派生进程数
    MaximumForkedProcesses,配置允许生成大量的线程。要增加Linux允许的数量,编辑/etc/security/limits.conf
*hardnproc10000
*softnproc10000

发行版Linux可能需要通过添加来编辑
/etc/security/limits.d/20-nproc.conf

*softnproc10000
  • 5 TCPSocket端口数

增加可用的TCP套接字端口数(IncreasethenumberofTCPsocketportsavailable),如果你的流程会在很短的时间内创建并拆除大量socket,这一点尤为重要。

sudosysctl-wnet.ipv4.ip_local_port_range="1000065000"
  • 6 缩减Socket闲置时间

socket连接闲置太长时间会影响并发量,设置socket在保持TIMED_WAIT状态的时间,能够快速创建和销毁新socket。

sudo sysctl-wnet.ipv4.netfilter.ip_conntrack_tcp_timeout_time_wait="1"

  • 7 提高IO性能
    默认的方式下linux会把文件访问的时间atime做记录,文件系统在文件被访问、创建、修改等的时候记录下了文件的一些时间戳,比如:文件创建时间、最近一次修改时间和最近一次访问时间;这在绝大部分的场合都是没有必要的。因为系统运行的时候要访问大量文件,如果能减少一些动作(比如减少时间戳的记录次数等)将会显著提高磁盘IO的效率、提升文件系统的性能。北京市昌平区建材城西路金燕龙办公楼一层电话:400-618-9090如果遇到机器IO负载高或是CPUWAIT高的情况,可以尝试使用noatime和nodiratime禁止记录最近一次访问时间戳。你会发现吞吐量有惊人的提高。比如我要在根文件系统使用noatime,可以编辑/etc/fstab文件,如下:
/dev/mapper/centos-root/ 
 xfsdefaults,noatime   0   0   UUID=47f23406-2cda-4601-93b6-09030b30e2dd/boot 
   xfs     defaults00/dev/mapper/centos-swap 
  swap   swap   defaults   0  0 
  • 8 时间同步

安装ntp软件:sudoyum-yinstallntp
同步时间:ntpdatetime.nist.gov
查看当前服务器时间:date

alter table COLUMNS_V2 modify column COMMENT varchar(256) character set utf8;
alter table TABLE_PARAMS modify column PARAM_VALUE varchar(4000) character set utf8;
alter table PARTITION_PARAMS modify column PARAM_VALUE varchar(4000) character set utf8;
alter table PARTITION_KEYS modify column PKEY_COMMENT varchar(4000) character set utf8;
alter table INDEX_PARAMS modify column PARAM_VALUE varchar(4000) character set utf8;

声明:本文内容由互联网用户自发贡献自行上传,本网站不拥有所有权,未作人工编辑处理,也不承担相关法律责任。如果您发现有涉嫌版权的内容,欢迎发送邮件至:qvyue@qq.com 进行举报,并提供相关证据,工作人员会在5个工作日内联系你,一经查实,本站将立刻删除涉嫌侵权内容。