linux 性能调优(redis性能调优)
大家好，今天给各位分享linux 性能调优的一些知识，其中也会对redis性能调优进行解释，文章篇幅可能偏长，如果能碰巧解决你现在面临的问题，别忘了关注本站，现在就马上开始吧！
linux apache 性能调优 8G 8核 的服务器
[检测工具]
为了得到完整的调试结果，建议你采用 ApacheBench或者 httperf之类的软件。如果你对非 LAMP架构的服务器测试有兴趣的话，建议你采用微软的免费软件： Web Application Stress Tool（需要 NT或者 2000）。（其它服务器测试工具）
检测 Apache，采用 top d 1显示所有进程的 CPU和内存情况。另外，还采用 apachectl status命令
[硬件优化]
1、升级硬件的一般规则：对于 PHP脚本而言，主要的瓶颈是 CPU，对于静态页面而言，瓶颈是内存和网络。一台 400 Mhz的普通奔腾机器所下载的静态页面就能让 T3专线（45Mbps）饱和。
2、采用 hdparm来优化磁盘，一般能提升 IDE磁盘读写性能 200%，但是对 SCSI硬盘也有效果。（不同类型的硬盘对比）
[策略优化]
3、Apache处理 PHP脚本的速度要比静态页面慢 2-10倍，因此尽量采用多的静态页面，少的脚本。
4、PHP脚本如果不做缓冲，每次调用都需要编译，因此，安装一个 PHP缓冲产品能提升 25-100%的性能。
5、如果你采用了 Linux系统，建议升级内核到 2.4，因为静态页面由内核服务。
6、另外一项缓冲技术是把不常修改的 PHP页面采用 HTML缓冲输出。
7、不要在 Web服务器上运行 X-Windows，关掉没有必要运行的进程。
8、如果能够用文本就不要用图像，尽量减小图片的尺寸。
9、分散负载，把数据库服务器放到另外的机器上去。采用另外低端的机器服务图片和 HTML页面，如果所有的静态页面在另外一台服务器上处理，可以设置 httpd.conf中的 KeepAlives为 off，来减少断开连接的时间。
10、以上所有的方法都是针对单机而言的，如果你觉得系统还是不够快，可以采用集群，负载均衡，缓冲技术。采用 Squid作为缓冲，配置 Squid的方法。
[编译优化]
11、把基于文件的会话切换到基于共享内存的会话。编译 PHP时采用--with-mm选项，在 php.ini中设置 set session.save_handler=mm。这个简单的修改能让会话管理时间缩短一半。
12、采用最新版本的 Apache，并把 PHP编译其中，或者采用 DSO模式，不要采用 CGI方式。
13、编译 PHP时，建议采用如下的参数：
--enable-inline-optimization--disable-debug
[配置优化]
14、修改 httpd.conf：
#关闭 DNS lookups，PHP脚本只拿 IP地址
HostnameLookups off
15、如果网络拥挤，CPU资源不够用，采用 PHP的 HTML压缩功能：
output_handler= ob_gzhandler
PHP 4.0.4的用户请不要使用，因为存在内存泄漏问题。
16、修改 httpd.conf中的 SendBufferSize为你最大的页面文件的大小。加大内核的 TCP/IP写缓冲大小。
17、采用数据库的持久连接时，不要把 MaxRequestsPerChild设置得太大。
[第三方软件优化]
18、如果喜欢从修改 Apache源码入手，可以安装 lingerd。在页面产生和发送后，每个 Apache进程都会浪费一段时光在客户连接上，Lingerd能接管这项工作，让 Apache迅速服务下一个客户请求。
19、如果你足够勇敢的话，还可以采用 Silicon Graphics的 Accelerated Apache补丁。这个工程能使 Apache 1.3快 10倍，使 Apache 2.0快 4倍。
安装一个 PHP缓冲产品能提升 25-100%的性能。
[Linux系统优化]
1.清理服务器磁盘碎片：
不论Linux文件系统采用什么文件格式（ext3、JFS、XFS、ReiserFS）、何种类型的硬盘(IDE、SCSI)，随着时间的推移文件系统都会趋向于碎片化。ext3、JFS等高级文件系统可以减少文件系统的碎片化，但是并没有消除。在繁忙的数据库服务器中，随着时间的过去，文件碎片化将降低硬盘性能，硬盘性能从硬盘读出或写入数据时才能注意到。时间长了会发现每个磁盘上确实积累了非常多的垃圾文件，释放磁盘空间可以帮助系统更好地工作。Linux最好的整理磁盘碎片的方法是做一个完全的备份，重新格式化分区，然后从备份恢复文件。但是对于7×24小时工作关键任务服务器来说是比较困难的。Kleandisk是一个高效的磁盘清理工具，它能把磁盘上的文件分成不同的"组",比如把所有的"core"文件归成一组（Group），这样要删除所有core文件时只要删除这个组就行了。core文件是当软件运行出错时产生的文件，它对于软件开发人员比较有用，对于其他用户（比如电子邮件服务器）却没有任何意义。因此，如果没有软件开发的需要，见到core文件就可以将其删除。
2、开启硬盘DMA
现在使用的IDE硬盘基本支持DMA66/100/133（直接内存读取）但是Linux发行版本安装后一般没有打开，可以/etc/rc.d/rc.local最後面加上一行：/sbin/hdparm-d1–x66-c3-m16/dev/hda这样以后每次开机，硬盘的 DMA就会开启，不必每次手动设定。添加前后你可以使用命令：hdparm-Tt/dev/hda来测试对比一下。
3、调整缓冲区刷新参数
Linux内核中，包含了一些对于系统运行态的可设置参数。缓冲刷新的参数可以通过调整/proc/sys/vm/bdflush文件来完成，这个文件的格式是这样的：
每一栏是一个参数，其中最重要的是前面几个参数。第一个数字是在"dirty"缓冲区达到多少的时候强制唤醒bdflush进程刷新硬盘，第二个数字是每次让bdflush进程刷新多少个dirty块。所谓dirty块是必须写到磁盘中的缓存块。接下来的参数是每次允许bd flush将多少个内存块排入空闲的缓冲块列表。以上值为RHEL 4.0中的缺省值。可以使用两种方法修改：
（1）使用命令
# echo"100 128 128 512 5000 3000 60 0 0">/proc/sys/vm/bdflush
并将这条命令加到/etc/rc.d/rc.local文件中去。
（2）在/etc/sysctl.conf文件中加入如下行:
以上的设置加大了缓冲区大小，降低了bdflush被启动的频度，VFS的缓冲刷新机制是Linux文件系统高效的原因之一。
4、优化输入输出
I/O程序对Linux系统性能也是相当重要的，网络硬件I/O对服务器尤其重要。现在大多数Linux服务器使用10/100 Mb以太网。如果有较重的网络负载，则可以考虑千兆以太网卡。如果没有能力购买千兆网卡的话：可以使用多块网卡虚拟成为一块网卡，具有相同的IP地址。这项技术，在Linux中，这种技术称为Bonding。Bonding在Linux2.4以上内核中已经包含了，只需要在编译的时候把网络设备选项中的 Bonding driver support选中见图1。当然利用Bonding技术配置双网卡绑定的前提条件是两块网卡芯片组型号相同，并且都具备独立的BIOS芯片。
然后，重新编译核心，重新起动计算机，执行如下命令：
现在两块网卡已经象一块一样工作了。这样可以提高集群节点间的数据传输.bonding对于服务器来是个比较好的选择,在没有千兆网卡时,用两块100兆网卡作bonding,可大大提高服务器到交换机之间的带宽.但是需要在交换机上设置连接bonding网卡的两个子口映射为同一个虚拟接口。编辑/etc/modules.conf文件，加入如下内容，以使系统在启动时加载Bonding模块。
“mode”的值表示工作模式，共有0、1、2和3四种模式，这里设定为0。Bonding工作在负载均衡（Load Balancing(round-robin)）方式下，即两块网卡同时工作，这时理论上Bonding能提供两倍的带宽。Bonding运行在网卡的混杂（Promisc）模式下，而且它将两块网卡的MAC地址修改为一样的。混杂模式就是网卡不再只接收目的硬件地址是自身MAC地址的数据帧，而是可以接收网络上所有的帧。
5、减少虚拟终端机的数量。
Linux安装后系统默认是6个虚拟终端机，也就是 CTRL+ALT F1～F6那六个，作为服务器使用可以关掉其中四个，只留下 CTRL+ALT F1～F2，大约省下 4 Mbytes的内存，但是这样一来，X-Window会从原来的 CTRL+ALT F7变成 CTRL+ALT F3。修改/etc/inittab中，将 mingetty 3～6全部加上#字号。
6.关闭一些不用的服务
Linux服务器在启动时需要启动很多系统服务，它们向本地和网络用户提供了Linux的系统功能接口，直接面向应用程序和用户。提供这些服务的程序是由运行在后台的守护进程（daemons）来执行的。守护进程是生存期长的一种进程。它们独立于控制终端并且周期性的执行某种任务或等待处理某些发生的事件。他们常常在系统引导装入时启动，在系统关闭时终止。linux系统有很多守护进程，大多数服务器都是用守护进程实现的。如Web服务http等。同时，守护进程完成许多系统任务，比如，作业规划进程crond、打印进程lqd等。
Linux 性能调优之存储设备调优
在探讨Linux性能调优与存储设备优化时，关键在于理解和应用高效的技术，以提升系统整体性能。固态硬盘的引入，标志着存储技术的革新，其优势在于访问时间统一、体积更小、更轻便和更节能。然而，固态硬盘成本较高，且写入次数有限，这是其局限性。
选择合适的IO调度器是提高性能的关键步骤。Linux在RHEL8中引入了多队列I/O调度器，取代了以往的单队列调度器。针对不同的应用场景，存在多种调度器，包括但不限于Noop、Deadline/mq-deadline、CFQ、BFQ和Kyber。其中，Noop算法简单高效，适用于那些希望保持IO请求顺序的应用；Deadline算法确保在指定时间内完成请求，适用于需要响应时间保证的应用；CFQ算法在多任务环境提供公平资源分配；BFQ算法提供更精确的资源分配，适合对响应时间要求高的应用；Kyber算法在某些情况下能发挥更好的性能。
模拟真实工作负载是测试存储系统性能的有效手段。通过fio工具，可以实现各种工作负载的模拟，包括顺序读写、随机读写等，帮助用户了解不同场景下的性能表现。
磁盘阵列技术是提升存储性能和数据可靠性的重要手段。RAID（Redundant Array of Independent Disks）通过将数据分割、复制或添加校验信息到多个磁盘，实现了性能提升和容错能力。RAID级别的选择（如RAID 0、RAID 1、RAID 4、RAID 5、RAID 6和RAID 10）取决于对性能、容量和数据保护的需求。
mdadm工具用于创建和管理Linux软RAID。在创建RAID后，格式化文件系统时应确保与RAID数据块保持一致，以优化性能。理解块大小、磁盘数量和奇偶校验磁盘数量对正确配置RAID至关重要。
通过逻辑卷配置RAID级别的逻辑卷，RHEL8支持RAID0、1、4、5、6和10。创建RAID0级别的逻辑卷，可以实现更高的性能，但无数据冗余。
在调优过程中，IO分析工具如top、iostat、iotop、Blktrace和pcp-system-tools等不可或缺。这些工具能够提供实时和历史性能数据，帮助识别性能瓶颈并进行优化。
总之，性能调优涉及多个层面，从选择合适的IO调度器，到合理配置磁盘阵列和逻辑卷，再到使用专业的工具进行性能监控和分析，每一步都至关重要。通过深入理解这些技术，用户可以显著提升Linux系统的存储性能和整体效率。
Linux 性能调优之资源限制(ulimit&Cgroup)
在Linux系统中，资源调优是一项关键任务，以确保系统的稳定性和性能。主要通过两种方式实现：Cgroups和ulimit。Cgroups是控制组，它是内核级别的一种机制，用于细粒度地管理和限制进程对系统资源的使用，如CPU时间、内存、网络带宽等。ulimit则是用户级别的资源限制工具，常用于shell会话中，通过PAM（Pluggable Authentication Modules）模块在登录时设置，如限制登录次数、核心文件大小和最大打开文件数等。
ulimit命令用于调整shell和其子进程的资源限制，它支持软限制和硬限制。软限制是警告阈值，超过后会发出警告，但允许登录，而硬限制则是严格的限制，一旦达到，会阻止登录。例如，可以限制一个用户的最大登录次数，防止滥用系统资源。
Cgroups通过systemd进行管理，可以按单元文件（service unit）或者drop-in配置文件来设置资源限制。通过创建独立的slice，可以为特定服务提供隔离的资源控制。systemd的system.slice默认控制所有未指定slice的服务，而drop-in配置文件允许覆盖或添加额外的限制，如kubelet服务的CPU和内存使用。
Linux内核的Cgroup功能是现代容器技术的基础，它允许管理员灵活地分配和监控资源，如在Docker容器中通过-cpuset-cpus和-m选项来限制CPU和内存。Cgroups不仅解决了传统niceness值调节的不足，还提供了进程级别的资源管理，提高了整体系统的效率。
总结来说，Linux性能调优通过Cgroups和ulimit这两种方法，实现了对系统资源的有效管理和优化，确保了系统的稳定性和用户体验。理解并合理配置这些工具，是提高Linux系统性能的关键。
