内存大就不会卡吗
内存大就不会卡吗
卡了先加内存,是很多人的第一反应。它便宜、好加、心理上立刻有交代。可是加完没变快的例子,比加完变快的多得多。
内存干的是缓冲的活
它让热数据留在内存里,不用每次都去磁盘上取。这个动作能砍掉等待,但砍不掉计算。一条慢查询、一次锁等待、一段死循环,给多少内存都不会变快。
把内存理解成仓库比较准确。仓库大,取货快,但加工还是在那条产线上。产线慢了,仓库再大也只是堆得更多。
卡顿的几种来源
单核打满、磁盘 IOPS 到顶、数据库锁等待、连接数或者文件句柄耗尽、垃圾回收停顿、网络重传。这六项里,直接跟内存有关的只有垃圾回收停顿一项,其余各有各的解法。
它们的表现都是"打开慢",用户的描述一模一样,排查路径完全不同。凭感觉加内存,命中率大概只有六分之一。
内存不够的时候会发生什么
先动 swap。系统把不常用的页写到盘上,需要时再读回来,延迟从内存的纳秒级变成磁盘的毫秒级。业务不会立刻断,只是每隔一阵子卡一下,很难抓到规律。
再往后是 OOM killer 出手,挑一个占内存最多的进程杀掉,通常正好是你的数据库。这个过程常常没有明显告警,因为内存曲线看着是平的,数据已经被换出去了。
容器里的内存是另一套账
容器跑在宿主机上,limit 设多少,里面的进程就只能用多少,超了直接被杀,不走 swap。Java 这类按物理内存推断堆大小的运行时,在容器里容易猜大,要显式把堆上限写死。
宿主机内存被超卖的时候,容器之间的争抢在容器内部完全看不出来,只能去看宿主机的指标。这一层遮蔽,让排障多绕一道弯。
大内存的三个副作用
一是掩盖泄漏。程序有泄漏,内存从 8G 加到 32G,出事时间大约从三天推到两周,问题还在,只是你更晚发现。二是拖长回收停顿,堆越大,一次完整回收要扫的对象越多,停顿从几十毫秒变成几百毫秒。
三是让快照和迁移变慢。内存大的实例做快照要写更多数据,热迁移要传更多页,维护窗口跟着变长。这几项都不体现在配置表上。
内存便宜的时候,人容易用"加内存"代替"找原因"。这个习惯不花钱,代价是把问题往后推了半年,推到你最忙的那个季度。
看内存要看三个数
看 available,不看 free。Linux 会把空闲内存拿去做缓存,free 低是正常的,available 才是真能用的量。available 长期低于一成,才算紧张。
看 swap 的换入换出速率。有 swap 在用不一定是问题,持续地换进换出才是,那说明内存真的不够,磁盘被迫当内存用,延迟立刻上一个量级。再看 dmesg 里有没有 OOM killer 的记录,有的话已经发生过了。
buff/cache 占用高不是坏事,那是系统拿闲置内存在做加速。真正要看的是它能不能被及时回收,以及回收的时候有没有连带触发换页。
价格说明内存不是成本大头
宿迁高防物理机 的档位很能说明问题:32G 那档 799 起,64G 那档 899 起,内存翻倍,价差只有一百。128G 那档 1299 起,256G 的铂金 8260 才到 2099 起。
这说明整机的成本主要在 CPU、带宽和防护上。云主机也一样,香港 CN2 云服务器 四核四 G 36 起、八核八 G 54 起,差的那点钱不足以解释性能差距。为内存纠结,方向通常错了。
什么时候加内存真有用
数据集能装进内存、缓存命中率一直上不去、swap 持续繁忙、连接数很高导致每条连接的缓冲区把内存吃满。这四种情况加内存有立竿见影的效果,尤其是把整个索引装进内存的数据库。
判断方法是算一下工作集大小:热数据一共多少 G,加上系统和其他进程的占用,留两成余量。算出来比现有内存大,就该加;算出来只用了六成,加它干什么。
加完记得同步调大缓冲池和缓存上限,不然新加的那部分会一直空着,白买。
什么时候加内存没用
慢查询、全表扫描、缺索引、磁盘 IOPS 打满、行锁等待、单核跑满、外部接口超时。这些场景加内存,指标会好看一点,用户的感受一点没变。
我遇到过的典型是:接口很慢、内存只用了一半、磁盘 util 常年九成。加内存没用,换盘或者拆查询才有用。当时的预算如果花在盘上,问题当场就解决了。现在的排查顺序我改成先看 iowait,再看慢日志,最后才看内存用量。
内存和并发怎么换算
每条连接的常驻开销 = 应用层对象 + 栈 + 网络缓冲区。反向代理类服务每条连接的开销很小,几 KB 到几十 KB;应用进程按进程算,常见范围是几十兆到上百兆,取决于框架装了多少东西。
拿"单进程内存 × 最大并发进程数"估一遍,再加上数据库连接池和缓存,就是这台机器的内存下限。估出来超过现有配置一半,就得往上留余量,别卡着线跑。
虚拟内存和缓存也要算
数据库的缓冲池、操作系统的页缓存、应用的本地缓存,这三块会互相抢。缓冲池开太大,页缓存就小,磁盘读变多;本地缓存开太大,进程一重启全丢,还会把内存打满。
宁波高防套餐 那种按档位卖的方案,好处是每一档的内存和带宽是配好的,不用自己反复试。省事,代价是不够精细,适合负载稳定的站。
预算只有一份,买盘还是买内存
先看 iowait。磁盘 util 常年九成、iowait 明显,钱花在 SSD 上;换页频繁、缓存命中率一直低,钱花在内存上。两个指标都难看的时候,先解决那个导致超时的。
西安云服务器 35 起那档适合先把业务跑起来,跑一段时间看监控再决定往哪加,比照着参数表猜要准。
一句判断
内存解决"数据在哪",CPU 解决"算得多快",磁盘解决"取得多快"。用户说的卡,八成是后两个。你的机器上一次卡的时候,CPU 和磁盘那两个数字是多少?