TA的每日心情 | 奋斗 2021-4-20 05:43 |
---|
签到天数: 300 天 [LV.8]合体
|
刚喷了一下阿里云; q/ z. x* E e' g
$ O5 m A7 V! h& H4 U& P在GPT4的帮助下,迅速找到了问题根源。" U- v! Y% k0 {7 g$ X l u
6 K) j, f6 y3 l: R1 x; c我的问题是:Ubuntu22.04中,kswap进程启动后,机器就卡死了。swap空间一点没占用。可能是什么问题?
* w5 C: w, a. Q% e7 Y" V2 a: }1 h+ d, L9 W2 q7 R9 _
GPT4的回答是:
% m/ E7 f! d2 Q4 B i1 ?
" ]+ L( N1 v) | _; l/ W在 Linux 系统中,kswapd 是内核线程,它的主要职责是在系统内存压力大的情况下回收(释放)内存,以便给新的进程提供内存空间。它通过将内存中的数据移到 swap 空间(也就是硬盘)来实现这个功能。如果你看到 kswapd 进程占用了大量的 CPU 时间,并且系统变得非常缓慢,那可能是内存压力过大导致的。
5 L6 x# V( h3 k1 J
2 B" ]2 O% x1 ]4 o0 p; {: R然而,你提到 swap 空间没有被占用,这就比较奇怪了。这可能是由于以下几种情况导致的:7 Q% x* `( Y9 }% _" g1 K7 r h% |
2 A( n: K; v+ ~3 e* \* h% G内存泄漏:有一个或多个进程可能在不断地消耗内存,但没有正确地释放它。你可以使用 top 或 htop 命令来检查哪个进程占用了大量的内存。
) x4 G9 D8 C, U# Y) M, p2 D5 _* n* G' b; X
Swap 使用被限制或禁用:在某些情况下,系统可能被配置为尽量不使用 swap 空间。你可以通过 cat /proc/sys/vm/swappiness 命令来查看 swappiness 参数的值。这个值的范围是 0 到 100,数值越大,系统使用 swap 的可能性就越大。如果这个值非常低,你可能需要提高它。* h) i0 E2 q; p: ~: M9 `+ v0 ^
* \/ \: M8 x; S. f, b
错误的内存管理:在某些罕见的情况下,可能是由于内核的错误或硬件问题导致的内存管理问题。在这种情况下,你可能需要升级内核或检查硬件。2 e- |- J* w8 q, S. A1 P
7 R. n9 v0 |) Y0 k, M+ |为了进一步排查问题,你可能需要更详细地监控系统的内存使用情况,并检查相关的系统日志。你也可以尝试使用一些内存管理和优化工具,如 earlyoom 或 nohang,来自动处理低内存情况。如果问题持续存在,你可能需要寻求专业的技术支持。 1 O3 J* ~2 q- D$ d( g+ s0 i
9 F8 \( Y0 g' X1 U' r
我在Google中,后来找到正确关键字,在stackoverflow也找到正确答案:https://askubuntu.com/questions/ ... taking-a-lot-of-cpu3 c6 @% M4 \4 L! T5 n$ e6 n! D$ ?( {
8 X) ?6 E- B G7 O* L
在阿里云中,swappiness数值是0,也就是,永远不要使用swap分区。所以虽然我设置了swap,但是内存根本不会存到swap里,kswapd进程自己都拿不到内存。把最后一个bit的内存榨干后,系统完全当机。9 F6 b, Q# X0 f: F7 \9 |
( _- Z- j8 A" i+ Q: d
我修改这个数值为60后,就没有问题了。swap分区开始工作,ssh也可以连上。
% f" r% F2 F8 \7 ? r
( ]( S5 A) W' a( B* m0 E但是,这个数值在其他Ubuntu系统中都是60,不管是22.04/20.04/18.04,不管是AWS,ServaRICA还是我自己的服务器。阿里云的为什么这么特殊呢?
3 V; M4 j+ d: y2 Z" [; E# {/ e/ J5 l$ {! F' e7 `4 M# R2 X
最后在/etc/sysctl.conf配置文件中,第一行赫然写着 vm.swappiness=0。而在其它系统中,配置文件里都没有这个设定。2 x% s# J/ w( _' P5 n9 t7 K
* V! C0 n6 E, e3 b( ]. [+ n# ?6 e/ x
阿里为啥要改Ubuntu的默认配置?搜索了一下,在Google找到了阿里云的官方指导:https://developer.aliyun.com/article/1151641。页面虽然已经404了,但是Google cache还能看到:在服务器和容器平台建议关闭SWAP,避免内存交换影响服务器性能,甚至引发数据丢失。
2 I3 z7 U, x( J a6 A5 L, x( X: ~9 Z. N. k+ |3 m& w6 T; j0 V
但是,我们知道,不管你内存多大,都要开启swap。毕竟谁也不能保证你的内存是足够大的。自己家里机器随便折腾没事,服务器要24x365在线的。阿里云为什么这么反人类呢?我觉得有一个帖子说的对:“借此让用户购买更大的内存!”
3 T7 c3 x& Y' A9 i' j/ J: v- N7 ^% e: }& Z' S. M& `- y/ Y
喷完了,还要继续搞明白node为啥占这么多内存?我看node的进程数越来越大,貌似在不停的fork。当然也可能是内存泄露,swap分区最终也被占满了。
) l9 v5 @8 E# E$ e! Q, ]1 h/ l, O
9 Y) J' F6 l- s' ^, E. ? |
评分
-
查看全部评分
|