RHCA rh442 004 加载模块 ulimit cgroup

模块调优

lsmod 可以看到内核加载的模块

[root@servera ~]# lsmod | grep usb

[root@servera ~]# modprobe usb_storage

[root@servera ~]# lsmod | grep usb

usb_storage            73728  0

[root@servera ~]#

模块名大小加载次数

手动加载出来显示是0 这个模块不是按需加载出来的

当我插入u盘时，他会自动加载这个模块

[root@servera kernel]# modinfo e1000

parm:           TxDescriptors:Number of transmit descriptors (array of int)

parm:           RxDescriptors:Number of receive descriptors (array of int)

parm为参数

查看e1000模块

modinfo st

只有加载模块后，模块文件夹才会出现

[root@servera drivers]# ls

[root@servera drivers]# pwd

/sys/bus/scsi/drivers

[root@servera drivers]# cd

[root@servera ~]# modprobe st

[root@servera ~]# cd -

/sys/bus/scsi/drivers

[root@servera drivers]# ls

st

[root@servera drivers]#

[root@servera drivers]# modprobe -r st

[root@servera drivers]# ls

[root@servera drivers]#

如何改变模块参数呢

这里的参数得去/etc里面改

[root@servera drivers]# modprobe  st

[root@servera drivers]# ls

st

[root@servera drivers]# cd st/

[root@servera st]# ls

bind  debug_flag  fixed_buffer_size  max_sg_segs  module  try_direct_io  uevent  unbind  version

[root@servera st]# cat fixed_buffer_size

32768

[root@servera st]#

改默认st参数

[root@servera st]# cat /etc/modprobe.d/st.conf

options st buffer_kbs=128

修改配置文件后重新加载模块

[root@servera drivers]# cat st/fixed_buffer_size

131072

参数buffer缓存被因我们设置变大

[root@servera drivers]# pwd

/sys/bus/scsi/drivers

[root@servera st]#

这个模块配置文件，在红帽8里写错了，还是默认值，不会用你错误的输入

加载模块时，会去modprobe.d下面读文件

模块都是按需加载

st为scsi磁带机驱动，你没有这个需求，自然模块也不加载

有设备模块自动加载

看模块会不会被设置成开机自动加载

[root@servera ~]# cd /etc/sysconfig/modules/

[root@servera modules]# cat st.modules

#!/bin/bash

modprobe st

[root@servera modules]# chmod u+x st.modules

[root@servera modules]# lsmod | grep st

st                     65536  0

usb_storage            73728  0

[root@servera modules]# modprobe -r st

[root@servera modules]# lsmod | grep st

usb_storage            73728  0

[root@servera modules]# reboot

手动加载，是加载到内存，关机就失效

开机时，会读到modules下面的文件，将模块加载，加载使去到/etc/modprobe.d/下面读模块配置文件

[root@servera drivers]# pwd

/lib/modules/4.18.0-80.el8.x86_64/kernel/drivers

[root@servera drivers]# ls

acpi       cpufreq   firmware  iio         media     net      pinctrl   rtc      uwb

ata        crypto    gpio      infiniband  memstick  ntb      platform  scsi     vfio

bcma       dax       gpu       input       message   nvdimm   power     target   vhost

block      dca       hid       iommu       mfd       nvme     powercap  thermal  video

bluetooth  dma       hv        isdn        misc      parport  pps       tty      virtio

cdrom      edac      hwmon     leds        mmc       pci      ptp       uio      watchdog

char       firewire  i2c       md          mtd       pcmcia   pwm       usb      xen

[root@servera drivers]#

系统中有很多模块已安装只是未加载

[root@servera 4.18.0-80.el8.x86_64]# pwd

/lib/modules/4.18.0-80.el8.x86_64

[root@servera 4.18.0-80.el8.x86_64]# cat modules.dep

这个文件有模块的路径    系统通过这个文件来寻找模块

[root@servera 4.18.0-80.el8.x86_64]# modprobe sa

modprobe: FATAL: Module sa not found in directory /lib/modules/4.18.0-80.el8.x86_64

[root@servera 4.18.0-80.el8.x86_64]#

[root@servera 4.18.0-80.el8.x86_64]# grep  -w st modules.dep

kernel/drivers/scsi/st.ko.xz:

[root@servera 4.18.0-80.el8.x86_64]#

案例

2.6.18-164 kernel

RHEL5.4 可以正常开机

升级内核

2.6.27 kernel 启动系统  起不来

在我笔记本电脑中，安装 RHEL5.4，升级到 2.6.27，进入 2.6.27 内核，编译安装 LSI2008 驱

动，产生 RAID 卡模块

然后将 RAID 卡模块拷贝到 RHEL5.4 系统中

/lib/modules/2.6.27/kernel/lsi2008/lsi2008.ko

再进入 DELL 服务器 RHEL5.4 系统，将该模块导入到 initrd.img 文件中

首先，我可以在自己的笔记本电脑中，升级内核到 2.6.27，通过新内核启动系统，在该内核

中编译安装 lsi2008 RAID 卡驱动，为什么不能在 RHEL5.4 系统中编译呢？ 如果在 RHEL5.4

系统中编译，产生的模块只能在 RHEL5.4 中可用

为什么是在我的笔记电脑中执行呢？DELL 服务器 2.6.27 内核无法进入，所以无法在 DELL 服

务器中编译

一旦在我的电脑中编译完成，拷贝到 DELL 服务器中 2.6.27 内核文件夹中

将编译好的模块封装到 initrd.img 文件中

为什么不需要将网卡驱动封装到 initrd.img 文件中？

initrd.img 文件是加载根分区所需要的驱动

加载根分区不需要网卡驱动，但需要 RAID 卡和硬盘驱动

一旦根分区被加载，则可以读取到其他驱动，因为其他驱动都在根分区中

RHEL5-RHEL6:

#mkinitrd --with=e1000 -f /boot/initrd-$(uname -r).img $(uname -r)

RHEL7-RHEL8:

#dracut --add-driver e1000 -f /boot/initramfs-$(uname -r).img $(uname -r)

有内核就只装e1000驱动

[root@servera modules]# modinfo -p loop

max_loop:Maximum number of loop devices (int)

max_part:Maximum number of partitions per loop device (int)

这样也可以加载完模块读取参数

modprobe loop max_loop=6

资源控制

[root@servera ~]# vi /etc/security/limits.conf

#@faculty        soft    nproc           20

#@faculty        hard    nproc           50

#ftp             hard    nproc           0

#@student        -       maxlogins       4

user1    soft   as    81960

user1    hard   as    204800

增加user1 soft与user1 hard

这个soft设置为10M登录都不行

[user1@servera ~]$ ulimit -a

core file size          (blocks, -c) unlimited

data seg size           (kbytes, -d) unlimited

scheduling priority             (-e) 0

file size               (blocks, -f) unlimited

pending signals                 (-i) 7128

max locked memory       (kbytes, -l) 16384

max memory size         (kbytes, -m) unlimited

open files                      (-n) 1024

pipe size            (512 bytes, -p) 8

POSIX message queues     (bytes, -q) 819200

real-time priority              (-r) 0

stack size              (kbytes, -s) 8192

cpu time               (seconds, -t) unlimited

max user processes              (-u) 7128

virtual memory          (kbytes, -v) 81960

file locks                      (-x) unlimited

[user1@servera ~]$ ulimit -v 204800

[user1@servera ~]$ ulimit -a

core file size          (blocks, -c) unlimited

data seg size           (kbytes, -d) unlimited

scheduling priority             (-e) 0

file size               (blocks, -f) unlimited

pending signals                 (-i) 7128

max locked memory       (kbytes, -l) 16384

max memory size         (kbytes, -m) unlimited

open files                      (-n) 1024

pipe size            (512 bytes, -p) 8

POSIX message queues     (bytes, -q) 819200

real-time priority              (-r) 0

stack size              (kbytes, -s) 8192

cpu time               (seconds, -t) unlimited

max user processes              (-u) 7128

virtual memory          (kbytes, -v) 204800

file locks                      (-x) unlimited

默认你不能超过81960 系统当中，你写满软限制，就不准你写，但是还是有可能超过软限制

所以需要硬限制的存在

cgroup

Control group 控制组

Docker容器 cgroup资源限制（某容器得到很多资源其他容器就没有了） namespace隔离

cgroup也是运行在内存

红帽6

配置文件

group supermao {

memory {

memory.limit_in_bytes = 256m;

}

blkio {

blkio.throttle.read_bps_device = "8:0 1048576";

}

}

启动服务

谁会受到影响

*:cp blkio,memory supermao/

cp只能用256M内存

任何人使用cp命令时只要用到块设备读写就会受到supermao影响

watch -n 1 dush -sh /tmp/etc

bigmem 申请内存

*:bigmem memory bigdata/

任何人执行bigmem 会被bigdata的memory限制

用户与命令，但是不方便对服务做限制

红帽8

尝试对服务进行控制

安装vsftpd服务

写配置文件（这是写子配置文件，不能改usr/lib/systemd/system/vsftpd.service）

这个配置文件可以照着 /usr/lib/systemd/system 下面的vsftpd写（删除不需要的）

怎么得出的两个参数呢

man -k systemd 会发现有一个值叫 systemd.resource-control

它在第五章，那么

man 5 systemd.resource-control

里面有我需要控制参数

另一种查看服务是否被限制的方式

[user1@servera ~]$ cd /sys/fs/cgroup/memory/

[user1@servera memory]$ cd system.slice/

[user1@servera system.slice]$ cd vsftpd.service/

[user1@servera vsftpd.service]$ cat tasks

2882

[user1@servera vsftpd.service]$ pwd

/sys/fs/cgroup/memory/system.slice/vsftpd.service

[user1@servera vsftpd.service]$ pidof vsftpd

2882

[user1@servera vsftpd.service]$ cat memory.limit_in_bytes

268435456

[user1@servera vsftpd.service]$ bc

bc 1.07.1

Copyright 1991-1994, 1997, 1998, 2000, 2004, 2006, 2008, 2012-2017 Free Software Foundation, Inc.

This is free software with ABSOLUTELY NO WARRANTY.

For details type `warranty'.

256*1024*1024

268435456

除了vsftpd以外的服务都没被限制

[user1@servera memory]$ pwd

/sys/fs/cgroup/memory

[user1@servera memory]$ cat tasks  | grep 2882

[user1@servera memory]$ cat tasks

1

2

3

4

6

8

9

10

11

12

13

14

[user1@servera memory]$ cat memory.limit_in_bytes

9223372036854771712

容器限制

docker run -it -m 200M --momory-swap 300M ubuntu:16.04

docker run -it -m 200M --memory-swappiness 0 （不使用swap只使用内存）

progrium/stress --vm 1 --vm-bytes 180M

压力测试一个进程 180内存

-c 在资源紧缺时，谁更能抢

1024更能抢

虚拟机同理，参数叫cpuweight 可以查到（man 5 systemd.resource-control）

尝试了一下自己编译内核，还是懒了，不想排错、很简单的玩意