当前位置：首页 > news >正文

ramdump 中的memory统计

news 2025/7/11 15:53:22

0. 前言

ramdump是指某个时刻系统或者子系统发生crash等异常，系统将内存中的数据通过一定的方式保存下来，相当于一个系统内存快照，用以开发者离线分析系统异常问题。

ramdump 工具中有很多内存统计的脚本，本文逐一剖析内存相关的脚本，涉及脚本如下：

脚本名称	dump文件名称	说明
memusage.py	memory.txt	统计内存 total memory、free memory、slab、shmem 以及每个进程的 rss、swap、adj 信息；
memstat.py	mem_stat.txt	统计总的内存使用情况，包含total、free、slab、cached、vmalloc、zram compressed，others中包含 pgtables、kernel stack 等信息；
ion_buffer_parse.py	ionbuffer.txt ionproc.txt total_dma_heap.txt	统计db_list 中所有 dma_buf 的size、expr_name等信息。总的 dma_buf 大小记录在 total_dma_heap.txt 文件中
vmalloc.py	vmalloc.txt	统计 vmallocinfo
slabinfo.py

1. memusage.py

该脚本统计的信息会写到 memory.txt 文件中。

来看下统计了哪些信息：

Total RAM: 2,716,180kB
Total free memory: 54,324kB(2.0%)
Slab reclaimable: 69,868kB(2.6%)
Slab unreclaimable: 195,680kB(7.2%)
Total Slab memory: 265,548kB(9.8%)
Total SHMEM (PAGECACHE): 90,300kB(3.3%)
Total SHMEM (SWAP): 212kB(0.0%)TOP 3 swapped SHMEM files are:
Address_space 0xffffff803ec32d30 Allocated 13 pages
file name:  /dev/ashmem/Trans ImageData
Address_space 0xffffff800b2ac460 Allocated 6 pages
file name:  /dev/ashmem/Trans ImageData
Address_space 0xffffff803ec37960 Allocated 6 pages
file name:  /dev/ashmem/Trans ImageDataTask name             PID          RSS in kB         SWAP in kB   ADJ
m.ohos.launcher      1433      283,520(10.4%)       12,676(0.5%)   400
m.ohos.systemui      1406      165,088(6.1%)       25,992(1.0%)  -800
com.ohos.callui     10310      176,892(6.5%)            0(0.0%)     1
m.ohos.contacts      7746      139,204(5.1%)           12(0.0%)   400
com.ohos.camera     17189      124,844(4.6%)            0(0.0%)     0
com.ohos.mms        13071      115,536(4.3%)           12(0.0%)   400
foundation           1027      110,608(4.1%)        3,224(0.1%) -1000
ard:inputMethod      1465      106,788(3.9%)        6,464(0.2%)   400
appspawn              277      110,432(4.1%)            0(0.0%) -1000

字段名称	说明
Total RAM	统计全局变量 _totalram_pages
Total free memory	统计NR_FREE_PAGES，以及占total 的百分比
Slab reclaimable	统计NR_SLAB_RECLAIMABLE，以及占 total 的百分比，Kernel5.10 以上的版本字段名称有所变化
Slab unreclaimable	统计 NR_SLAB_UNRECLAIMABLE，以及占 total 的百分比，Kernel5.10 以上的版本字段名称有所变化
Total Slab memory	统计总的 slab 内存，上面两者之和
Total SHMEM (PAGECACHE)	统计NR_SHMEM，以及占 total 的百分比
Total SHMEM (SWAP)	统计 shmem 进入 swap 的内存，这些信息都保存在 shmem_swaplist 中
TOP 3 swapped SHMEM files	上面统计信息之后，会将 TOP 3 swapped SHMEM files 列举出来
所有进程信息	统计进程的 name、PID、rss、swap 和 adj，其中 rss 和 swap统计值来源于 mm_struct 中 mm_rss_stat 结构体，rss = anon_rss + file_rss + shmem_rss

2. memstat.py

该脚本统计的信息会写到 mem_stat.txt 文件中。

来看下统计了哪些信息：

Total RAM                     :     2652 MB
Free memory:                  :       53 MBTotal Slab memory:            :      259 MB
Total DMA memory              :       54 MB
KGSL                          :        0 MB
ZRAM compressed               :        4 MB
vmalloc                       :       85 MB
Others                        :     1904 MB
Cached                        :      570 MBTotal Unaccounted Memory      :      293 MB

字段名称	说明
Total RAM	统计全局变量 _totalram_pages
Free memory	统计NR_FREE_PAGES，以及占total 的百分比
Total Slab memory	统计总的 slab 内存，NR_SLAB_RECLAIMABLE + NR_SLAB_UNRECLAIMABLE
Total DMA memory	统计所有dma-buf 的内存大小。对于 kernel 5.10 及以上的版本，该数据读取的是total_dma_heap.txt 文件，该文件于 ion_buffer_parse.py 解析写入，dma-buf 都统计在全局变量 db_list 中，详细查看下文 ion_buffer_parse.py 剖析
KGSL	未知
ZRAM compressed	统计 ZRAM 压缩的内存大小
vmalloc	统计通过vmalloc 申请的内存大小。对于 vmalloc 分配的内存都会被记录到全局变量nr_vmalloc_pages 中，详细可以查看《内核参数：vmallocinfo》一文
others	统计 NR_ANON_MAPPED + NR_FILE_PAGES + NR_PAGETABLE + NR_KERNEL_STACK_KB
Cached	统计 NR_FILE_PAGES
Total Unaccounted Memory	没有被统计的内存大小

3. ion_buffer_parse.py

该脚本统计的信息会写到 ionbuffer.txt、ionproc.txt、total_dma_heap.txt 文件中。

3.1 ionbuffer.txt

来看下统计了哪些数据：

*****Parsing dma buf info for ion leak debugging*****File_addr                                REF  Name            Size       Exp        Heap       Size in KB          
v.v (struct file *)0xffffff8031154140	  9   None            0x555000   system-uncached None       (5460 KB)
v.v (struct file *)0xffffff8031154500	 10   None            0x555000   system-uncached None       (5460 KB)
v.v (struct file *)0xffffff807a006640	  6   None            0x555000   system-uncached None       (5460 KB)
v.v (struct file *)0xffffff80a23b3540	  6   None            0x555000   system-uncached None       (5460 KB)
v.v (struct file *)0xffffff807cfb92c0	  8   None            0x555000   system-uncached None       (5460 KB)
v.v (struct file *)0xffffff808fc8ea00	  8   None            0x4f4000   system-uncached None       (5072 KB)
v.v (struct file *)0xffffff80b59cab40	  8   None            0x4f4000   system-uncached None       (5072 KB)
v.v (struct file *)0xffffff805cb97540	  3   None            0x48f000   system     None       (4668 KB)

轮询 db_list 中所有的 dma-buf，所有的size 都会统计到 total_dma_heap，最终的总的 dma-buf 的内存会记录到 total_dma_heap.txt 中。

字段名称	说明
File_addr	dma_buf 所对应的文件的 struct file 地址
REF	该文件被引用的次数
Name	dma_buf 的name，一般使用 dma_buf_set_name() 函数配置，默认不会设置，所以为None
Size	dma_buf 所代表的内存大小，十六进制
Exp	dma_buf 的 exp_name，同 dma_heap 的name
Heap	dma_heap 的name，上面 txt 显示为None，是因为脚本代码有问题
Size in KB	同Size，只不过转换成了KB 单位

3.2 ionproc.txt

来看下统计了哪些数据：

*****Parsing dma proc info for ion leak debugging*****render_service (PID 828) size (KB): 43600
Name            Size            Size in KB Time Alive(sec)      (struct file *)          
system-uncached 0x555000              5460 0                    0xffffff80a23b3540       
system-uncached 0x555000              5460 0                    0xffffff8031154500       
system-uncached 0x555000              5460 0                    0xffffff8031154140       
system-uncached 0x555000              5460 0                    0xffffff807a006640       
system-uncached 0x555000              5460 0                    0xffffff807cfb92c0       
system-uncached 0x4f4000              5072 0                    0xffffff80b59cab40       
system-uncached 0x4f4000              5072 0                    0xffffff808fc8ea00       
system-uncached 0xe4000                912 0                    0xffffff8061202280       
system-uncached 0xe4000                912 0                    0xffffff801f506000   ...m.ohos.launcher (PID 1433) size (KB): 16380
Name            Size            Size in KB Time Alive(sec)      (struct file *)          
system-uncached 0x555000              5460 0                    0xffffff807cfb92c0       
system-uncached 0x555000              5460 0                    0xffffff807a006640       
system-uncached 0x555000              5460 0                    0xffffff80a23b3540

该文件统计的是使用 dma-buf的进程的相关信息，每一个 proc 都会显示进程名、PID 以及使用的dma-buf 的总大小。

通常该文件统计的数据与ionbuffer.txt 配合使用，分析某些dma_buf 异常。

字段名称	说明
Name	slab_buf 的exp_name
Size	slab_buf 所占用的内存大小，十六进制
Size in KB	同上，转换成KB 的单位
Time Alive(sec)	slab_buf 的存活时长，一般用于 struct dma_buf 中存在ktime 的成员，除此都为0
*(struct file )**	同 ionbuffer.txt 中，代表 dma_buf 对应的文件的 struct file 地址

3.3 total_dma_heap.txt

来看下统计了哪些数据：

Total dma memory: 54MB

该数据统计所有dma_buf 的总大小，在分析 ionbuffer.txt 的时候看到，所有db_list 中的 dma_buf 的size 都会累计到变量total_dma_heap，最终记录到 total_dma_heap.txt 文件中。

4. vmalloc.py

该脚本统计的信息会写到 vmalloc.txt 文件中。

来看下统计了哪些信息：

Memory mapped region allocated by VmallocVM_STRUCT                                  ADDRESS_RANGE                        SIZE   PHYS_ADDR    CALLER                                         Flag    
v.v (struct vmap_area)0xffffff8081917400   ffffffc000000000-ffffffc000002000     2000          0  bpf_jit_binary_alloc0x0xac                     vmalloc pages=1
v.v (struct vmap_area)0xffffff80b4230c00   ffffffc000002000-ffffffc000004000     2000          0  bpf_jit_binary_alloc0x0xac                     vmalloc pages=1
v.v (struct vmap_area)0xffffff80a33d8180   ffffffc000004000-ffffffc000006000     2000          0  bpf_jit_binary_alloc0x0xac                     vmalloc pages=1
v.v (struct vmap_area)0xffffff80a33d8480   ffffffc000006000-ffffffc000008000     2000          0  bpf_jit_binary_alloc0x0xac                     vmalloc pages=1
v.v (struct vmap_area)0xffffff807a1bb500   ffffffc000008000-ffffffc00000a000     2000          0  bpf_jit_binary_alloc0x0xac                     vmalloc pages=1
v.v (struct vmap_area)0xffffff8025419a80   ffffffc00000a000-ffffffc00000c000     2000          0  bpf_jit_binary_alloc0x0xac                     vmalloc pages=1
v.v (struct vmap_area)0xffffff808d27c180   ffffffc009820000-ffffffc00997a000   15a000          0  load_module0x0xbb0                             vmalloc pages=345
v.v (struct vmap_area)0xffffff808d39b300   ffffffc00997a000-ffffffc009997000    1d000          0  load_module0x0xbb0                             vmalloc pages=28
v.v (struct vmap_area)0xffffff808d5b8300   ffffffc009997000-ffffffc0099b6000    1f000          0  load_module0x0xbb0                             vmalloc pages=30
v.v (struct vmap_area)0xffffff808da97c80   ffffffc0099b6000-ffffffc00a2cb000   915000          0  load_module0x0xbb0                             vmalloc pages=2324
v.v (struct vmap_area)0xffffff808d30ca00   ffffffc00a2cb000-ffffffc00a2d1000     6000          0  load_module0x0xbb0                             vmalloc pages=5
v.v (struct vmap_area)0xffffff808c688200   ffffffc00a2d1000-ffffffc00a311000    40000          0  load_module0x0xbb0                             vmalloc pages=63
v.v (struct vmap_area)0xffffff809621e780   ffffffc00a311000-ffffffc00a6dc000   3cb000          0  load_module0x0xbb0                             vmalloc pages=970

字段名称	说明
VM_STRUCT	从kmalloc 中分配的struct vm_struct 的地址
ADDRESS_RANGE	vm_struct 代表的vmalloc 子区域的内存空间，差值就是SIZE
SIZE	vm_struct 代表的vmalloc 子区域的内存大小，十六进制
PHYS_ADDR	代表的vmalloc 子区域对应的物理地址起始地址，一般出现于vmap 或 ioremap
CALLER	调用vmalloc 的函数
Flag	vmalloc 的属性，详细查看《内核参数：vmallocinfo》一文

更详细的 vmalloc 内存管理信息可以查看《vmalloc 详解》一文和《内核参数：vmallocinfo》一文。

5. slabinfo.py

ramdump 中的memory统计

0. 前言 ramdump是指某个时刻系统或者子系统发生crash等异常，系统将内存中的数据通过一定的方式保存下来，相当于一个系统内存快照，用以开发者离线分析系统异常问题。 ramdump 工具中有很多内存统计的脚本，本文逐一剖析内存相关的…...

编程日记 2023/12/31 19:40:24

Element-Ui树形数据懒加载，删除到最后一个空数组不刷新问题

使用elemenui树形删除数据的时候刷新页面，我在网上找了好多方法，要么没用，要么都是部分代码，自己又看不懂，不得不硬着头皮看源码，发现了有个方法可以刷新。使用elemenui树形删除数据的时候刷新页面。源码里…...

编程日记 2023/12/31 19:38:20

基于NASM搭建一个能编译汇编语言的汇编软件工具环境（利用NotePad++）

文章目录一、创建汇编语言源程序二、Notepad的下载、安装、使用三、下载和安装编译器NASM3.1 下载NASM编译器3.2 安装并配置环境变量四、编译汇编语言源程序（使用命令）五、下载和使用配套源码及工具六、将编译功能集成到Notepad 一、创建汇编语言源程序…...

编程日记 2023/12/31 19:37:19

使用setoolkit制作钓鱼网站并结合dvwa靶场储存型XSS漏洞利用

setoolkit是一款kali自带的工具使用命令启动 setoolkit 1) Social-Engineering Attacks 1） 社会工程攻击 2) Penetration Testing (Fast-Track) 2） 渗透测试（快速通道） 3) Third Party Module…...

编程日记 2023/12/31 19:35:17

计算机组成原理-总线概述

文章目录总线简图总线的物理实现总览总线定义总线的特性总线的分类按数据格式分类串行总线并行总线按总线功能分类注意系统总线的进一步分类总线的结构单总线的机构双总线的结构三总线的结构四总线的结构小结总线简图总线的物理实现如果该为数据总线，那么当…...

编程日记 2023/12/31 19:32:14

三角函数两角和差公式推导

一.几何推理 1.两角和公式做一斜边为1的直角△ABC,任意旋转非 k Π , k N kΠ,kN kΠ,kN,补充如图,令 ∠ A B C ∠ α ， ∠ C B F ∠ β ∠ABC∠α，∠CBF∠β ∠ABC∠α，∠CBF∠β ∴ ∠ D B F ∠ D B A ∠ α ∠ β 90 , ∠ D A …...

编程日记 2023/12/31 19:30:13

HarmonyOS page生命周期函数讲解

下面我们又要看一个比较重要的点了页面生命周期页面组件有三个生命周期 onPageShow 页面显示时触发 onPageHide 页面隐藏时触发 onBackPress 页面返回时触发这里我们准备两个组件首先是 index.ets 参考代码如下 import router from ohos.router Entry Component struc…...

编程日记 2023/12/31 19:29:12

3D视觉-结构光测量-线结构光测量

概述线结构光测量中，由激光器射出的激光光束透过柱面透镜扩束，再经过准直，产生一束片状光。这片光束像刀刃一样横切在待测物体表面，因此线结构光法又被成为光切法。线结构光测量常采用二维面阵 CCD 作为接受器件，因此…...

编程日记 2023/12/31 19:27:10

ssm基于web的马病管理系统设计与实现+jsp论文

摘要传统信息的管理大部分依赖于管理人员的手工登记与管理，然而，随着近些年信息技术的迅猛发展，让许多比较老套的信息管理模式进行了更新迭代，马病信息因为其管理内容繁杂，管理数量繁多导致手工进行处理不能满足广大…...

编程日记 2023/12/31 19:26:09

SaaS版Java基层健康卫生云HIS信息管理平台源码（springboot）

云his系统源码，系统采用主流成熟技术开发，B/S架构，软件结构简洁、代码规范易阅读，SaaS应用，全浏览器访问，前后端分离，多服务协同，服务可拆分，功能易扩展。多集团统一登录…...

编程日记 2023/12/31 19:24:06

redis,memcached,nginx网络组件，网络编程——reactor的应用

目录目标网络编程关注的问题连接的建立连接的断开消息的到达消息发送完毕网络 IO 职责检测 IO检测 io剖析操作 IO 阻塞IO 和非阻塞IOIO 多路复用epoll结构以及接口 reactor编程连接建立连接断开数据到达数据发送完毕 reactor 应用：后续补充源码解析单 reacrtor多…...

编程日记 2023/12/31 19:23:05

【机电、机器人方向会议征稿|不限专业|见刊快】2024年机械、图像与机器人国际会议（IACMIR 2024）

【机电、机器人方向会议征稿|不限专业|见刊快】2024年机械、图像与机器人国际会议（IACMIR 2024） 2024 International Academic Conference on Machinery, Images, and Robotics 会议将聚焦“机械、成像和机器人”相关的最新研究领域，为国内…...

编程日记 2023/12/31 19:21:04

uniapp 学习之路 1. 下载HBuilderX2. 下载uView初始框架3. 开始学习1.更改页面背景色，渐变色 1. 下载HBuilderX https://www.dcloud.io/hbuilderx.html?ivk_sa1024320u2. 下载uView初始框架 https://ext.dcloud.net.cn/plugin?id15933. 开始学习 1.更改页面背景…...

编程日记 2023/12/31 19:20:03

移动开发新的风口？Harmony4.0鸿蒙应用开发基础+实践案例

前段时间鸿蒙4.0引发了很多讨论，不少业内人士认为，鸿蒙将与iOS、安卓鼎足而三了。事实上，从如今手机操作系统竞赛中不难看出，安卓与iOS的形态、功能逐渐趋同化，两大系统互相取长补短，综合性能等差距越来越…...

编程日记 2023/12/31 19:16:59

QT上位机开发（倒计时软件）

编程日记 2023/12/31 19:14:57

2023 楚慧杯 --- Crypto wp

文章目录初赛so large e 决赛JIGE 初赛 so large e 题目： from Crypto.Util.number import * from Crypto.PublicKey import RSA from flag import flag import randomm bytes_to_long(flag)p getPrime(512) q getPrime(512) n p*q e random.getrandbits(1…...

编程日记 2023/12/31 19:13:55

Python+OpenCV 零基础学习笔记(1-3):anaconda+vscode+jupyter环境配置

文章目录前言相关链接环境配置：AnacondaPython配置OpenCVOpencv-contrib:Opencv扩展 Notebook:python代码笔记vscode配置配置AnacondaJupyter文件导出前言作为一个C# 上位机，我认为上位机的终点就是机器视觉运动控制。最近学了会Halcon发现机器视觉还…...

编程日记 2023/12/31 19:11:54

Spring Cloud Gateway 常见过滤器的基本使用

目录 1. 过滤器的作用 2. Spring Cloud Gateway 过滤器的类型 2.1 内置过滤器 2.1.1 AddResponseHeader 2.1.2 AddRequestHeader 2.1.3 PrefixPath 2.1.4 RequestRateLimiter 2.1.5 Retry 2.2 自定义过滤器 1. 过滤器的作用过滤器通常用于拦截、处理或修改数据流和事…...

编程日记 2023/12/31 19:09:52

maven依赖无法传递问题排查

一、背景在A模块中引入B模块，C服务引入A模块但是B模块没有传递进来。二、排查使用mvn clean install -Dmaven.test.skiptrue查看打包日志信息，通过搜索A模块名称，出现如下警告信息： [WARING] The POM for A:jar:0.0.1-SNAP…...

编程日记 2023/12/31 19:07:50

JVM钩子

JVM钩子简介在Java应用程序中，可以通过注册关闭钩子（Shutdown Hook）函数来实现在JVM关闭时执行特定的代码。关闭钩子是一种用于在JVM关闭时执行清理任务的机制，它允许开发者在JVM关闭之前执行一些必要的清理工作，如…...

编程日记 2023/12/31 19:06:49

HTML 语义化

目录 HTML 语义化HTML5 新特性HTML 语义化的好处语义化标签的使用场景最佳实践 HTML 语义化 HTML5 新特性标准答案： 语义化标签： <header>：页头<nav>：导航<main>：主要内容<article>&#x…...

编程新知 2025/7/5 22:28:03

在rocky linux 9.5上在线安装 docker

前面是指南，后面是日志 sudo dnf config-manager --add-repo https://download.docker.com/linux/centos/docker-ce.repo sudo dnf install docker-ce docker-ce-cli containerd.io -y docker version sudo systemctl start docker sudo systemctl status docker …...

编程新知 2025/7/11 12:05:22

深入浅出：JavaScript 中的 `window.crypto.getRandomValues()` 方法

深入浅出：JavaScript 中的 window.crypto.getRandomValues() 方法在现代 Web 开发中，随机数的生成看似简单，却隐藏着许多玄机。无论是生成密码、加密密钥，还是创建安全令牌，随机数的质量直接关系到系统的安全性。Jav…...

编程新知 2025/6/15 19:02:54

理解 MCP 工作流：使用 Ollama 和 LangChain 构建本地 MCP 客户端

🌟 什么是 MCP？ 模型控制协议 (MCP) 是一种创新的协议，旨在无缝连接 AI 模型与应用程序。 MCP 是一个开源协议，它标准化了我们的 LLM 应用程序连接所需工具和数据源并与之协作的方式。可以把它想象成你的 AI 模型和想要使用它…...

编程新知 2025/7/9 11:27:28

为什么需要建设工程项目管理？工程项目管理有哪些亮点功能？

在建筑行业，项目管理的重要性不言而喻。随着工程规模的扩大、技术复杂度的提升，传统的管理模式已经难以满足现代工程的需求。过去，许多企业依赖手工记录、口头沟通和分散的信息管理，导致效率低下、成本失控、风险频发。例如&#…...

编程新知 2025/7/10 14:03:20

LLM基础1_语言模型如何处理文本

基于GitHub项目：https://github.com/datawhalechina/llms-from-scratch-cn 工具介绍 tiktoken：OpenAI开发的专业"分词器" torch：Facebook开发的强力计算引擎，相当于超级计算器理解词嵌入：给词语画"…...

编程新知 2025/6/21 14:38:31

[Java恶补day16] 238.除自身以外数组的乘积

给你一个整数数组 nums，返回数组 answer ，其中 answer[i] 等于 nums 中除 nums[i] 之外其余各元素的乘积。题目数据保证数组 nums之中任意元素的全部前缀元素和后缀的乘积都在 32 位整数范围内。请不要使用除法，且在 O(n) 时间复杂度…...

编程新知 2025/7/6 15:59:45

AspectJ 在 Android 中的完整使用指南

一、环境配置（Gradle 7.0 适配） 1. 项目级 build.gradle // 注意：沪江插件已停更，推荐官方兼容方案 buildscript {dependencies {classpath org.aspectj:aspectjtools:1.9.9.1 // AspectJ 工具} } 2. 模块级 build.gradle plu…...

编程新知 2025/7/7 22:33:57