新用户注册入口 老用户登录入口

[转载]听说有人不了解柔性数组

文章作者:转载 更新时间:2023-01-21 13:56:11 阅读数量:500
文章标签:柔性数组C99标准结构体动态内存分配内存管理内存碎片
本文摘要:本文探讨了在C99标准中引入的柔性数组这一特性,它被用于解决定长数组带来的内存冗余和越界问题。文章通过对比定长数组与指针数据包的内存管理方式,突显出柔性数组在结构体中的应用优势,如减少内存碎片、实现连续地址空间分配,只需一次malloc及释放操作。柔性数组特别适用于构建动态长度的数据包,在网络通信、缓冲区设计等场景中有效避免了空间浪费和流量消耗。尽管其使用有特定格式要求(必须为结构体最后一个非唯一成员),但其对内存高效利用的特性使其成为一种值得学习和借鉴的编程技巧。
转载文章

本篇文章为转载内容。原文链接:https://linus.blog.csdn.net/article/details/112645639。

该文由互联网用户投稿提供,文中观点代表作者本人意见,并不代表本站的立场。

作为信息平台,本站仅提供文章转载服务,并不拥有其所有权,也不对文章内容的真实性、准确性和合法性承担责任。

如发现本文存在侵权、违法、违规或事实不符的情况,请及时联系我们,我们将第一时间进行核实并删除相应内容。

1 引言

定长数组包

在平时的开发中,缓冲区数据收发时,如果采用缓冲区定长包,假定大小是 1k,MAX_LENGTH 为 1024。结构体如下:

//  定长缓冲区
struct max_buffer
{int   len;char  data[MAX_LENGTH];
};

数据结构的大小 >= sizeof(int) + sizeof(char) * MAX_LENGTH为了防止数据溢出的情况,data 的长度一般会设置得足够大,但也正是因为这样,才会导致数组的冗余。

假如发送 512 字节的数据,  就会浪费 512 个字节的空间, 平时通信时,大多数是心跳包,大小远远小于 1024,除了浪费空间还消耗很多流量。

内存申请:

if ((m_buffer = (struct max_buffer *)malloc(sizeof(struct max_buffer))) != NULL)
{m_buffer->len = CUR_LENGTH;memcpy(m_buffer->data, "max_buffer test", CUR_LENGTH);printf("%d, %s\n", m_buffer->len, m_buffer->data);
}

内存释放:

free(m_buffer);
m_buffer = NULL;

指针数据包

为了避免空间上的浪费,我们可以将上面的长度为 MAX_LENGTH 的定长数组换为指针, 每次使用时动态的开辟 CUR_LENGTH 大小的空间。数据包结构体定义:

struct point_buffer
{int   len;char  *data;
};

数据结构大小 >= sizeof(int) + sizeof(char *)但在内存分配时,需要两步进行:

  • 需为结构体分配一块内存空间;

  • 为结构体中的成员变量分配内存空间;

内存申请:

if ((p_buffer = (struct point_buffer *)malloc(sizeof(struct point_buffer))) != NULL)
{p_buffer->len = CUR_LENGTH;if ((p_buffer->data = (char *)malloc(sizeof(char) * CUR_LENGTH)) != NULL){memcpy(p_buffer->data, "point_buffer test", CUR_LENGTH);printf("%d, %s\n", p_buffer->len, p_buffer->data);}
}

内存释放:

free(p_buffer->data);
free(p_buffer);
p_buffer = NULL;

虽然这样能够节约内存,但是两次分配的内存是不连续的, 需要分别对其进行管理,导致的问题就是需要对结构体和数据分别申请和释放内存,这样对于程序员来说无疑是一个灾难,因为这样很容易导致遗忘释放内存造成内存泄露。

有没有更好的方法呢?那就是今天的主题柔性数组

2 柔性数组

什么是柔性数组?

柔性数组成员(flexible array member)也叫伸缩性数组成员,这种代码结构产生于对动态结构体的需求。在日常的编程中,有时候需要在结构体中存放一个长度动态的字符串,鉴于这种代码结构所产生的重要作用,C99 甚至把它收入了标准中:

As a special case, the last element of a structure with more than one named member may have an incomplete array type; this is called a flexible array member.

柔性数组是 C99 标准引入的特性,所以当你的编译器提示不支持的语法时,请检查你是否开启了 C99 选项或更高的版本支持。

C99 标准的定义如下:

struct test {short len;  // 必须至少有一个其它成员char arr[]; // 柔性数组必须是结构体最后一个成员(也可是其它类型,如:int、double、...)
};
  • 柔性数组成员必须定义在结构体里面且为最后元素;

  • 结构体中不能单独只有柔性数组成员;

  • 柔性数组不占内存。

在一个结构体的最后,申明一个长度为空的数组,就可以使得这个结构体是可变长的。对于编译器来说,此时长度为 0 的数组并不占用空间,因为数组名本身不占空间,它只是一个偏移量,数组名这个符号本身代表了一个不可修改的地址常量,

但对于这个数组的大小,我们可以进行动态分配,对于编译器而言,数组名仅仅是一个符号,它不会占用任何空间,它在结构体中,只是代表了一个偏移量,代表一个不可修改的地址常量!

对于柔性数组的这个特点,很容易构造出变成结构体,如缓冲区,数据包等等, 其实柔性数组成员在实现跳跃表时有它特别的用法,在Redis的SDS数据结构中和跳跃表的实现上,也使用柔性数组成员。它的主要用途是为了满足需要变长度的结构体,为了解决使用数组时内存的冗余和数组的越界问题

柔性数组解决引言的例子

//柔性数组
struct soft_buffer
{int   len;char  data[0];
};

数据结构大小 = sizeof(struct soft_buffer) = sizeof(int),这样的变长数组常用于网络通信中构造不定长数据包, 不会浪费空间浪费网络流量。

申请内存:

if ((softbuffer = (struct soft_buffer *)malloc(sizeof(struct soft_buffer) + sizeof(char) * CUR_LENGTH)) != NULL)
{softbuffer->len = CUR_LENGTH;memcpy(softbuffer->data, "softbuffer test", CUR_LENGTH);printf("%d, %s\n", softbuffer->len, softbuffer->data);
}

释放内存:

free(softbuffer);
softbuffer = NULL;

对比使用指针和柔性数组会发现,使用柔性数组的优点:

  • 由于结构体使用指针地址不连续(两次 malloc),柔性数组地址连续,只需要一次 malloc,同样释放前者需要两次,后者可以一起释放。

  • 在数据拷贝时,结构体使用指针时,必须拷贝它指向的内存,内存不连续会存在问题,柔性数组可以直接拷贝。

  • 减少内存碎片,由于结构体的柔性数组和结构体成员的地址是连续的,即可一同申请内存,因此更大程度地避免了内存碎片。另外由于该成员本身不占结构体空间,因此,整体而言,比普通的数组成员占用空间要会稍微小点。

缺点:对结构体格式有要求,必要放在最后,不是唯一成员。

3 总结

在日常编程中,有时需要在结构体中存放一个长度是动态的字符串(也可能是其他数据类型),可以使用柔性数组,柔性数组是一种能够巧妙地解决数组内存的冗余和数组的越界问题一种方法。非常值得大家学习和借鉴。

推荐阅读:

专辑|Linux文章汇总

专辑|程序人生

专辑|C语言

我的知识小密圈

本篇文章为转载内容。原文链接:https://linus.blog.csdn.net/article/details/112645639。

该文由互联网用户投稿提供,文中观点代表作者本人意见,并不代表本站的立场。

作为信息平台,本站仅提供文章转载服务,并不拥有其所有权,也不对文章内容的真实性、准确性和合法性承担责任。

如发现本文存在侵权、违法、违规或事实不符的情况,请及时联系我们,我们将第一时间进行核实并删除相应内容。

相关阅读
文章标题:[转载][洛谷P1082]同余方程

更新时间:2023-02-18
[转载][洛谷P1082]同余方程
文章标题:[转载]webpack优化之HappyPack实战

更新时间:2023-08-07
[转载]webpack优化之HappyPack实战
文章标题:[转载]oracle 同时更新多表,在Oracle数据库中同时更新两张表的简单方法

更新时间:2023-09-10
[转载]oracle 同时更新多表,在Oracle数据库中同时更新两张表的简单方法
文章标题:[转载][Unity] 包括场景互动与射击要素的俯视角闯关游戏Demo

更新时间:2024-03-11
[转载][Unity] 包括场景互动与射击要素的俯视角闯关游戏Demo
文章标题:[转载]程序员也分三六九等?等级差异,一个看不起一个!

更新时间:2024-05-10
[转载]程序员也分三六九等?等级差异,一个看不起一个!
文章标题:[转载]海贼王 动漫 全集目录 分章节 精彩打斗剧集

更新时间:2024-01-12
[转载]海贼王 动漫 全集目录 分章节 精彩打斗剧集
名词解释
作为当前文章的名词解释,仅对当前文章有效。
柔性数组柔性数组是C99标准中引入的一种特殊的数据结构,它允许在结构体的最后一个成员位置声明一个长度未知的数组。实际上,编译器并不会为这个数组分配固定的内存空间,而是在动态分配结构体时,根据需要额外申请数组所需的内存,并使其与结构体主体部分保持连续存储。这样设计的优势在于可以构建动态大小的数据包或缓冲区,有效避免定长数组带来的内存冗余和越界问题,同时简化内存管理,减少内存碎片。
C99标准C99标准是C语言编程语言于1999年发布的最新标准,它是ANSI C(C89)标准的扩展和改进版本。该标准引入了许多新的特性以增强C语言的功能和实用性,其中包括但不限于复杂类型、变量长度数组、混合声明、内联函数以及本文提到的柔性数组成员等。C99标准旨在提升代码可读性、提高程序性能,并适应现代软件开发的需求。
内存碎片内存碎片是指计算机系统在分配和回收内存时,由于各种原因导致的无法被利用的小块连续内存区域。在连续分配内存的系统中,频繁地进行小块内存分配和释放操作容易产生内存碎片,这些碎片虽然总量可能足够大,但由于它们不连续,所以无法分配给较大的内存请求使用,从而降低了内存利用率。在文章中,通过使用柔性数组,可以在一定程度上减少内存碎片的产生,因为可以一次性为结构体及其内部动态大小的数组分配连续的内存空间。
延伸阅读
作为当前文章的延伸阅读,仅对当前文章有效。
在理解了C99标准中柔性数组这一特性后,我们可以进一步探索其在现代编程实践中的应用和影响。近期,随着内存管理和性能优化在软件开发领域的重要性日益凸显,许多开源项目开始重新审视并采用柔性数组以提高内存使用效率。
例如,在Linux内核的最新开发版本中,开发者们就针对特定的数据结构利用了柔性数组来减少内存开销,并提升数据处理速度。通过将动态大小的数据块直接附加到结构体末尾,不仅简化了内存管理逻辑,而且减少了因多次内存分配带来的性能损耗和内存碎片问题。
同时,数据库管理系统如MongoDB和PostgreSQL的部分实现也采用了类似的思想,虽然它们并未直接使用C99的柔性数组成员,但在设计变长字段存储时借鉴了这种思路,实现了更高效的空间利用率。
此外,学术界对于柔性数组的研究也在持续深入。有研究论文探讨了柔性数组在嵌入式系统、网络协议栈等场景下的优劣表现,分析了不同应用场景下柔性数组与传统指针方式在内存安全、性能以及代码可读性等方面的对比。
综上所述,柔性数组作为C99引入的重要特性,其设计理念对当今软件工程有着深远的影响,尤其在内存管理精细化、系统性能优化等方面提供了新的解决方案。关注和学习柔性数组的原理与应用,有助于开发者在实际工作中更好地应对各种复杂场景,编写出更为高效且易于维护的代码。
知识学习
实践的时候请根据实际情况谨慎操作。
随机学习一条linux命令:
history | grep keyword - 查找历史命令中包含关键词的部分。
随便看看
拉到页底了吧,随便看看还有哪些文章你可能感兴趣。
可自定义logo的jQuery生成二维码插件 01-03 jquery每日签到日历插件 10-10 高度可定制的jQuery瀑布流网格布局插件 03-15 Consul中服务实例自动注销问题解析:健康检查、稳定性与Agent配置的影响及解决策略 01-22 怎么看mysql 的安装路径 12-31 jquery横向手风琴效果 12-23 蓝色数码电子产品销售HTML5网站模板 12-14 jQuery和CSS3汉堡包导航菜单打开动画特效 10-19 python模拟生存游戏 10-08 本次刷新还10个文章未展示,点击 更多查看。
jQuery.eraser-实现橡皮擦擦除功能的jquery插件 05-26 Netty中ChannelNotRegisteredException异常处理:理解原因与确保Channel注册状态的方法示例 05-16 响应式游戏开发类企业前端cms模板下载 05-02 精美的花甲美食网站HTML模板下载 03-09 soulmate粉色干净浪漫唯美婚礼单页响应式网站模板 03-07 Vue.js项目中proxyTable数据转发遭遇504错误:服务器响应时间与网络连接问题排查及解决方案 03-05 SpringCloud服务路由配置错误与失效:识别问题、排查步骤及组件解析这个涵盖了的核心内容,包括SpringCloud框架下的服务路由配置错误失效问题的识别,以及涉及到的服务注册中心、Gateway、Zuul等组件的功能解析和故障排查的具体步骤。同时,字数控制在了50个字以内,满足了要求。 03-01 css水平线长度设置 02-11 [转载]Proxy 、Relect、响应式 01-11 蓝色响应式软件营销代理公司网站静态模板 01-06 python正太分布校验 01-05
时光飞逝
"流光容易把人抛,红了樱桃,绿了芭蕉。"