MySQL中,常常会看到一些关于动态字符串的处理,列如:DYNAMIC_STRING。

为了记录动态字符串的实际长度,缓冲区的最大长度,以及每次字符串需要调整时,及时分配新的内存,以及调整长度。MySQL使用了DYNAMIC_STRING来保存动态字符串相关的信息:

typedef struct st_dynamic_string

{

char *str;

size_t length, max_length, alloc_increment;

} DYNAMIC_STRING;

在这个结构体中,str存储实际字符串的首地址,length记录字符串的实际长度,max_length记录字符串缓冲区最多可以存放多少字符,alloc_increment表示当字符串需要分配内存时,每次分配多少内存。

下面看看这个结构体的初始化过程:

my_bool init_dynamic_string( DYNAMIC_STRING *str, const char *init_str, size_t init_alloc, size_t alloc_increment )

{

size_t length;

DBUG_ENTER( "init_dynamic_string" );

if ( !alloc_increment )

alloc_increment = 128;

length = 1;

if ( init_str && (length = strlen( init_str ) + 1) < init_alloc )

init_alloc = ( (length + alloc_increment - 1) / alloc_increment) * alloc_increment;

if ( !init_alloc )

init_alloc = alloc_increment;

if ( !(str->str = (char *) my_malloc( init_alloc, MYF( MY_WME ) ) ) )

DBUG_RETURN( TRUE );

str->length = length - 1;

if ( init_str )

memcpy( str->str, init_str, length );

str->max_length = init_alloc;

str->alloc_increment = alloc_increment;

DBUG_RETURN( FALSE );

}

从上述函数可以看到,初始化时,初始分配的字符串缓冲区大小init_alloc会根据需要初始的字符串来做判断。在分配好该DYNAMIC_STRING空间之后,我们会根据缓冲区的大小,字符串的实际长度,以及alloc_increment来初始化:

length:字符串的实际长度

max_length:缓冲区的最大长度

alloc_increment:空间不够时,下次分配内存的单元大小.

初始化这些内容之后,如果下次需要在该缓冲区添加更多字符,就可以根据这些值来判断是否需要对该缓冲区扩容:

my_bool dynstr_append_mem( DYNAMIC_STRING *str, const char *append, size_t length )

{

char *new_ptr;

if ( str->length + length >= str->max_length ) /* 如果新增字符串后,总长度超过缓冲区大小 */

{

/* 需要分配多少个alloc_increment 大小的内存,才能存下新增后的字符串 */

size_t new_length = (str->length + length + str->alloc_increment) /

str->alloc_increment;

new_length *= str->alloc_increment;

if ( !(new_ptr = (char *) my_realloc( str->str, new_length, MYF( MY_WME ) ) ) )

return(TRUE);

str->str = new_ptr;

str->max_length = new_length;

}

/* 将新分配的内容,append到str之后 */

memcpy( str->str + str->length, append, length );

str->length += length;                              /* 扩容之后str新的长度 */

str->str[str->length] = 0; /* Safety for C programs */        /* 字符串最后一个字符为’\0' */

return(FALSE);

}

从上述代码可以看到,在字符串初始化化好之后,之后如果需要给该字符串增加新的内容,只需要根据之前存储的信息来动态的realloc就好了。由于该结构体记录了字符串相关的完整内容,所以动态的扩容会非常方便处理。

当然,除了这些,还有比如字符串截断,字符串初始设置,转义OS的引号等等:

将字符串偏移大于N之后的截断。

my_bool dynstr_trunc( DYNAMIC_STRING *str, size_t n )

{

str->length -= n;

str->str[str->length] = '\0';

return(FALSE);

}

返回字符串中第一次出现某个字符的地址。若没有,则返回字符串结尾的地址(指向’’)

char *strcend( register const char *s, register pchar c )

{

for (;; )

{

if ( *s == (char) c )

return( (char *) s);

if ( !*s++ )

return( (char *) s - 1);

}

}

字符串内容扩容:

my_bool dynstr_realloc( DYNAMIC_STRING *str, size_t additional_size )

{

DBUG_ENTER( "dynstr_realloc" );

if ( !additional_size )

DBUG_RETURN( FALSE );

if ( str->length + additional_size > str->max_length ) /* 如果新的字符串内容超过缓冲区的最大长度 */

{

str->max_length = ( (str->length + additional_size + str->alloc_increment - 1) /

str->alloc_increment) * str->alloc_increment;

if ( !(str->str = (char *) my_realloc( str->str, str->max_length, MYF( MY_WME ) ) ) )

DBUG_RETURN( TRUE );

}

DBUG_RETURN( FALSE );

}

对字符串用引号括起来,对其中的单引号进行转义,主要用于执行一些系统命令(system(cmd))。

比如:ls -al 会变成 ‘ls -al’

比如:ls -a’l会变成’ls -a\’l’

/*

* Concatenates any number of strings, escapes any OS quote in the result then

* surround the whole affair in another set of quotes which is finally appended

* to specified DYNAMIC_STRING. This function is especially useful when

* building strings to be executed with the system() function.

*

* @param str Dynamic String which will have addtional strings appended.

* @param append String to be appended.

* @param ... Optional. Additional string(s) to be appended.

*

* @ note The final argument in the list must be NullS even if no additional

* options are passed.

*

* @return True = Success.

*/

my_bool dynstr_append_os_quoted( DYNAMIC_STRING *str, const char *append, ... )

{

const char *quote_str = "\'";

const uint quote_len = 1;

my_bool ret = TRUE;

va_list dirty_text;

ret &= dynstr_append_mem( str, quote_str, quote_len ); /* Leading quote */

va_start( dirty_text, append );

while ( append != NullS )

{

const char *cur_pos = append;

const char *next_pos = cur_pos;

/* Search for quote in each string and replace with escaped quote */

while ( *(next_pos = strcend( cur_pos, quote_str[0] ) ) != '\0' )

{

ret &= dynstr_append_mem( str, cur_pos, (uint) (next_pos - cur_pos) );

ret &= dynstr_append_mem( str, "\\", 1 );

ret &= dynstr_append_mem( str, quote_str, quote_len );

cur_pos = next_pos + 1;

}

ret &= dynstr_append_mem( str, cur_pos, (uint) (next_pos - cur_pos) );

append = va_arg( dirty_text, char * );

}

va_end( dirty_text );

ret &= dynstr_append_mem( str, quote_str, quote_len ); /* Trailing quote */

return(ret);

}

通过定义动态字符串的结构体信息,每次分次进行字符串添加更多字符,都会根据字符串的当前的长度动态的扩容。而且每次扩容后,该结构体都记录的当前字符串的实际信息(当前字符串的长度,缓冲器可容纳字符串的长度,进行扩容的单元长度)。这样,动态字符串的处理操作就变得非常方便了。

MySQL动态字符串处理DYNAMIC_STRING的更多相关文章

  1. 跟着大彬读源码 - Redis 7 - 对象编码之简单动态字符串

    Redis 没有直接使用 C 语言传统的字符串表示(以空字符串结尾的字符数组),而是构建了一种名为简单动态字符串(simple dynamic string)的抽象类型,并将 SDS 用作 Redis ...

  2. Redis—简单动态字符串(SDS)

    目录 Redis-简单动态字符串(SDS) SDS的定义 SDS与C字符串的区别 1. 常数复杂度获取字符串长度: 2. 杜绝缓冲区溢出: 3. 减少修改字符串时带来的内存重分配次数 4. 二进制安全 ...

  3. Redis的简单动态字符串实现

    Redis 没有直接使用 C 语言传统的字符串表示(以空字符结尾的字符数组,以下简称 C 字符串), 而是自己构建了一种名为简单动态字符串(simple dynamic string,sds)的抽象类 ...

  4. Mysql hql字符串字段中是否包含某个字符串,用 find_in_set

    有这样一个需求,在Mysql数据库字符串字段(权限)中,有范围在 1 到 N 之间代表不同权限的值,分别被','分开,现在要取出具有某权限的所有成员列表. 创建表: 1 CREATE TABLE us ...

  5. Redis自定义动态字符串(sds)模块(一)

    Redis开发者在开发过程中没有使用系统的原始字符串,而是使用了自定义的sds字符串,这个模块的编写是在文件:sds.h和sds.c文件中.Redis自定义的这个字符串好像也不是很复杂,远不像ngin ...

  6. web系列教程之php 与mysql 动态网站 。检索 与更新。

    接着上次WEb 系列开发之php 与mysql动态网站入门. 个人觉得,学习技术就像一棵大树,主干很重要,枝叶其次.对于学习技术,我们应该分清主次关系.怎么学?为什么要学?有一个较好的分寸. 有时候觉 ...

  7. mysql处理字符串的两个绝招:substring_index,concat

    mysql处理字符串的两个绝招:substring_index,concat 最近老是碰到要处理数据库中字符串的处理,发现用来用去也就是这两个函数: 1.substring_index(str,del ...

  8. Mysql笔记之 -- replace()实现mysql 替换字符串

    mysql 替换函数replace()实现mysql 替换字符串 mysql 替换字符串的实现方法:  mysql中replace函数直接替换mysql数据库中某字段中的特定字符串,不再需要自己写函数 ...

  9. 动态字符串 Stringbuilder类

    StringBuilder动态字符串 string 类型的修改会浪费资源,如果要修改字符串而不创建新的对象,则可以使用 System.Text.StringBuilder 类, stringbuild ...

随机推荐

  1. [AlwaysOn Availability Groups]健康模型 Part 1——概述

    健康模型概述 在成功部署AG之后,跟踪和维护健康状况是很重要的. 1.AG健康模型概述 AG的健康模型是基于策略管理(Policy Based Management PBM)的.如果不熟悉这个特性,可 ...

  2. Linux基础介绍【第四篇】

    Linux文件和目录的属性及权限 命令: [root@oldboy ~]# ls -lhi total 40K 24973 -rw-------. 1 root root 1.1K Dec 10 16 ...

  3. Selenium的PO模式(Page Object Model)[python版]

     Page Object Model 简称POM  普通的测试用例代码: .... #测试用例 def test_login_mail(self): driver = self.driver driv ...

  4. centos7+mono4.2.3.4+jexus5.8.1跨平台起飞

    很早之前就开始关注.net跨平台,最近正好测试了下用EF6连接mysql,于是就想直接把网站扔进Linux.查了很多资料,鼓捣了两个晚上,终于成功. 这里我使用的是budgetvm的1G openvz ...

  5. 分享一个CQRS/ES架构中基于写文件的EventStore的设计思路

    最近打算用C#实现一个基于文件的EventStore. 什么是EventStore 关于什么是EventStore,如果还不清楚的朋友可以去了解下CQRS/Event Sourcing这种架构,我博客 ...

  6. Hadoop2 自己动手编译Hadoop的eclipse插件

    前言:       毕业两年了,之前的工作一直没有接触过大数据的东西,对hadoop等比较陌生,所以最近开始学习了.对于我这样第一次学的人,过程还是充满了很多疑惑和不解的,不过我采取的策略是还是先让环 ...

  7. 到爱尔兰敲代码 / Come, Coding in Ireland

    这是我在都柏林的第四个月,该办的证也都办完了,该安定下来的也安定下来了,所以也简单介绍下到爱尔兰做IT的相关过程和政策. 如果有兴趣在英语环境工作的话,我也可以帮忙推荐或者找找. 去年15年1月正好开 ...

  8. SQL Server 服务器磁盘测试之SQLIO篇(一)

    数据库调优工作中,有一部分是需要排查IO问题的,例如IO的速度或者RAID级别无法响应高并发下的快速请求.最常见的就是查看磁盘每次读写的响应速度,通过性能计数器Avg.Disk sec/Read(Wr ...

  9. WCF学习之旅—实现支持REST客户端应用(二十四)

    WCF学习之旅—实现REST服务(二十二) WCF学习之旅—实现支持REST服务端应用(二十三) 在上二篇文章中简单介绍了一下RestFul与WCF支持RestFul所提供的方法,及创建一个支持RES ...

  10. Python正则表达式中的re.S

    title: Python正则表达式中的re.S date: 2014-12-21 09:55:54 categories: [Python] tags: [正则表达式,python] --- 在Py ...