`
445822357
  • 浏览: 740797 次
文章分类
社区版块
存档分类
最新评论

内存池的原理及实现

 
阅读更多

在软件开发中,有些对象使用非常频繁,那么我们可以预先在堆中实例化一些对象,我们把维护这些对象的结构叫“内存池”。在需要用的时候,直接从内存池中拿,而不用从新实例化,在要销毁的时候,不是直接free/delete,而是返还给内存池。

把那些常用的对象存在内存池中,就不用频繁的分配/回收内存,可以相对减少内存碎片,更重要的是实例化这样的对象更快,回收也更快。当内存池中的对象不够用的时候就扩容。

我的内存池实现如下:

复制代码
#pragma once
#include <assert.h>

template<typename T>
struct ProxyT
{ 
    ProxyT():next(NULL){} 
    T data;
    ProxyT* next;
};

template<typename T>
class MemoryPool
{
public:
    static void* New()
    {
        if(next==NULL)
        {
            Alloc();
        }
        assert(next!=NULL);
        ProxyT<T>* cur=next;
        next=next->next;
        return cur;
    }

    static void Delete(void* ptr)
    {
        ProxyT<T>* cur=static_cast<ProxyT<T>*>(ptr);
        cur->next=next;
        next=cur; 
    }

#ifdef CanFree
    static void Clear()
    {
        ProxyT<T>* proxy=NULL;
        while(next!=NULL)
        {
            proxy=next->next;
            delete next;
            next=proxy->next;
        }
        next=NULL;
    }
#endif
    
private: 
    static void Alloc(size_t size=16)
    {
        if(next==NULL)
        {
        #ifdef CanFree
            ProxyT<T>* tmpProxy=new ProxyT<T>();
            next=tmpProxy;
            for(int i=1;i<size;i++)
            { 
                tmpProxy->next=new ProxyT<T>();
                tmpProxy=tmpProxy->next;
            } 
        #else
            ProxyT<T>* memory=(ProxyT<T>*)malloc(size*sizeof(ProxyT<T>));
            ProxyT<T>* tmpProxy=new (memory) ProxyT<T>();
            next=tmpProxy;
            for (size_t i=1;i<size;i++)
            {
                tmpProxy->next=new (memory+i) ProxyT<T>();
                tmpProxy=tmpProxy->next;
            }
        #endif

        }
    }
 
    static ProxyT<T>* next; 
    MemoryPool<T>();
    MemoryPool<T>(const MemoryPool<T>&);
};

template<typename T> ProxyT<T>* MemoryPool<T>::next=NULL; 

#define NewAndDelete(className)             \
static void* operator new(size_t size)      \
{                                           \
    return MemoryPool<className>::New();    \
}                                           \
static void operator delete(void* ptr)      \
{                                           \
    MemoryPool<className>::Delete(ptr);     \
}   
复制代码

测试代码如下:

复制代码
#include "stdafx.h" 
#define CanFree
#include "MemoryPool.h"
 
struct A
{ 
    int i; 
    NewAndDelete(A) 
};
  
int _tmain(int argc, _TCHAR* argv[])
{   
     
    { 
        vector<A*> vect;
        for(int i=0;i<16;i++)
        {
            A* a=new A();
            a->i=i;
            vect.push_back(a);
        }
        for(int i=0;i<vect.size();i++)
        {
            cout<<vect[i]->i<<endl;
        }
        for(int i=vect.size()-1;i>=0;i--)
        {
            delete vect[i];
        }
        vect.clear();
        
        MemoryPool<A>::Clear();
    }
   
    system("pause");
    return 0; 
}
复制代码


运行结果如下图:

不到100行代码,有两个public方法New和Delete;还有一个Clear方法,这个方法的存在取决于是否定义了宏CanFree,如果定义了这个宏,那么对象是一个个的实例化,在调用Clear的时候可以一个个的回收,如果没有定义,那么是一次分配一块较大的内存,然后在这块内存上实例化多个对象,但没有实现回收这块内存的方法,如果要回收这样的大块内存块,就必须将这些内存块的首地址存起来,我这里没有存起来,而且还要标记对象是否使用,那么Proxy<T>还要加一个字段表示是否使用,在回收的时候还要判断所有对象是否没有使用,只有都没使用才能回收,妹的,为了回收弄得这么麻烦,话说你为什么要回收内存池呢,于是就没有实现回收的方法。整个内存池其实就是一个单链表,表头指向第一个没有使用节点,我们可以把这个单链表想象成一段链条,调用方法New就是从链条的一端(单链表表头)取走一节点,调用方法Delete就是在链条的一端(单链表表头)前面插入一个节点,新插入的节点就是链表的表头,这样New和Delete的时间复杂度都是O(1),那叫一个快。

所有要使用内存池的对象,只需要在这个对象中引入宏NewAndDelete,这个宏其实就是重写对象的new和delete方法,让对象的创建和回收都通过内存池来实现,所有用内存池实现的对象使用起来和别的对象基本上是一样,唯一的一个问题就是内存池对象对象不是线程安全的,在多线程编程中,创建一个对象时必须枷锁。如果在New和Delete的实现中都加个锁,我又觉得他太影响性能,毕竟很多时候是不需要枷锁,有些对象可能有不用于多线程,对于这个问题,求高手指点!

1
1
分享到:
评论

相关推荐

    内存池实现原理 (中文)

    自定义内存池的思想通过这个"池"字表露无疑,应用程序可以通过系统的内存分配调用预先一次性申请适当大小的内存作为一个内存池,之后应用程序自己对内存的分配和释放则可以通过这个内存池来完成。只有当内存池大小...

    动态内存原理(如何实现动态内存池)

    实现简单的动态内存池,我们的原则是,尽量体现原理,屏蔽复杂枝节,让大家很容易看懂代码?所以这个程序也是比较简单的,代码不多,尽量体现思想。

    GlusterFS 之内存池(mem-pool)实现原理及代码详解

    最近一直在研究 glusterfs 的源代码,自己也在上面做了一些小的改动。... glusterfs实现内存池技术的源文件和头文件分别是mem-pool.c和mem-pool.h,首先看看头文件中内存 池对象结构体的定义如下:

    linux内存池代码实例

    linux内存池的代码实例, 只有四个文件,适合想学习内存池原理和实现的朋友

    linux 内存池 的实现原理 --- 论文

    linux 内存池的实现原理 此为论文, 写的比较不错, 自己先收藏了

    内存池的实现原理,主要实现内存的有效管理

    主要实现内存的有效管理,避免内存的频繁申请和释放,影响效率

    内存池的介绍

    简单介绍自定义内存池性能优化的原理,然后列举软件开发中常用的内存池的不同类型,并给出具体实现的实例。

    一个简单内存池的实现

    注意咯。应该在基类加上 ~_T()不然将无法析构对象。 这个类工作正常。

    Linux内核中内存池的实现及应用1

    摘要:基于对Linux操作系统内存管理机制、算法和模式的分析,详细解读Linux内核2.6版本中有关内存池的定义内涵, 明确内存池的创建方法和调用原理, 并给出

    C++应用程序性能优化之内存池

    《C++应用程序性能优化》的第六章:内存池 详细介绍了内存池的实现原理,书中含有部分原代码!

    c++应用程序性能优化之内存池

    本文摘自于《C++应用程序性能优化》,介绍了自定义内存池性能优化的原理,然后列举软件开发中常用的内存 池的不同类型,并给出具体实现的实例。

    静态内存池源代码C++编写

    这是一个用C++语言链表的方法实现的一个静态内存池代源码。原理就是先向系统申请一块大内存,然后把这一大块分隔成相等的很多小块,然后在这这些小块的首地址部份放一个结构体,结构体中有一个值是用来标明这一小块...

    CanteenMemPool:由食堂吃饭想到的一个内存池模型实现

    #CanteenMenPool 良好的内存池设计可以显着提高应用... ##原理CanteenMenPool基于这种思路,内存池管理不同的内存页,应用程序向内存池申请内存时,内存池根据申请内存大小,去合适的内存页分配block即可。 ##博客地址

    Java并发编程原理与实战

    ThreadLocal 使用及实现原理.mp4 并发工具类CountDownLatch详解.mp4 并发工具类CyclicBarrier 详解.mp4 并发工具类Semaphore详解.mp4 并发工具类Exchanger详解.mp4 CountDownLatch,CyclicBarrier,Semaphore源码解析....

    龙果 java并发编程原理实战

    第36节ThreadLocal 使用及实现原理00:17:41分钟 | 第37节并发工具类CountDownLatch详解00:22:04分钟 | 第38节并发工具类CyclicBarrier 详解00:11:52分钟 | 第39节并发工具类Semaphore详解00:17:27分钟 | 第40节...

    1操作系统原理.pdf

    操作系统原理-学习指南 一、 名词解释 脱机处理 DMA FCFS Buffer Pool 死锁 作业周转时间 信号量 系统调用 PCB 时间片 位示图 线程 脱机处理:外设不与 CPU 直接连接,不受 CPU 控制儿处理。 DMA:直接内存存取控制...

    system_mem.rar

    本案例原理是从一大块已申请内存池中,根据设定的最小内存片尺寸,划分为n个内存片,根据需要灵活分配内存片,可以有效的解决内存碎片的问题。 特点: 1. 灵活的分配内存,可大可小,但是必须大于MM_CTRL_SIZE 2. ...

    Java 并发编程原理与实战视频

    第36节ThreadLocal 使用及实现原理00:17:41分钟 | 第37节并发工具类CountDownLatch详解00:22:04分钟 | 第38节并发工具类CyclicBarrier 详解00:11:52分钟 | 第39节并发工具类Semaphore详解00:17:27分钟 | 第40节...

    C++程序内存泄露检测工具

    功能:  用于检?c++程序的内存泄露。  原理:  事实上非常easy,是...  1、空暇链表,事实上是一个简单的内存池 //定义一个结构,保存内存分配信息 typedef struct _tagMemoryInfo {  void* addr; //保存

Global site tag (gtag.js) - Google Analytics