• 数据库连接池使用(三):通过线程实现数据库连接池


         在企业级软件开发过程中,为了改善应用程序的性能,通常需要使用对象池来控制对象的实例化。例如,在我们每次需要连接一个数据库时都需要创建一个数据库连接,而数据库连接是非常昂贵的对象。所以,为了节省每次数据库调用,都要实例化一个数据库连接的资源,我们可以缓存并重用一些创建好的数据库连接对象。以此节省每次数据库调用都要创建一个数据库连接对象的时间和资源,这样会大幅度提高系统性能。
         对象池与图书馆很像,图书馆里维护很多书籍。当对某本书的需求增加时,图书馆就会买更多书,否则的话读者们就会一直使用同一本书。在对象池中,首先我们检查对象是否已经被创建且被放到池中,如果已经被放到池中,我们就会得到对象池中缓存的对象;如果没有找到就会创建一个新的对象并放到对象池中以备之后使用。对象池计数广泛地用于大规模应用程序服务,比如企业级Java组件模型(Enterprise Java Beans Servers, EJB),MTS/COM+,甚至在.NET Framework中。
         在这部分,我们将开发一个数据库连接池来缓存数据库连接。创建数据库连接是很昂贵的,在一个典型的Web应用中可能有几千个用户同时访问站点。如果这些用户恰好想要访问数据库的动态数据而我们继续为每个用户创建一个数据库连接的话,这将对应用程序的性能带来负面影响。创建一个新的对象要求更多内存。内存分配会降低应用程序性能,最后的结果是Web站点在分发动态内容时变得非常慢,或者到达一个临界值导致站点崩溃。连接池维护一个已创建的对象池,所以应用程序可以从池中借一个连接并在用完以后还给对象池,而不是创建一个新的数据库连接。一旦数据发送给一个用户,对象的数据库连接就会被对象池收回以备之后使用。

         一、实现对象池
         下图显示了ObjectPool 类和继承自ObjectPool的DBConnectionSingleton类。

        

         1、ObjectPool 类
         我们先贴出ObjectPool 类的代码然后开始讨论:

    using System;
    using System.Collections.Generic;
    using System.Linq;
    using System.Text;
    using System.Collections;
    using System.Timers;
    
    namespace ObjectPoolSample
    {
        public abstract class ObjectPool
        {
            //Last Checkout time of any object from the pool.
            private long lastCheckOut;
    
            //Hashtable of the check-out objects.
            private static Hashtable locked;
    
            //Hashtable of available objects
            private static Hashtable unlocked;
    
            //Clean-Up interval
            internal static long GARBAGE_INTERVAL = 90 * 1000; //90 seconds
            static ObjectPool()
            {
                locked = Hashtable.Synchronized(new Hashtable());
                unlocked = Hashtable.Synchronized(new Hashtable());
            }
    
            internal ObjectPool()
            {
                lastCheckOut = DateTime.Now.Ticks;
    
                //Create a Time to track the expired objects for cleanup.
                Timer aTimer = new Timer();
                aTimer.Enabled = true;
                aTimer.Interval = GARBAGE_INTERVAL;
                aTimer.Elapsed += new ElapsedEventHandler(CollectGarbage);
            }
    
            protected abstract object Create();
    
            protected abstract bool Validate(object o);
    
            protected abstract void Expire(object o);
    
            internal object GetObjectFromPool()
            {
                long now = DateTime.Now.Ticks;
                lastCheckOut = now;
                object o = null;
    
                lock (this)
                {
                    try
                    {
                        foreach (DictionaryEntry myEntry in unlocked)
                        {
                            o = myEntry.Key;
                            unlocked.Remove(o);
                            if (Validate(o))
                            {
                                locked.Add(o, now);
                                return o;
                            }
                            else
                            {
                                Expire(o);
                                o = null;
                            }
                        }
                    }
                    catch (Exception) { }
                    o = Create();
                    locked.Add(o, now);
                }
                return o;
            }
    
            internal void ReturnObjectToPool(object o)
            {
                if (o != null)
                {
                    lock (this)
                    {
                        locked.Remove(o);
                        unlocked.Add(o, DateTime.Now.Ticks);
                    }
                }
            }
    
            private void CollectGarbage(object sender, ElapsedEventArgs ea)
            {
                lock (this)
                {
                    object o;
                    long now = DateTime.Now.Ticks;
                    IDictionaryEnumerator e = unlocked.GetEnumerator();
    
                    try
                    {
                        while (e.MoveNext())
                        {
                            o = e.Key;
    
                            if ((now - (long)unlocked[o]) > GARBAGE_INTERVAL)
                            {
                                unlocked.Remove(o);
                                Expire(o);
                                o = null;
                            }
                        }
                    }
                    catch (Exception) { }
                }
            }
        }
    }

         ObjectPool 类有两个重要的方法:

         1)GetObjectFromPool():从对象池中获取一个对象;

         2)ReturnObjectToPool():把对象还给对象池;

         我们以两个哈希表实现对象池,一个称为locked,另一个称为unlocked。locked 哈希表包含所有正在使用的对象,而unlocked哈希表包含了所有未被使用且可随时使用的对象。ObjectPool 还有三个三个必须重载的方法:Create(),Validate() 和 Expire(),它们必须由继承类实现。

         总而言之,ObjectPool 类中有三个关键部分:
         1)使用GetObjectFromPool():从对象池中获取一个对象,当需要向对象池中添加一个对象时必须使用锁,因为这个过程locked 和 unlocked 哈希表的内容会发生变化,而我们不想在这个过程中发生冲突。
         2)使用ReturnObjectToPool() :把一个对象返回给对象池,同样需要使用锁,理由同上。
         3)使用CollectGarbage():从对象池中清除过期对象,在这个方法中我们遍历unlocked哈希表以便从对象池中找到并移除过期对象。这个过程中unlocked哈希表的内容可能会发生改变,所以我们需要使用锁来保证这一过程是原子操作。

         GetObjectFromPool() 方法中,我们遍历unlocked哈希表来获取第一个可用对象,获得了以后使用Validate() 方法去验证指定对象。基于不同的缓存对象类型,Validate()方法的实现也可能有很大不同。例如,如果对象是一个数据库连接,那么继承对象池的类就需要实现Validate()方法来检查数据库连接是打开的还是关闭的。如果对象池对象验证通过了,我们从unlocked哈希表中移除这个对象并把它放到locked哈希表中。locked 哈希表中的对象表示正在使用的对象,如果验证失败,我们就使用Expired()方法把对象注销。

         Expire()方法也需要通过继承类实现并根据不同的缓存对象类型而有不同的实现形式。还是以一个数据库连接为例,过期对象将关闭数据库连接。如果没有找到一个缓存对象,说明unlocked哈希表是空的,我们使用Create()方法创建一个新对象然后把它放入到locked哈希表中。

         ReturnObjectToPool() 方法的实现相对简单一些。我们仅仅需要将对象从locked哈希表中移除并把它放回unlocked哈希表中以备另用。在整个回收过程中,我们不得不考虑应用程序的内存使用情况。对象池与内存使用量成正比。所以,我们缓存的对象越多,就需要使用更多内存。为了控制内存使用量,我们应该周期性地对池中的对象进行垃圾回收处理。这可以通过对池中每个对象加一个超时周期来实现。如果在超时时间内一个缓存对象没有被使用,那么它将会被作为垃圾回收。结果就是对象池的内存使用量将很大程序上取决于系统负载。

         CollectGarbage() 方法用来处理对象池的垃圾回收。这个方法由ObjectPool构造函数中初始化的一个Timer委托进行调用。在我们的例子中,我们通过GARBAGE_COLLECT 常量将垃圾回收时间间隔定位90秒。

         我们还没有实现任何数据库连接相关的代码,所以我们假设ObjectPool 类可以用于对.NET Framework 中的所有类型进行缓存。

         2、DBConnectionSingleton 类
         DBConnectionSingleton 类实现了一个数据库连接对象池。这个类的主要目的是为继承自ObjectPool 类的特定数据库连接实现Create(),Validate() 和 Expire()方法。这个类也提供BorrowDBConnection() 和 ReturnDBConnection() 方法来从对象池中借出/返还数据库连接。
         DBConnectionSignletion 类的完整代码片段如下:

    using System;
    using System.Collections.Generic;
    using System.Linq;
    using System.Text;
    using System.Data.SqlClient;
    using System.Data;
    
    namespace ObjectPoolSample
    {
        public sealed class DBConnectionSingletion : ObjectPool
        {
            private DBConnectionSingletion() { }
    
            public static readonly DBConnectionSingletion Instance = 
                new DBConnectionSingletion();
    
            private static string connectionString =
                @"server=(local);Trusted Connection=yes;database=northwind";
    
            public static string ConnectionString
            {
                get
                {
                    return connectionString;
                }
                set
                {
                    connectionString = value;
                }
            }
    
            protected override object Create()
            {
                SqlConnection conn = new SqlConnection(connectionString);
                conn.Open();
                return conn;
            }
    
            protected override bool Validate(object o)
            {
                try
                {
                    SqlConnection conn = (SqlConnection)o;
                    return !conn.State.Equals(ConnectionState.Closed);
                }
                catch (SqlException)
                {
                    return false;
                }
            }
    
            protected override void Expire(object o)
            {
                try
                {
                    SqlConnection conn = (SqlConnection)o;
                    conn.Close();
                }
                catch (SqlException) { }
            }
    
            public SqlConnection BorrowDBConnection()
            {
                try
                {
                    return (SqlConnection)base.GetObjectFromPool();
                }
                catch (Exception e)
                {
                    throw e;
                }
            }
    
            public void ReturnDBConnection(SqlConnection conn)
            {
                base.ReturnObjectToPool(conn);
            }
        }
    }

         由于你正在处理的是SqlConnection对象,所以Expire()方法用来关闭SqlConnection,Create() 方法用来创建SqlConnection,而Validate() 则用来检查SqlConnection 是打开的还是关闭的。使用DBConnectionSigleton对象实例可以使整个同步问题对客户端应用程序透明。

         二、为什么要使用单例模式?

         Singleton是一个著名的创建型设计模式,当你需要一个对象仅对应一个实例时通常需要使用它。设计模式一书(ISBN 0-201-70265-7)中对设计单例模式目的定义为保证一个类仅有一个实例,并提供全局唯一的方式来访问它。为了实现一个单例,我们需要一个私有构造函数以便于客户端应用程序无论如何都没法创建一个新对象,使用静态的只读属性来创建单例类的唯一实例。.NET Framework 在JIT 过程中仅当有任何方法使用静态属性时才会将其实例化。如果属性没有被使用,那么也就不会创建实例。更准确地说,仅当有任何类/方法对类的静态成员进行调用时才会构造对应单例类的实例。这个特性称作惰性初始化,并把创建对象的过程留给第一次访问实例属性的代码。.NET Framework 保证共享类型初始化时的类型安全。所以我们不需要担心DBConnectionSingleton对象的线程安全问题,因为在应用程序整个生命周期内只会创建一个实例。实例静态属性维护DBConnectionSingleton类对象的唯一实例。

          三、用数据库连接池

         现在已经准备好使用数据库连接池了,下面的代码片段显示了如何实例化并使用数据库连接池:

    using System;
    using System.Collections.Generic;
    using System.Linq;
    using System.Text;
    using System.Configuration;
    using System.Data.SqlClient;
    
    namespace ObjectPoolSample
    {
        class Program
        {
            static void Main(string[] args)
            {
                //Initialize the Pool
                DBConnectionSingletion pool = DBConnectionSingletion.Instance;
    
                //Set the ConnectionString of the DatabaseConnectionPool
                ConnectionStringSettings settings = ConfigurationManager.ConnectionStrings["NorthwindConnectionString"];
                DBConnectionSingletion.ConnectionString = settings.ConnectionString;
                //Borrow the SqlConnection object from the pool
                SqlConnection conn = pool.BorrowDBConnection();
    
                //Return the Connection to the pool after using it
                pool.ReturnDBConnection(conn);
    
                Console.ReadLine();
            }
        }
    }

         在上面的例子中,我们通过DBConnectionSingletion 类的实例属性来初始化它的实例。如上面讨论的,我们假设使用单例设计模式可以保证我们有且仅有一个DBConnectionSingletion对象的实例。我们把ConnectionString 属性设置为本机SQL Server实例上的北风数据库。现在,我们可以使用对象池的BorrowDBConnection() 方法来从对象池借一个数据库连接, 然后通过调用对象池的ReturnDBConnection() 方法来返还数据库连接。如果你真的想看看应用程序池是如何运行的,那么最好的方式就是打开Visual Studio .NET 中的工程并在调试模式下跟踪上面给出的应用程序代码。

    (备注:代码中,虽然是想表示成以单例模式进行资源的调用,但是此种写法来表示单例意图,并不是很友好,还是建议以属性声明的形式,进行单例模式的代码设计。个人观点)

          四、总结

         在企业级计算的多线程世界中同步是一个极其重要的概念。它被广泛用于数据库,消息队列以及Web 服务器等各种应用上。任何开发多线程应用程序的开发人员都必须对他们的同步概念特别清楚。不是为了让每个对象都是线程安全的,而是应该关注死锁情况并在程序设计之初就解决尽可能多的死锁问题。理解同步带来的性能瓶颈问题同样很重要,因为它将影响应用程序的总体性能。

      此示例代码经过测试后,可以达到动态增加或终止。其实此案例的代码功能与.Net自带的数据库连接池类似,所以可以使用.Net自带的数据库连接池。在数据库连接串中可配置相应参数:

      pooling=true;connection lifetime=2;max pool size=123;min pool size=3

      对于想使用.Net的自身数据库连接池功能,可设置pooling=true。若将其设置为false,同时也想使用数据库连接池的功能,那就要像此示例一样,自己封装了。

    转载链接:http://www.cnblogs.com/danielWise/archive/2012/02/18/2357252.html

  • 相关阅读:
    【BZOJ1801】【AHOI2009】中国象棋(动态规划)
    【BZOJ3436】小K的农场(差分约束)
    【BZOJ2330】【SDOI2012】糖果(差分约束,SPFA)
    【BZOJ4010】【HNOI2015】菜肴制作(拓扑排序)
    【BZOJ2684】【CEOI2004】锯木厂选址(斜率优化,动态规划)
    【BZOJ1096】【ZJOI2007】仓库建设(斜率优化,动态规划)
    吞吐量(TPS)、QPS、并发数、响应时间(RT)概念
    耐得住寂寞,才能守得住繁华
    想成功,就把这九个公式背下来!
    惊人的社会定律(建议收藏!)
  • 原文地址:https://www.cnblogs.com/supersnowyao/p/8681779.html
Copyright © 2020-2023  润新知