使用SqlBulkCopy提高批量插入数据库性能

SqlBulkCopy是.Net提供的一个可以讲一个表复制到数据库的解决方案，其性能相比INSERT方式插入数据库要快得多，但是，由于实现机制，只适用于多条数据同时插入数据表，不适用于其他操作。

因为是表复制操作，必须有一个数据源，（目标即我们的SqlServer数据库）我们可以讲数据加载到DataTable或可使用IDataReader实例的对象中方可操作。

为了方便操作我们先生成了一个实体类，方便数据库操作。

class Person

{

    public Guid PersonId { get; set; }

    public string Name { get; set; }

    public int Age { get; set; }

    public string Address { get; set; }

}

我们先看SqlCommand的数据插入代码：

static void InsertBySqlCommand()

{

    //准备测试数据

    List<Person> lists = new List<Person>();

    for (int i = 0; i < 1000; i++)

    {

        Person p = new Person();

        p.PersonId = Guid.NewGuid();

        p.Age = i + 1;

        p.Name = "姓名" + (i + 1);

        p.Address = "地址" + (i + 1);

        lists.Add(p);

    }

 

    Stopwatch sw = new Stopwatch();

    sw.Start();

    using (SqlConnection conn = new SqlConnection("Data Source=.;uid=sa;pwd=1234;Initial Catalog=demo"))

    {

        conn.Open();

        foreach (Person p in lists)

        {

            //插入数据

            using (SqlCommand cmd = new SqlCommand("INSERT INTO Person(PersonId,Name,Age,Address) VALUES(@PersonId,@Name,@Age,@Address) ", conn))

            {

                cmd.Parameters.Add(new SqlParameter("PersonId", p.PersonId));

                cmd.Parameters.Add(new SqlParameter("Name", p.Name));

                cmd.Parameters.Add(new SqlParameter("Age", p.Age));

                cmd.Parameters.Add(new SqlParameter("Address", p.Address));

                cmd.ExecuteNonQuery();

            }

        }

    }

    sw.Stop();

    Console.WriteLine("SqlCommand方式插入1000条数据,用时" + sw.ElapsedMilliseconds);

}

下面是SqlBulkCopy的数据插入代码：

static void InsertBySqlBulkCopy()

{

    //准备测试数据

    List<Person> lists = new List<Person>();

    for (int i = 0; i < 1000; i++)

    {

        Person p = new Person();

        p.PersonId = Guid.NewGuid();

        p.Age = i + 1;

        p.Name = "姓名" + (i + 1);

        p.Address = "地址" + (i + 1);

        lists.Add(p);

    }

 

    Stopwatch sw = new Stopwatch();

    sw.Start();

 

    //将List转换到DataTable

    DataTable dt = new DataTable();

    dt.Columns.Add("PersonId", typeof(Guid));

    dt.Columns.Add("Name", typeof(string));

    dt.Columns.Add("Age", typeof(int));

    dt.Columns.Add("Address", typeof(string));

 

    foreach (Person p in lists)

    {

        DataRow row = dt.NewRow();

        row["PersonId"] = p.PersonId;

        row["Name"] = p.Name;

        row["Age"] = p.Age;

        row["Address"] = p.Address;

        dt.Rows.Add(row);

    }

 

    using (SqlConnection conn = new SqlConnection("Data Source=.;uid=sa;pwd=1234;Initial Catalog=demo"))

    {

        conn.Open();

        using (SqlBulkCopy sbc = new SqlBulkCopy(conn))

        {

            sbc.DestinationTableName = "Person";

            sbc.WriteToServer(dt);//插入数据

        }

    }

    sw.Stop();

    Console.WriteLine("SqlBulkCopy方式插入1000条数据,用时" + sw.ElapsedMilliseconds);

}

运行结果：

从结果上很容易看出，SqlBulkCopy要比SqlCommand方式插入数据快得多。

代码下载