在使用FileHelpers时，如何在SQL Server中将CSV空字符串加载为NULL？

Question

我正在使用FileHelpers来读取CSV，目的是加载SQL Server表。

CSV看起来像这样：

ID, SOMESTRING
"10","Blah blah"
"11",""
"12","More blah blah"

我的记录映射类看起来像这样：

[IgnoreFirst, DelimitedRecord(",")]
class Mytable
{
    [FieldQuoted]
    public ulong Id;

    [FieldQuoted]
    [FieldNullValue(typeof(string), null)]
    public string SomeString;
}

最后，批量复制到DB的代码是：

  SqlBulkCopy bc = new SqlBulkCopy(mySqlConnection);
  bc.DestinationTableName = "dbo.MYTABLE";
  bc.WriteToServer(new FileHelperEngine<Mytable>().ReadFile(baseDir + "\\" + "MYTABLE.CSV").ToDataTable<Mytable>());

最初，我没有包含FieldNullValue属性，但包括与否，似乎并不重要。在这两种情况下，第11行都在SQL Server中作为空字符串导入。我希望它是NULL。可以这样做吗？

Answer 1

使用FileHelpers，空字符串将被解析为String.Empty，但您可以使用自定义转换器覆盖它：

public class EmptyStringConverter : ConverterBase
{
    public override object StringToField(string sourceString)
    {
        if (String.IsNullOrWhiteSpace(sourceString))
            return null;
        return sourceString;
    }
}

然后你定义你的记录类属性

[FieldConverter(typeof(EmptyStringConverter))]
public string SomeString;

如果对应于SomeString的字符串为空或空白，则将其转换为null。

Answer 2

如果你的意思是使用CsvHelper。是的，可以做到。我能够测试您的场景，并且能够在使用Microsoft SQL Server Management Studio 2014时验证属性SOMESTRING = NULL。在我的示例中，使用CsvHelper将CSV文件转换为DataTable，然后将任何空的字段转换为DBNull。值。使用数据库存储过程将Modified DataTable插入数据库并使用用户定义的表类型最后，从Database - > DataTable读取并查看DataGridView中的记录。您会注意到空字段为NULL。

创建一个TYPE

CREATE TYPE [dbo].[MyProductTableType] AS TABLE(
    [ID] [nvarchar](5) NOT NULL,
    [SOMETHING] [nvarchar](128) NULL
)

创建程序：

CREATE PROCEDURE [dbo].[InsertTable]
    @myTableType MyProductTableType readonly
AS
BEGIN
    insert into [dbo].PRODUCTS select * from @myTableType 
END

在Windows.Forms上使用DataGridView和命令按钮时的C＃代码

using System;
using System.Data;
using System.Linq;
using System.Windows.Forms;
using System.Data.SqlClient;
using CsvHelper;

using System.IO;

namespace Stack_Test
{
public partial class Form1 : Form
{
    public Form1()
    {
        InitializeComponent();
    }

    private void button1_Click(object sender, EventArgs e)
    {
        var path = @"C:\Temp\MYTABLE.csv";
        DataTable dt = readCSV(path);

        foreach(DataRow row in dt.Rows)
        {                
            foreach(DataColumn col in dt.Columns)
            {
                if (row.Field<String>(col) == String.Empty)
                {
                    row.SetField(col, DBNull.Value); //row.SetField(col, "NULL"); // Or set the value to any string value of your choice
                }
            }
        }            
        SqlConnection conn = new SqlConnection("Your SQL Connection String");            
        using (var command = new SqlCommand("InsertTable", conn) { CommandType = CommandType.StoredProcedure })
        {
            command.Parameters.Add(new SqlParameter("@myTableType", dt));
            command.Connection.Open();
            command.ExecuteNonQuery();
            command.Dispose();
            dt.Clear();                                                    
        }

        using(var command = new SqlCommand("Select * from PRODUCTS", conn) { CommandType = CommandType.Text})
        {                
            SqlDataReader rdr = command.ExecuteReader();              
            dt.Load(rdr);
            dataGridView1.DataBindings.Clear();
            dataGridView1.DataSource = dt;
            dataGridView1.Refresh();                
            dt.Dispose();
            command.Dispose();
            conn.Close();
            conn.Dispose();
        }            
    } // End button1_Click

使用CsvHelper

public DataTable readCSV(string filePath)
{
    var dt = new DataTable();
    var csv = new CsvReader(new StreamReader(filePath));
    // Creating the columns
    typeof(Product).GetProperties().Select(p => p.Name).ToList().ForEach(x => dt.Columns.Add(x));

    // Adding the rows
    csv.GetRecords<Product>().ToList().ForEach(line => dt.Rows.Add(line.ID, line.SOMETHING));
    return dt;
} // End readCSV : DataTable

一个类对象

public class Product
{
    public string ID { get; set; }
    public string SOMETHING { get; set; }
} // End class Product

SQL Server - DB Result Snapshot

Answer 3

我不熟悉您正在使用的FileHelper软件包，但问题是第11行的值是""而不是null。

也许你可以扩展SomeString属性定义，就像这样

private string _SomeString;

[FieldQuoted]
[FieldNullValue(typeof(string), null)]
public string SomeString { get {return _SomeString;} 
                           set {if (value == null || value.length == 0)    
                                    _SomeString = null;
                                else
                                    _SomeString = value;} }