Как я могу загрузить пустые строки CSV как NULL в SQL Server при использовании FileHelpers? - PullRequest
Новая
       11

Как я могу загрузить пустые строки CSV как NULL в SQL Server при использовании FileHelpers?

0 голосов
/ 04 марта 2019

Я использую FileHelpers для чтения CSV с целью загрузки таблицы SQL Server.

CSV выглядит примерно так: 

ID, SOMESTRING
"10","Blah blah"
"11",""
"12","More blah blah"

Мой класс отображения записей выглядит примерно такthis: 

[IgnoreFirst, DelimitedRecord(",")]
class Mytable
{
    [FieldQuoted]
    public ulong Id;

    [FieldQuoted]
    [FieldNullValue(typeof(string), null)]
    public string SomeString;
}

Наконец, код для массового копирования в БД: 

  SqlBulkCopy bc = new SqlBulkCopy(mySqlConnection);
  bc.DestinationTableName = "dbo.MYTABLE";
  bc.WriteToServer(new FileHelperEngine<Mytable>().ReadFile(baseDir + "\\" + "MYTABLE.CSV").ToDataTable<Mytable>());

Изначально я не включил атрибут FieldNullValue, но включение его или нет не отображаетсяимеет значения.В обоих случаях строка 11 импортируется как пустая строка в SQL Server.Я хотел бы, чтобы это было NULL.Можно ли это сделать?

Ответы [ 3 ]

0 голосов
/ 05 марта 2019

Если вы имели в виду использование CsvHelper.Да, это может быть сделано.Я смог протестировать ваш сценарий и смог проверить атрибут SOMESTRING = NULL при использовании Microsoft SQL Server Management Studio 2014. В моем примере, используя CsvHelper, преобразовать файл CSV в DataTable, а затем преобразовать любое пустое поле в DBNull.Значение.Вставка измененного DataTable в базу данных с использованием хранимой процедуры базы данных и с использованием пользовательских типов таблиц Наконец, чтение из базы данных -> DataTable и просмотр записей в DataGridView.Вы заметите, что пустые поля имеют значение NULL.

Создайте ТИП 

CREATE TYPE [dbo].[MyProductTableType] AS TABLE(
    [ID] [nvarchar](5) NOT NULL,
    [SOMETHING] [nvarchar](128) NULL
)

Создайте процедуру: 

CREATE PROCEDURE [dbo].[InsertTable]
    @myTableType MyProductTableType readonly
AS
BEGIN
    insert into [dbo].PRODUCTS select * from @myTableType 
END

Код C # при использовании DataGridView и командной кнопки наWindows.Forms 

using System;
using System.Data;
using System.Linq;
using System.Windows.Forms;
using System.Data.SqlClient;
using CsvHelper;

using System.IO;

namespace Stack_Test
{
public partial class Form1 : Form
{
    public Form1()
    {
        InitializeComponent();
    }

    private void button1_Click(object sender, EventArgs e)
    {
        var path = @"C:\Temp\MYTABLE.csv";
        DataTable dt = readCSV(path);

        foreach(DataRow row in dt.Rows)
        {                
            foreach(DataColumn col in dt.Columns)
            {
                if (row.Field<String>(col) == String.Empty)
                {
                    row.SetField(col, DBNull.Value); //row.SetField(col, "NULL"); // Or set the value to any string value of your choice
                }
            }
        }            
        SqlConnection conn = new SqlConnection("Your SQL Connection String");            
        using (var command = new SqlCommand("InsertTable", conn) { CommandType = CommandType.StoredProcedure })
        {
            command.Parameters.Add(new SqlParameter("@myTableType", dt));
            command.Connection.Open();
            command.ExecuteNonQuery();
            command.Dispose();
            dt.Clear();                                                    
        }

        using(var command = new SqlCommand("Select * from PRODUCTS", conn) { CommandType = CommandType.Text})
        {                
            SqlDataReader rdr = command.ExecuteReader();              
            dt.Load(rdr);
            dataGridView1.DataBindings.Clear();
            dataGridView1.DataSource = dt;
            dataGridView1.Refresh();                
            dt.Dispose();
            command.Dispose();
            conn.Close();
            conn.Dispose();
        }            
    } // End button1_Click

с использованием CsvHelper 

public DataTable readCSV(string filePath)
{
    var dt = new DataTable();
    var csv = new CsvReader(new StreamReader(filePath));
    // Creating the columns
    typeof(Product).GetProperties().Select(p => p.Name).ToList().ForEach(x => dt.Columns.Add(x));

    // Adding the rows
    csv.GetRecords<Product>().ToList().ForEach(line => dt.Rows.Add(line.ID, line.SOMETHING));
    return dt;
} // End readCSV : DataTable

Объект класса 

public class Product
{
    public string ID { get; set; }
    public string SOMETHING { get; set; }
} // End class Product

SQL Server - Снимок результата БД

0 голосов
/ 09 марта 2019

С FileHelpers пустая строка будет проанализирована как String.Empty, но вы можете переопределить ее с помощью пользовательского конвертера: 

public class EmptyStringConverter : ConverterBase
{
    public override object StringToField(string sourceString)
    {
        if (String.IsNullOrWhiteSpace(sourceString))
            return null;
        return sourceString;
    }
}

Затем вы определяете свойство класса вашей записи, например, 

[FieldConverter(typeof(EmptyStringConverter))]
public string SomeString;

Если строка, соответствующая SomeString, пуста или пуста, она будет преобразована в ноль.

0 голосов
/ 04 марта 2019

Я не знаком с пакетом FileHelper, который вы используете, но проблема в том, что значение для строки 11 равно "", а не null.

Возможно, вы могли бы расширить определение свойства SomeStringвот так 

private string _SomeString;

[FieldQuoted]
[FieldNullValue(typeof(string), null)]
public string SomeString { get {return _SomeString;} 
                           set {if (value == null || value.length == 0)    
                                    _SomeString = null;
                                else
                                    _SomeString = value;} }
...