Функциональный поток Azure C # - PullRequest
0 голосов
/ 10 октября 2018

Я пытаюсь использовать функцию приложения Azure, чтобы запускать при создании большого двоичного объекта (файл json), а затем раскручивать json в файл CSV и выгружать в другое место хранения.Однако, когда я использую выходную привязку, такую ​​как:

[Blob("test-ex/{name}.csv", FileAccess.Write, Connection = "my_storage_account")] Stream outputBlob

, создается впечатление, что создается 0-байтовый файл независимо от того, пишу я в выходной поток или нет.Почему этот файл создается и как я могу предотвратить его появление?

Дополнительные сведения о написании содержимого CSV приведены ниже:

string csv_contents = "column1,column2,column3";

using (StreamWriter sw = new StreamWriter(outputBlob))
{
    sw.Write(csv_contents);
}

1 Ответ

0 голосов
/ 11 октября 2018

Почему этот файл создается и как я могу предотвратить его появление?

Когда вы вводите BLOB-объект - json, а выходной BLOB-объект - .csv.Я рекомендую, чтобы вы могли использовать string type напрямую.

демонстрационный код :

public static void Run([BlobTrigger("samples-workitems/{name}", Connection = "AzureWebJobsStorage")]string myBlob, string name, [Blob("test2/{name}.csv", FileAccess.Write, Connection = "AzureWebJobsStorage")]out string outputBlob,  TraceWriter log)
{
            var outputstring = jsonToCSV(myBlob, ","); // add your logic to covert json to CSV

            log.Info($"C# Blob trigger function Processed blob\n Name:{name} \n Size: {myBlob.Length} Bytes");
            outputBlob = outputstring;
 }

Если вы хотите использовать Stream типа, мы могли бы скопировать поток в outputBlob.

 public static void Run([BlobTrigger("test/{name}", Connection = "AzureWebJobsStorage")]Stream myBlob, string name, [Blob("test2/{name}.csv", FileAccess.Write, Connection = "AzureWebJobsStorage")] Stream outputBlob, TraceWriter log)
  {
            myBlob.Position = 0;
            var str = StreamToString(myBlob);
            var outputstring =jsonToCSV(str,",");// add your logic to covert json to CSV
            var stream = StringtoStream(outputstring);
            stream.Position = 0;
            stream.CopyTo(outputBlob);
            log.Info($"C# Blob trigger function Processed blob\n Name:{name} \n Size: {myBlob.Length} Bytes");

   }

Я получаю файл json с демонстрационным кодом для csv из другого SO потока .Вы могли бы справиться с этим сами.

 public static DataTable jsonStringToTable(string jsonContent)
 {
       DataTable dt = JsonConvert.DeserializeObject<DataTable>(jsonContent);
       return dt;
 }
 public static string jsonToCSV(string jsonContent, string delimiter)
 {
        StringWriter csvString = new StringWriter();
        using (var csv = new CsvWriter(csvString))
        {

            csv.Configuration.Delimiter = delimiter;

            using (var dt = jsonStringToTable(jsonContent))
            {

                foreach (DataColumn column in dt.Columns)
                {
                    csv.WriteField(column.ColumnName);
                }
                csv.NextRecord();

                foreach (DataRow row in dt.Rows)
                {
                    for (var i = 0; i < dt.Columns.Count; i++)
                    {
                        csv.WriteField(row[i]);
                    }
                    csv.NextRecord();
                }
            }
        }
        return csvString.ToString();
    }

  public static string StreamToString(Stream stream)
  {
        StreamReader reader = new StreamReader(stream);
        string text = reader.ReadToEnd();
        return text;
  }
  public static Stream StringtoStream(string str)
  {
        byte[] byteArray = Encoding.UTF8.GetBytes(str);
        MemoryStream stream = new MemoryStream(byteArray);
        return stream;
  }
...