读取CSV文件并将值存储到数组中


317

我正在尝试读取*.csv-file。

- *.csv文件由用分号(“ ; ”)分隔的两列组成。

我能够*.csv使用StreamReader 读取-file,并能够通过使用Split()函数来分隔每一行。我想将每一列存储到一个单独的数组中,然后显示它。

有可能这样做吗?


2
@Marc:不幸的是,在非英语文化中(例如意大利语),当您将excel保存为CSV时,它";"用作分隔符...这使CSV成为非标准imo :(
digEmAll 2011年

25
我总是将CSV读取为字符分隔值,因为人们会调用CSV文件,即使他们不使用逗号作为分隔符也是如此。实际上,有许多方言具有不同的引用或转义规则,即使理论上有RFC,您也无法真正谈论标准。
CodesInChaos 2011年

1
CSV文件扩展名现在应该更改为
DSV-

对于所有将分隔符上的字符串简单分割的答案,这都不是最好的方法。CSV格式还有更多规则,这些将不涉及。最好使用第三方解析器。更多信息 -dotnetcoretutorials.com/2018/08/04/csv-parsing-in-net-core
iliketocode

Answers:


415

您可以这样做:

using System.IO;

static void Main(string[] args)
{
    using(var reader = new StreamReader(@"C:\test.csv"))
    {
        List<string> listA = new List<string>();
        List<string> listB = new List<string>();
        while (!reader.EndOfStream)
        {
            var line = reader.ReadLine();
            var values = line.Split(';');

            listA.Add(values[0]);
            listB.Add(values[1]);
        }
    }
}

5
为此,我忘记了如何在csv文件中分割行(愚蠢的我!),但是您的解决方案帮助了我:)
Hallaghan 2011年

4
三年多了,这个问题仍然在帮助某人。很遗憾您没有对此接受。
2014年

12
不使用逗号等处理字段值。–
Mike

12
应该using在这里使用一个子句,或者至少手动Close()使用reader它,因为它是一种IDisposible资源。
以色列阿萨夫2015年

30
这也将无法正常解析CSV这样写column1;"Special ; char in string";column3- tools.ietf.org/html/rfc4180
奥莱ķ

173

我最喜欢的CSV解析器是.NET库内置的解析器。这是Microsoft.VisualBasic命名空间内部的隐藏财富。下面是一个示例代码:

using Microsoft.VisualBasic.FileIO;

var path = @"C:\Person.csv"; // Habeeb, "Dubai Media City, Dubai"
using (TextFieldParser csvParser = new TextFieldParser(path))
{
 csvParser.CommentTokens = new string[] { "#" };
 csvParser.SetDelimiters(new string[] { "," });
 csvParser.HasFieldsEnclosedInQuotes = true;

 // Skip the row with the column names
 csvParser.ReadLine();

 while (!csvParser.EndOfData)
 {
  // Read current line fields, pointer moves to the next line.
  string[] fields = csvParser.ReadFields();
  string Name = fields[0];
  string Address = fields[1];
 }
}

记得添加参考 Microsoft.VisualBasic

有关解析器的更多详细信息,请参见此处:http : //codeskaters.blogspot.ae/2015/11/c-easiest-csv-parser-built-in-net.html


6
我最喜欢这个选项。我不必担心转义字符,因为该类是CSV解析器,而不是手动构建的东西。
蒂莫西·冈萨雷斯

22
如果有人遇到这个问题并想知道,您将需要包括对Microsoft.VisualBasic框架程序集的引用,因为默认情况下通常不会引用该程序集。
apokryfos

3
我希望我在VB6的日子里记得这一点,多年来可以为我节省很多时间。尽管有些人会抱怨VB,但如果它具有价值,我将dll和命名空间添加到我的代码中就没有问题。这具有很多价值。
沃尔特

2
该解决方案是本垒打。根据我的经验,它是非常可靠的解析器。
Glenn Ferrie

3
为什么只在VB dll中?
Mark Choi

75

LINQ方式:

var lines = File.ReadAllLines("test.txt").Select(a => a.Split(';'));
var csv = from line in lines
          select (from piece in line
                  select piece);

^^错- 尼克(Nick)编辑

似乎原始应答程序正在尝试填充csv二维数组-包含数组的数组。第一个数组中的每个项目都包含一个表示该行号的数组,而嵌套数组中的每个项目都包含该特定列的数据。

var csv = from line in lines
          select (line.Split(',')).ToArray();

2
也许我缺少了一些东西,但是我不确定csv变量的意义是-您是否只是重新创建行中已经存在的相同数据结构?
本·休斯

13
@ClayShannon .NET 1.1吗?我...很抱歉
contactmatt

5
@contactmatt:我不会拒绝你的那种情绪。
B. Clay Shannon

9
我还想指出的是,csv可以用引号引起来...因此,使用string.Split不是一个可行的选择。
Alxandr

5
我得到:'System.Array'不包含'Split'的定义,找不到扩展方法'Split'接受类型为'System.Array'的第一个参数(您是否缺少using指令或程序集引用?)
Kala J

36

您无法立即创建一个数组,因为您需要从头开始就知道行数(这需要两次读取csv文件)

您可以将值存储为两个List<T>,然后使用它们,或使用List<T>.ToArray()

很简单的例子:

var column1 = new List<string>();
var column2 = new List<string>();
using (var rd = new StreamReader("filename.csv"))
{
    while (!rd.EndOfStream)
    {
        var splits = rd.ReadLine().Split(';');
        column1.Add(splits[0]);
        column2.Add(splits[1]);
    }
}
// print column1
Console.WriteLine("Column 1:");
foreach (var element in column1)
    Console.WriteLine(element);

// print column2
Console.WriteLine("Column 2:");
foreach (var element in column2)
    Console.WriteLine(element);

NB

请注意,这只是一个非常简单的示例。使用string.Split不解决某些记录在其中包含分隔符的;情况。
为了更安全,请考虑在nuget上使用某些csv特定的库,例如CsvHelper。


不说明;是值的一部分,例如"value with ; inside it"。包含特殊字符并带有双引号的CSV环绕值表示它是文字字符串。
ChickenFeet

1
@ChickenFeet:当然,这就是标题的原因:“非常简单的例子”。无论如何,我都可以添加一条注释;)
digEmAll

不用担心,我注意到这里还有很多其他答案也没有说明:)
ChickenFeet 18'Dec 12'9

1
Regex.Split(sr.ReadLine(),“,(?=(?:[^ \”] * \“ [^ \”] * \“)* [^ \”] * $)“); //找到比图书馆还快
。–捏

34

刚遇到这个库: https //github.com/JoshClose/CsvHelper

非常直观且易于使用。也有一个nuget软件包,可以快速实现: http。我也很喜欢积极维护。

配置它以使用分号很容易:https : //github.com/JoshClose/CsvHelper/wiki/Custom-Configurations


3
这是最好的答案!健壮的库,易于插入和滚动。
泰勒·福赛斯

3
CsvHelper库很棒。超级快速且易于使用。
Steve Parish 2014年

3
如果您正在寻找一种可以处理csv格式各个方面(包括带引号的字符串)的库,请使用此库。太棒了!
马特

Thx,非常漂亮的库,易于使用且非常强大。
塞巴斯蒂安·格雷罗

2
表现如何Microsoft.VisualBasic.FileIO.TextFieldParser(与@Habeeb的答案相比)?
bovender

33

我通常使用来自codeproject的解析器,因为有很多字符转义符以及类似的字符转义符。


2
这个东西非常好而且很快。如果您处在业务状况中并且需要破解,请使用此功能。
gjvdkamp 2011年

8
如果您不想注册CodeProject来下载该解析器,则可以在Nuget画廊中找到它的LumenWorks.Framework.IO。
Greg McCoy 2015年

30

这是我投票最多的答案的变体:

var contents = File.ReadAllText(filename).Split('\n');
var csv = from line in contents
          select line.Split(',').ToArray();

csv然后可以在以下示例中使用该变量:

int headerRows = 5;
foreach (var row in csv.Skip(headerRows)
    .TakeWhile(r => r.Length > 1 && r.Last().Trim().Length > 0))
{
    String zerothColumnValue = row[0]; // leftmost column
    var firstColumnValue = row[1];
}

如何访问csv变量中的行和列?
马修·洛克

1
您如何处理转义逗号?
匡威张钧

不处理列内的逗号。最好根据joshb的答案使用功能强大的库CsvHelper
Tim Partridge

11

如果需要跳过(标题)行和/或列,则可以使用它来创建二维数组:

    var lines = File.ReadAllLines(path).Select(a => a.Split(';'));
    var csv = (from line in lines               
               select (from col in line
               select col).Skip(1).ToArray() // skip the first column
              ).Skip(2).ToArray(); // skip 2 headlines

如果您需要在进一步处理数据之前对数据进行整形,这将非常有用(假设前两行由标题组成,第一列是行标题),您不必在数组中包含它,因为您只需想要考虑数据)。

注意:通过使用以下代码,您可以轻松获得标题和第一栏:

    var coltitle = (from line in lines 
                    select line.Skip(1).ToArray() // skip 1st column
                   ).Skip(1).Take(1).FirstOrDefault().ToArray(); // take the 2nd row
    var rowtitle = (from line in lines select line[0] // take 1st column
                   ).Skip(2).ToArray(); // skip 2 headlines

此代码示例假定*.csv文件的以下结构:

CSV矩阵

注意:如果您需要跳过空行-有时很方便,您可以通过插入

    where line.Any(a=>!string.IsNullOrWhiteSpace(a))

from和上面selectLINQ代码示例中的语句之间。


10

您可以在C#中使用Microsoft.VisualBasic.FileIO.TextFieldParser dll,以获得更好的性能

从上面的文章中获取下面的代码示例

static void Main()
{
    string csv_file_path=@"C:\Users\Administrator\Desktop\test.csv";

    DataTable csvData = GetDataTabletFromCSVFile(csv_file_path);

    Console.WriteLine("Rows count:" + csvData.Rows.Count);

    Console.ReadLine();
}


private static DataTable GetDataTabletFromCSVFile(string csv_file_path)
{
    DataTable csvData = new DataTable();

    try
    {

    using(TextFieldParser csvReader = new TextFieldParser(csv_file_path))
        {
            csvReader.SetDelimiters(new string[] { "," });
            csvReader.HasFieldsEnclosedInQuotes = true;
            string[] colFields = csvReader.ReadFields();
            foreach (string column in colFields)
            {
                DataColumn datecolumn = new DataColumn(column);
                datecolumn.AllowDBNull = true;
                csvData.Columns.Add(datecolumn);
            }

            while (!csvReader.EndOfData)
            {
                string[] fieldData = csvReader.ReadFields();
                //Making empty value as null
                for (int i = 0; i < fieldData.Length; i++)
                {
                    if (fieldData[i] == "")
                    {
                        fieldData[i] = null;
                    }
                }
                csvData.Rows.Add(fieldData);
            }
        }
    }
    catch (Exception ex)
    {
    }
    return csvData;
}

9
它效率不高,因为Split无法完成TextFieldParser的所有工作。例如,跳过注释行,处理带引号的字段,并删除开始/结尾的空格。不完全是1:1的比较。
罗伯特·麦基

5

大家好,我为此创建了一个静态类。+列检查+配额符号删除

public static class CSV
{
    public static List<string[]> Import(string file, char csvDelimiter, bool ignoreHeadline, bool removeQuoteSign)
    {
        return ReadCSVFile(file, csvDelimiter, ignoreHeadline, removeQuoteSign);
    }

    private static List<string[]> ReadCSVFile(string filename, char csvDelimiter, bool ignoreHeadline, bool removeQuoteSign)
    {
        string[] result = new string[0];
        List<string[]> lst = new List<string[]>();

        string line;
        int currentLineNumner = 0;
        int columnCount = 0;

        // Read the file and display it line by line.  
        using (System.IO.StreamReader file = new System.IO.StreamReader(filename))
        {
            while ((line = file.ReadLine()) != null)
            {
                currentLineNumner++;
                string[] strAr = line.Split(csvDelimiter);
                // save column count of dirst line
                if (currentLineNumner == 1)
                {
                    columnCount = strAr.Count();
                }
                else
                {
                    //Check column count of every other lines
                    if (strAr.Count() != columnCount)
                    {
                        throw new Exception(string.Format("CSV Import Exception: Wrong column count in line {0}", currentLineNumner));
                    }
                }

                if (removeQuoteSign) strAr = RemoveQouteSign(strAr);

                if (ignoreHeadline)
                {
                    if(currentLineNumner !=1) lst.Add(strAr);
                }
                else
                {
                    lst.Add(strAr);
                }
            }

        }

        return lst;
    }
    private static string[] RemoveQouteSign(string[] ar)
    {
        for (int i = 0;i< ar.Count() ; i++)
        {
            if (ar[i].StartsWith("\"") || ar[i].StartsWith("'")) ar[i] = ar[i].Substring(1);
            if (ar[i].EndsWith("\"") || ar[i].EndsWith("'")) ar[i] = ar[i].Substring(0,ar[i].Length-1);

        }
        return ar;
    }

}

4
var firstColumn = new List<string>();
var lastColumn = new List<string>();

// your code for reading CSV file

foreach(var line in file)
{
    var array = line.Split(';');
    firstColumn.Add(array[0]);
    lastColumn.Add(array[1]);
}

var firstArray = firstColumn.ToArray();
var lastArray = lastColumn.ToArray();

谢谢你的帮助。这可能有助于解决我的问题。实际上,我必须从文件读取数据,然后将其插入数据库。在插入时,我遇到主键约束错误(因为我已经在数据库中有数据)。因此,我需要进行编程以使变量已经存在,然后更新数据。
Rushabh Shah

我假设第一个值是PK-您需要按ID从数据库中获取一条记录,如果存在,则要发出UPDATE语句,否则插入一条新记录。
Jakub Konecki 2011年

3

这是一种特殊情况,其中一个数据字段具有分号(“;”)作为其数据的一部分,在这种情况下,上面的大多数答案都会失败。

解决情况

string[] csvRows = System.IO.File.ReadAllLines(FullyQaulifiedFileName);
string[] fields = null;
List<string> lstFields;
string field;
bool quoteStarted = false;
foreach (string csvRow in csvRows)
{
    lstFields = new List<string>();
    field = "";
    for (int i = 0; i < csvRow.Length; i++)
    {
        string tmp = csvRow.ElementAt(i).ToString();
        if(String.Compare(tmp,"\"")==0)
        {
            quoteStarted = !quoteStarted;
        }
        if (String.Compare(tmp, ";") == 0 && !quoteStarted)
        {
            lstFields.Add(field);
            field = "";
        }
        else if (String.Compare(tmp, "\"") != 0)
        {
            field += tmp;
        }
    }
    if(!string.IsNullOrEmpty(field))
    {
        lstFields.Add(field);
        field = "";
    }
// This will hold values for each column for current row under processing
    fields = lstFields.ToArray(); 
}

2

开源Angara.Table库允许将CSV加载到类型化的列中,因此您可以从列中获取数组。每一列都可以按名称或索引建立索引。参见http://predictionmachines.github.io/Angara.Table/saveload.html

该库遵循RFC4180的CSV;它启用类型推断和多行字符串。

例:

using System.Collections.Immutable;
using Angara.Data;
using Angara.Data.DelimitedFile;

...

ReadSettings settings = new ReadSettings(Delimiter.Semicolon, false, true, null, null);
Table table = Table.Load("data.csv", settings);
ImmutableArray<double> a = table["double-column-name"].Rows.AsReal;

for(int i = 0; i < a.Length; i++)
{
    Console.WriteLine("{0}: {1}", i, a[i]);
}

您可以使用“列”类型查看列类型,例如

Column c = table["double-column-name"];
Console.WriteLine("Column {0} is double: {1}", c.Name, c.Rows.IsRealColumn);

由于该库专注于F#,因此您可能需要添加对FSharp.Core 4.4程序集的引用。在项目上单击“添加引用”,然后在“组件”->“扩展”下选择FSharp.Core 4.4。


2

我花了几个小时寻找合适的库,但是最后我写了我自己的代码:)您可以使用任何所需的工具读取文件(或数据库),然后将以下例程应用于每一行:

private static string[] SmartSplit(string line, char separator = ',')
{
    var inQuotes = false;
    var token = "";
    var lines = new List<string>();
    for (var i = 0; i < line.Length; i++) {
        var ch = line[i];
        if (inQuotes) // process string in quotes, 
        {
            if (ch == '"') {
                if (i<line.Length-1 && line[i + 1] == '"') {
                    i++;
                    token += '"';
                }
                else inQuotes = false;
            } else token += ch;
        } else {
            if (ch == '"') inQuotes = true;
            else if (ch == separator) {
                lines.Add(token);
                token = "";
                } else token += ch;
            }
    }
    lines.Add(token);
    return lines.ToArray();
}

1

我已经使用csvreader.com(付费组件)多年了,我从来没有遇到过问题。它坚固,小巧且快速,但您必须为此付出代价。您可以将定界符设置为任何您喜欢的。

using (CsvReader reader = new CsvReader(s) {
    reader.Settings.Delimiter = ';';
    reader.ReadHeaders();  // if headers on a line by themselves.  Makes reader.Headers[] available
    while (reader.ReadRecord())
        ... use reader.Values[col_i] ...
}

1

我只是研究硕士论文的学生,但是这就是我解决问题的方式,对我来说很好。首先,您从目录中选择文件(仅采用csv格式),然后将数据放入列表中。

List<float> t = new List<float>();
List<float> SensorI = new List<float>();
List<float> SensorII = new List<float>();
List<float> SensorIII = new List<float>();
using (OpenFileDialog dialog = new OpenFileDialog())
{
    try
    {
        dialog.Filter = "csv files (*.csv)|*.csv";
        dialog.Multiselect = false;
        dialog.InitialDirectory = ".";
        dialog.Title = "Select file (only in csv format)";
        if (dialog.ShowDialog() == DialogResult.OK)
        {
            var fs = File.ReadAllLines(dialog.FileName).Select(a => a.Split(';'));
            int counter = 0;
            foreach (var line in fs)
            {
                counter++;
                if (counter > 2)    // Skip first two headder lines
                {
                    this.t.Add(float.Parse(line[0]));
                    this.SensorI.Add(float.Parse(line[1]));
                    this.SensorII.Add(float.Parse(line[2]));
                    this.SensorIII.Add(float.Parse(line[3]));
                }
            }
        }
    }
    catch (Exception exc)
    {
        MessageBox.Show(
            "Error while opening the file.\n" + exc.Message, 
            this.Text, 
            MessageBoxButtons.OK, 
            MessageBoxIcon.Error
        );
    }
}

0

还是错。您需要在引号中补偿“”。这是我的解决方案Microsoft样式csv。

               /// <summary>
    /// Microsoft style csv file.  " is the quote character, "" is an escaped quote.
    /// </summary>
    /// <param name="fileName"></param>
    /// <param name="sepChar"></param>
    /// <param name="quoteChar"></param>
    /// <param name="escChar"></param>
    /// <returns></returns>
    public static List<string[]> ReadCSVFileMSStyle(string fileName, char sepChar = ',', char quoteChar = '"')
    {
        List<string[]> ret = new List<string[]>();

        string[] csvRows = System.IO.File.ReadAllLines(fileName);

        foreach (string csvRow in csvRows)
        {
            bool inQuotes = false;
            List<string> fields = new List<string>();
            string field = "";
            for (int i = 0; i < csvRow.Length; i++)
            {
                if (inQuotes)
                {
                    // Is it a "" inside quoted area? (escaped litteral quote)
                    if(i < csvRow.Length - 1 && csvRow[i] == quoteChar && csvRow[i+1] == quoteChar)
                    {
                        i++;
                        field += quoteChar;
                    }
                    else if(csvRow[i] == quoteChar)
                    {
                        inQuotes = false;
                    }
                    else
                    {
                        field += csvRow[i];
                    }
                }
                else // Not in quoted region
                {
                     if (csvRow[i] == quoteChar)
                    {
                        inQuotes = true;
                    }
                    if (csvRow[i] == sepChar)
                    {
                        fields.Add(field);
                        field = "";
                    }
                    else 
                    {
                        field += csvRow[i];
                    }
                }
            }
            if (!string.IsNullOrEmpty(field))
            {
                fields.Add(field);
                field = "";
            }
            ret.Add(fields.ToArray());
        }

        return ret;
    }
}

3
当列值内有换行符时,它将无法处理;)
Emil

0

我有一个图书馆可以满足您的需求。

不久前,我编写了足够简单,足够快的库来处理CSV文件。您可以通过以下链接找到它:https : //github.com/ukushu/DataExporter

它可以像2维数组一样使用CSV。正是您需要的。

例如,如果您需要第三行的所有值,则只需要编写:

Csv csv = new Csv();

csv.FileOpen("c:\\file1.csv");

var allValuesOf3rdRow = csv.Rows[2];

或读取的第二个单元格

var value = csv.Rows[2][1];

-1

看这个

使用CsvFramework;

使用System.Collections.Generic;

命名空间CvsParser {

public class Customer
{
    public int Id { get; set; }
    public string Name { get; set; }
    public List<Order> Orders { get; set; }        
}

public class Order
{
    public int Id { get; set; }

    public int CustomerId { get; set; }
    public int Quantity { get; set; }

    public int Amount { get; set; }

    public List<OrderItem> OrderItems { get; set; }

}

public class Address
{
    public int Id { get; set; }
    public int CustomerId { get; set; }

    public string Name { get; set; }
}

public class OrderItem
{
    public int Id { get; set; }
    public int OrderId { get; set; }

    public string ProductName { get; set; }
}

class Program
{
    static void Main(string[] args)
    {

        var customerLines = System.IO.File.ReadAllLines(@"Customers.csv");
        var orderLines = System.IO.File.ReadAllLines(@"Orders.csv");
        var orderItemLines = System.IO.File.ReadAllLines(@"OrderItemLines.csv");

        CsvFactory.Register<Customer>(builder =>
        {
            builder.Add(a => a.Id).Type(typeof(int)).Index(0).IsKey(true);
            builder.Add(a => a.Name).Type(typeof(string)).Index(1);
            builder.AddNavigation(n => n.Orders).RelationKey<Order, int>(k => k.CustomerId);

        }, false, ',', customerLines);

        CsvFactory.Register<Order>(builder =>
        {
            builder.Add(a => a.Id).Type(typeof(int)).Index(0).IsKey(true);
            builder.Add(a => a.CustomerId).Type(typeof(int)).Index(1);
            builder.Add(a => a.Quantity).Type(typeof(int)).Index(2);
            builder.Add(a => a.Amount).Type(typeof(int)).Index(3);
            builder.AddNavigation(n => n.OrderItems).RelationKey<OrderItem, int>(k => k.OrderId);

        }, true, ',', orderLines);


        CsvFactory.Register<OrderItem>(builder =>
        {
            builder.Add(a => a.Id).Type(typeof(int)).Index(0).IsKey(true);
            builder.Add(a => a.OrderId).Type(typeof(int)).Index(1);
            builder.Add(a => a.ProductName).Type(typeof(string)).Index(2);


        }, false, ',', orderItemLines);



        var customers = CsvFactory.Parse<Customer>();


    }
}

}

By using our site, you acknowledge that you have read and understand our Cookie Policy and Privacy Policy.
Licensed under cc by-sa 3.0 with attribution required.