Удаление повторяющихся значений столбца из таблицы данных без использования LINQ

Следующий метод сделал то, что я хочу....

public DataTable RemoveDuplicateRows(DataTable dTable, string colName)
    {
        Hashtable hTable = new Hashtable();
        ArrayList duplicateList = new ArrayList();

        //Add list of all the unique item value to hashtable, which stores combination of key, value pair.
        //And add duplicate item value in arraylist.
        foreach (DataRow drow in dTable.Rows)
        {
            if (hTable.Contains(drow[colName]))
                duplicateList.Add(drow);
            else
                hTable.Add(drow[colName], string.Empty);
        }

        //Removing a list of duplicate items from datatable.
        foreach (DataRow dRow in duplicateList)
            dTable.Rows.Remove(dRow);

        //Datatable which contains unique records will be return as output.
        return dTable;
    }

Пока вы читаете файл CSV (немного псевдокода, но вы поняли):

List<String> uniqueMobiles = new List<String>();

String[] fileLines = readYourFile();

for (String line in fileLines) {
   DataRow row = parseLine(line);
   if (uniqueMobiles.Contains(row["MobNum"])
   {
       continue;
   }
   uniqueMobiles.Add(row["MobNum"]);
   yourDataTable.Rows.Add(row);       
}

Это загрузит в вашу таблицу данных только записи с уникальными мобильными телефонами.

Это самый простой способ.

**

var uniqueContacts = dt.AsEnumerable()
                       .GroupBy(x=>x.Field<string>("Email"))
                       .Select(g=>g.First());

** Я нашел это в этой теме -a-specific">LINQ для удаления повторяющихся строк из таблицы данных на основе значения определенной строки

что на самом деле было для меня, что я возвращаю его как datatable

DataTable uniqueContacts = dt.AsEnumerable()
                           .GroupBy(x=>x.Field<string>("Email"))
                           .Select(g=>g.First()).CopyToDataTable();

Возможно, вы захотите посмотреть внутреннюю работу DISTINCT, прежде чем запускать это в своей резкой БД (обязательно сделайте резервную копию!), Но если это работает так, как я думаю (захват первого значения), вы сможете использовать (что-то очень похоже на) следующий SQL:

DELETE FROM YourTable WHERE Id NOT IN (SELECT DISTINCT Id, MobNo FROM YourTable);

Вы можете использовать "IEqualityComparer" в С#