DataView可以帮我们直接获取Distinct数据

最新推荐文章于 2018-04-03 17:39:00 发布
翻译 最新推荐文章于 2018-04-03 17:39:00 发布 · 857 阅读 · 1

本文介绍如何使用DataView在.NET中高效地获取DataTable中的Distinct数据，通过指定字段来实现数据的去重。
DataView可以帮我们直接获取Distinct数据
DataTable dataTable;
DataView dataView = dataTable.DefaultView;
DataTable dataTableDistinct = dataView.ToTable(true,"FieldName1","FieldName2","...");//注：其中ToTable()的第一个参数为是否DISTINCT
C# DataTable抽取Distinct数据（不重复数据）[z]
didui8202的博客
03-18 1707
DataTable dataTable; DataView dataView = dataTable.DefaultView; DataTable dataTableDistinct = dataView.ToTable(true,"FieldName1","...
Echarts—柱状图动态获取数据示例（java版本）
邓商羽的博客
06-27 3672
最终效果 饼状图：饼状图示例，使劲点我！！！ 折线图：折线图示例，使劲点我！！！ 步骤：准备一个dom——>获取dom节点——>初始化——>绘制图表——>渲染数据 html代码 创建一个指定大小的dom <el-col :span="12"> <div id="chartColumn" style="width:100%; heig...
DataView 的 Distinct 功能
weixin_30325487的博客
01-12 157
DataView 的 RowFilter 沒有 distinct 功能，所以實作此功能，將 distinct DataView 的結果存入 ArrayList。 //Get Distinct Data from DataViewprivate ArrayList GetDistinctData(ref DataView dv, ref ArrayList al, string co...
DataView Distinct
weixin_30802273的博客
05-20 131
dataview 可以将一个dt重新排序 或是筛选 可是如果要实现distinct 得话好像没有直接得方法,要实现discinct和count的话 研究了一下可以按下面的方法来做 可能效率低了点 可是暂时没有更好的方法了 呵呵 SqlConnectioncon=newSqlConnection(Constr);SqlDataAdapterda...
DataView 过滤、排序、DISTINCT功能
luols的专栏
04-28 4775
DataView不知道还有这么好用的功能，真是一种享受。多说无益，还是让我们一起去享受下这种快感吧 这里首先新建了一个数据集testDataSet，新建一testDataTableDataTable添加了4列字段字段名                      类型stringVar          System.StringintVar              
如何获取datatable的数据C#
07-30
可以使用 `SqlDataAdapter` 从 SQL Server 数据库中获取数据填充到 `DataTable` 中。 ```csharp using System; using System.Data; using System.Data.SqlClient; public class DataTableExample { public static...
输入量是一个dataview
10-28
// 从DataView获取基础DataTable DataTable dataTable = dataView.Table; // 验证DataTable结构是否包含所需列（与之前相同） if (!dataTable.Columns.Contains("tagetime") || !dataTable.Columns.Contains(...
public static DataTable GetCompletedDataTable(DataView dataView) { if (dataView == null) throw new ArgumentNullException(nameof(dataView)); // 复制原始DataTable结构（不包含数据） DataTable resultTable = dataView.Table.Clone(); // 验证必需列 string[] requiredColumns = { "factoryDate", "bindef", "rn", "failrate" }; foreach (string col in requiredColumns) { if (!resultTable.Columns.Contains(col)) throw new ArgumentException($"DataTable缺少必需的列: {col}"); } // 步骤1: 获取基准时间序列（所有唯一tagetime） var allTagetimes = dataView.Table.AsEnumerable() .Select(row => row["factoryDate"]) .Distinct() .ToList(); // 如果无数据，返回空表 if (allTagetimes.Count == 0) return resultTable; // 步骤2: 获取所有唯一的(rn, bin)组合 var rnBinGroups = dataView.Table.AsEnumerable() .GroupBy(row => new { Rn = row["rn"], Bin = row["bindef"] }) .ToList(); // 步骤3: 处理每个分组 foreach (var group in rnBinGroups) { var currentRn = group.Key.Rn; var currentBin = group.Key.Bin; // 当前组的所有现有行（直接添加到结果表） foreach (DataRow existingRow in group) { resultTable.ImportRow(existingRow); } // 获取当前组的所有现有tagetime var existingTagetimes = group .Select(row => row["factoryDate"]) .ToList(); // 识别缺失的tagetime var missingTagetimes = allTagetimes .Except(existingTagetimes) .ToList(); // 获取参考行（用于prod和其他字段） var referenceRow = group.First(); // 添加缺失的行 foreach (var missingTagetime in missingTagetimes) { DataRow newRow = resultTable.NewRow(); newRow["factoryDate"] = missingTagetime; newRow["rn"] = currentRn; newRow["bindef"] = currentBin; newRow["failrate"] = 0.0; // 设置failrate为0 resultTable.Rows.Add(newRow); } } // 步骤1: 按 bin 和 rn 分组 var groupedData = resultTable.AsEnumerable() .GroupBy(row => new { Bin = row["bindef"], Rn = row["rn"] }).ToList(); // 步骤2: 组内按 tagtime 排序 var sortedGroups = new List<IEnumerable<DataRow>>(); foreach (var group in groupedData) { // 组内排序 var sortedGroup = group .OrderBy(row => ConvertToComparable(row["factoryDate"])) .ToList(); sortedGroups.Add(sortedGroup); } // 步骤3: 合并排序后的组 var finalSortedRows = sortedGroups .OrderBy(g => ConvertToComparable(g.First()["bindef"])) .ThenBy(g => ConvertToComparable(g.First()["rn"])) .SelectMany(g => g) .ToList(); // 步骤4: 替换原始数据 resultTable.Clear(); foreach (DataRow row in finalSortedRows) { DataRow newRow = resultTable.NewRow(); // 复制每个列的值 foreach (DataColumn col in resultTable.Columns) { newRow[col.ColumnName] = row[col.ColumnName]; } resultTable.Rows.Add(newRow); } return resultTable; }finalSortedRows 直接生成一个新的datatable
最新发布
10-28
但是，我们可以直接创建一个新的DataTable并导入排序后的行，以避免任何可能的副作用。 修改步骤： 1. 在排序后，创建一个新的DataTable（克隆结构）。 2. 将排序后的行（finalSortedRows）导入到这个新表中。 ...
C#程序中使用DataView的ToTable方法实现distinct功能
Violinlins
11-27 4454
在大数据量查询中经常会碰到使用distinct来获取所有不同的数据，然后当数据量达到一定数量时，distinct会是查询效率降低，是查询时间集中在排序区分上面。导致查询缓慢。如果将distinct这部分功能放在代码中则会是查询效率提升。同时将distinct这部分的在程序中来解决的话则可以极大的缓解数据库的压力，而程序部分的则很容易提升。相对来说。数据库的资源比其他资源要宝贵的多。好了。前话到这里
DataView RowFilter 的语法
lingxyd 的专栏
03-20 1万+
之前由于没有深入研究DataTable、DataSet、DataView的方面的知识，最近用到了在DataTable中做数据处理操作，比如：过滤、排序、屡重、分组等。进而搜索了大量资料来来了解这方面的知识。突然发现其实DataView在数据处理方面的确很强大！ 下面的内容主要是转载于：《DataView RowFilter Syntax [C#]》 This example descr
DataTable不要导入重复项,datagridview中设定
brian0031的专栏
10-28 976
DataTable不要导入重复项, 在datagridview中设定 DataTable dt = new DataTable(); dt.PrimaryKey = new DataColumn[] { dt.Columns["产品编号"], dt.Columns["号头"] };//产品编号,号头设置为"联合主键"，不要重复导入信息(重复信息)
Datatable 筛选字段并使用distinct筛选唯一值
liuguobo的专栏
04-09 2万+
 原来DataTable的Distinct竟如此简单! 有时我们需要从DataTable中抽取Distinct数据，以前总是以对DataTable进行foreach之类纯手工方式获取。 近来发现DataView可以帮我们直接获取Distinct数据，汗一个！ DataTable dataTable; DataView dataView = dataTable.DefaultView;
C# DataTable抽取Distinct数据（不重复数据）
热门推荐
鞠勇鸿的技术专栏
01-07 2万+
DataTable dataTable; DataView dataView = dataTable.DefaultView; DataTable dataTableDistinct = dataView.ToTable(true,"FieldName1","FieldName2","...");//注：其中ToTable（）的第一个参数为是否DISTINCT
去除DataTable重复数据的三种方法（转）
weixin_34258782的博客
04-03 1844
转自：https://www.cnblogs.com/sunxi/p/4767577.html 业务需求 最近做一个把源数据库的数据批次导出到目标数据库。源数据库是采集程序采集而来的原始数据库，所以需要对其进行一些处理（过滤一些为空，长度太短或太长，非法字符，重复数据）然后在进行入库。 其中要避免目标库插入重复数据。这重复数据可能是源数据库本身就有重复数据，还有就是已经插入避免重复插入。 过滤自...
DataTable中如何去除重复的项
Travelling1006的专栏
12-28 142
DataView dv =dataTable.DefaultView; DataTable dt = dv.ToTable(true, "Name"); 　　 转载于:https://www.cnblogs.com/talentzemin/p/4190318.html
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值