热门标签 | HotTags
当前位置:  开发笔记 > 编程语言 > 正文

C#-解决从数据库中筛选未使用ID的问题

本文探讨了如何在C#应用程序中有效处理来自两个不同数据库的数据,特别是当需要从一个数据库中选择不在另一个大型集合中的ID时遇到的挑战和解决方案。

在构建涉及两个独立数据库的应用时,遇到了一个特定的需求:需要从一个数据库中获取一组ID,这些ID不在另一个数据库的某个表中出现。具体来说,我有一个称为Permit的对象,该对象包含一个ID列表,这些ID引用了另一个数据库中的任务记录。

尝试实现这一需求时,我使用了如下的SQL查询:

var listOfUsedIds = select taskid from Permit_Task;
Select * from task where id not in (listOfUsedIds)

然而,这段代码执行时抛出了一个错误,指出RPC请求中提供的参数过多,超过了2100个的最大限制。

由于NHibernate框架的限制,我不能直接在两个数据库之间执行这样的查询。面对这一挑战,我探索了几种可能的解决方案。

首先,可以通过创建临时表来绕过参数数量的限制。具体步骤如下:

using (var tx = session.BeginTransaction())
{
session.CreateSQLQuery("CREATE TEMP TABLE usedIds (id INT)").ExecuteUpdate();
foreach (var id in ids)
{
session.CreateSQLQuery("INSERT INTO usedIds VALUES (:id)")
.SetParameter("id", id)
.ExecuteUpdate();
}
session.CreateSQLQuery("CREATE INDEX usedIds_idx ON usedIds (id)").ExecuteUpdate();
var batchSize = 1000;
int offset = 0;
bool hasMoreResults = true;
while (hasMoreResults)
{
var results = session.CreateSQLQuery("SELECT id FROM tasks WHERE id NOT IN (SELECT id FROM usedIds) LIMIT @batchSize OFFSET @offset")
.SetInt32("batchSize", batchSize)
.SetInt32("offset", offset)
.List();
if (results.Count > 0)
{
// 处理结果
offset += results.Count;
}
else
{
hasMoreResults = false;
}
}
tx.Commit();
}

此外,还可以通过映射属性的方法来间接实现目标。例如,可以在实体映射中定义一个计算属性,用于检查某个ID是否存在于临时表中:

public TaskMap()
{
Map(x => x.IsUsed).Formula("(SELECT COUNT(*) FROM usedIds u WHERE u.Id = Id)").LazyLoad();
}
var tasks = session.QueryOver()
.Where(t => t.IsUsed == 0)
.List();

以上两种方法均可有效解决原始问题,同时避免了参数数量限制的问题。希望这些解决方案能为面临类似问题的开发者提供帮助。


推荐阅读
  • 深入了解 Windows 窗体中的 SplitContainer 控件
    SplitContainer 控件是 Windows 窗体中的一种复合控件,由两个可调整大小的面板和一个可移动的拆分条组成。本文将详细介绍其功能、属性以及如何通过编程方式创建复杂的用户界面。 ... [详细]
  • 本文详细介绍 Go+ 编程语言中的上下文处理机制,涵盖其基本概念、关键方法及应用场景。Go+ 是一门结合了 Go 的高效工程开发特性和 Python 数据科学功能的编程语言。 ... [详细]
  • dotnet 通过 Elmish.WPF 使用 F# 编写 WPF 应用
    本文来安利大家一个有趣而且强大的库,通过F#和C#混合编程编写WPF应用,可以在WPF中使用到F#强大的数据处理能力在GitHub上完全开源Elmis ... [详细]
  • 本文深入探讨了Python中的高阶函数和Lambda表达式的使用方法,结合实际案例解析其应用场景,帮助开发者更好地理解和运用这些强大的工具。 ... [详细]
  • C# LiNQ 查询 join连接
    C# LiNQ 查询 join连接 ... [详细]
  • 开发笔记:2020 BJDCTF Re encode
    开发笔记:2020 BJDCTF Re encode ... [详细]
  • 本文详细探讨了HTML表单中GET和POST请求的区别,包括它们的工作原理、数据传输方式、安全性及适用场景。同时,通过实例展示了如何在Servlet中处理这两种请求。 ... [详细]
  • 优化ListView性能
    本文深入探讨了如何通过多种技术手段优化ListView的性能,包括视图复用、ViewHolder模式、分批加载数据、图片优化及内存管理等。这些方法能够显著提升应用的响应速度和用户体验。 ... [详细]
  • 技术分享:从动态网站提取站点密钥的解决方案
    本文探讨了如何从动态网站中提取站点密钥,特别是针对验证码(reCAPTCHA)的处理方法。通过结合Selenium和requests库,提供了详细的代码示例和优化建议。 ... [详细]
  • 1:有如下一段程序:packagea.b.c;publicclassTest{privatestaticinti0;publicintgetNext(){return ... [详细]
  • C++实现经典排序算法
    本文详细介绍了七种经典的排序算法及其性能分析。每种算法的平均、最坏和最好情况的时间复杂度、辅助空间需求以及稳定性都被列出,帮助读者全面了解这些排序方法的特点。 ... [详细]
  • 本文详细介绍了Akka中的BackoffSupervisor机制,探讨其在处理持久化失败和Actor重启时的应用。通过具体示例,展示了如何配置和使用BackoffSupervisor以实现更细粒度的异常处理。 ... [详细]
  • 将Web服务部署到Tomcat
    本文介绍了如何在JDeveloper 12c中创建一个Java项目,并将其打包为Web服务,然后部署到Tomcat服务器。内容涵盖从项目创建、编写Web服务代码、配置相关XML文件到最终的本地部署和验证。 ... [详细]
  • 360SRC安全应急响应:从漏洞提交到修复的全过程
    本文详细介绍了360SRC平台处理一起关键安全事件的过程,涵盖从漏洞提交、验证、排查到最终修复的各个环节。通过这一案例,展示了360在安全应急响应方面的专业能力和严谨态度。 ... [详细]
  • 本题探讨如何通过最大流算法解决农场排水系统的设计问题。题目要求计算从水源点到汇合点的最大水流速率,使用经典的EK(Edmonds-Karp)和Dinic算法进行求解。 ... [详细]
author-avatar
mobiledu2502891563
这个家伙很懒,什么也没留下!
PHP1.CN | 中国最专业的PHP中文社区 | DevBox开发工具箱 | json解析格式化 |PHP资讯 | PHP教程 | 数据库技术 | 服务器技术 | 前端开发技术 | PHP框架 | 开发工具 | 在线工具
Copyright © 1998 - 2020 PHP1.CN. All Rights Reserved | 京公网安备 11010802041100号 | 京ICP备19059560号-4 | PHP1.CN 第一PHP社区 版权所有