服务器上保存有上万条的基础数据,需要同步到全国各地的成千上万个客户端,而且这些基础数据也经常在有变化调整。这时候需要有一个稳定的数据同步程序,能分批同步基础数据,由于网络流量,网络的稳定性等因素,需要分批读取有更新过的数据,花费了半天时间写了一个例子代码,客户端同步从服务器上同步基础数据的功能,可以提供给大家参考一下,希望能有重复利用的价值。

            // 1:打开业务数据库
SqLiteHelper dbHelper = new SqLiteHelper(BaseSystemInfo.BusinessDbConnection);
// 2: 先保存个同步时间标志,什么时间成功同步过本地数据库?这样不用每次都同步所有的数据,只同步那个时间之后的数据就可以了。
BaseParameterManager parameterService = new BaseParameterManager(dbHelper, BaseSystemInfo.UserInfo);
// 3:用参数的方式读取同步时间
string synchronous = parameterService.GetParameter("System", BaseOrganizeEntity.TableName, "Synchronous");
// 4: 传递参数用的,为了防注入漏洞的
List<KeyValuePair<string, object>> dbParameters = new List<KeyValuePair<string, object>>();
// 5:只获取有效的,未被删除的数据,(数据有被删除,也应该能同步才可以)
string whereConditional = string.Empty;
// string whereConditional = BaseOrganizeEntity.FieldDeletionStateCode + " = 0 AND " + BaseOrganizeEntity.FieldEnabled + " = 1 ";
int recordCount = ;
int pageIndex = ;
// 网络情况好,客户端少,每次多获取一些数据,网络情况糟糕每次少获取一些数据
int pageSize = ;
// 6:不需要获取所有数据,在最大程度上减少网络上的数据流量
string selectField = BaseOrganizeEntity.FieldId + ","
+ BaseOrganizeEntity.FieldCode + ","
+ BaseOrganizeEntity.FieldFullName + ","
+ BaseOrganizeEntity.FieldEnabled + ","
+ BaseOrganizeEntity.FieldDeletionStateCode; int pageCount = ;
if (!string.IsNullOrEmpty(synchronous))
{
DateTime modifiedOn = DateTime.Parse(synchronous);
dbParameters.Add(new KeyValuePair<string, object>(BaseOrganizeEntity.FieldModifiedOn, modifiedOn));
if (!string.IsNullOrEmpty(whereConditional))
{
whereConditional += " AND ";
}
// 7:只获取上次同步之后修改过的数据
whereConditional += BaseOrganizeEntity.FieldModifiedOn + " > " + DbHelper.GetParameter(BaseOrganizeEntity.FieldModifiedOn);
}
// 8:调用远程服务,获取需要同步的数据
DotNetService dotNetService = new DotNetService();
DataTable dtSynchronous = dotNetService.UserCenterDbHelperService.GetDataTableByPage(BaseSystemInfo.UserInfo, out recordCount, BaseOrganizeEntity.TableName, selectField, pageIndex, pageSize, whereConditional, dbParameters, BaseOrganizeEntity.FieldId);
// 9:防止网络连接超时,把网络连接释放掉
if (dotNetService.UserCenterDbHelperService is ICommunicationObject)
{
((ICommunicationObject)dotNetService.UserCenterDbHelperService).Close();
}
// 取得总页数
if (recordCount % pageSize == )
{
pageCount = recordCount / pageSize;
}
else
{
pageCount = recordCount / pageSize + ;
}
BaseOrganizeManager organizeManager = null;
// 10:按每页进行循环获取,也防止数据库连接超时,网络连接超时,每次获取一部分数据
while (dtSynchronous != null && dtSynchronous.Rows.Count > )
{
BaseOrganizeEntity organizeEntity = null;
// 11:防止本地数据库连接超时,每次重新打开一个数据库连接,这样保险一些
organizeManager = new BaseOrganizeManager(dbHelper, BaseSystemInfo.UserInfo);
foreach (DataRow dr in dtSynchronous.Rows)
{
// 12:不用实体化其实也可以的,先实体化吧,代码规范一些
organizeEntity = new BaseOrganizeEntity();
organizeEntity.Id = int.Parse(dr[BaseOrganizeEntity.FieldId].ToString());
organizeEntity.Code = dr[BaseOrganizeEntity.FieldCode].ToString();
organizeEntity.FullName = dr[BaseOrganizeEntity.FieldFullName].ToString();
organizeEntity.Enabled = int.Parse(dr[BaseOrganizeEntity.FieldEnabled].ToString());
organizeEntity.DeletionStateCode = int.Parse(dr[BaseOrganizeEntity.FieldDeletionStateCode].ToString());
// 13: 先按更新操作。
SQLBuilder sqlBuilder = new SQLBuilder(dbHelper);
sqlBuilder.BeginUpdate(BaseOrganizeEntity.TableName);
sqlBuilder.SetValue(BaseOrganizeEntity.FieldCode, organizeEntity.Code);
sqlBuilder.SetValue(BaseOrganizeEntity.FieldFullName, organizeEntity.FullName);
sqlBuilder.SetValue(BaseOrganizeEntity.FieldEnabled, organizeEntity.Enabled);
sqlBuilder.SetValue(BaseOrganizeEntity.FieldDeletionStateCode, organizeEntity.DeletionStateCode);
sqlBuilder.SetWhere(BaseOrganizeEntity.FieldId, organizeEntity.Id);
if (sqlBuilder.EndUpdate() == )
{
// 14: 若没找到数据,进行插入操作。
sqlBuilder.BeginInsert(BaseOrganizeEntity.TableName);
sqlBuilder.SetValue(BaseOrganizeEntity.FieldId, organizeEntity.Id);
sqlBuilder.SetValue(BaseOrganizeEntity.FieldCode, organizeEntity.Code);
sqlBuilder.SetValue(BaseOrganizeEntity.FieldFullName, organizeEntity.FullName);
sqlBuilder.SetValue(BaseOrganizeEntity.FieldEnabled, organizeEntity.Enabled);
sqlBuilder.SetValue(BaseOrganizeEntity.FieldDeletionStateCode, organizeEntity.DeletionStateCode);
sqlBuilder.EndInsert();
}
// 15: 这个代码是按实体进行更新同步的代码例子。
// 若有缺少字段什么的,也闹心
// if (organizeManager.UpdateObject(organizeEntity) == 0)
// {
// organizeManager.AddObject(organizeEntity);
// }
}
// 16: 看是否有必要继续获取数据,判断页数,若没必要能少循环一次就少循环一次
dtSynchronous = null;
if (pageIndex < pageCount)
{
// 17: 若数据没获取好,继续获取数据
pageIndex++;
dotNetService = new DotNetService();
dtSynchronous = dotNetService.UserCenterDbHelperService.GetDataTableByPage(BaseSystemInfo.UserInfo, out recordCount, BaseOrganizeEntity.TableName, selectField, pageIndex, pageSize, whereConditional, dbParameters, BaseOrganizeEntity.FieldId);
if (dotNetService.UserCenterDbHelperService is ICommunicationObject)
{
((ICommunicationObject)dotNetService.UserCenterDbHelperService).Close();
}
}
}
// 18: 更新数据库中的同步时间标志。
parameterService.SetParameter("System", BaseOrganizeEntity.TableName, "Synchronous", DateTime.Now.ToString(BaseSystemInfo.DateTimeFormat));

C#.NET 大型通用信息化系统集成快速开发平台 4.1 版本 - 远程同步服务器大量基础数据到客户端的更多相关文章

  1. C#.NET 大型通用信息化系统集成快速开发平台 4.1 版本 - 主管可以看下属的数据

    主管可以看下属的数据,这个是经常用到的一个权限,不管是大公司,还是小公司都需要的功能. 通过以下2个方法,可以任意达到想要的效果了,设置简单灵活,还能递归运算下属,有时候简单好用就是硬道理. #reg ...

  2. C#.NET 大型通用信息化系统集成快速开发平台 4.1 版本 - .NET商业化成品成熟各种数据权限的需求对应例子代码

    还是我上次提出的那个问题问题:假设一个订单表,1.角色A可以看自己的2.角色B可以看工作组的3.角色C可以看金额是1000元以下的(自定义条件是否可行?如果可以,请详细说明)4.角色D可以看整个部门的 ...

  3. C#.NET 大型通用信息化系统集成快速开发平台 4.1 版本 - 区域管理功能增强(电子商务方向)

    由于公司是面向全国服务的.全国各地都有分公司,需要管理到覆盖全国的各种业务,各种业务系统信息系统的数据都需要规范化. 公司开展网络订单功能,在全国范围内实现网络下单.提高工作效率,提高各公司之间的数据 ...

  4. C#.NET 大型通用信息化系统集成快速开发平台 4.6 版本 - SSO单点登录接口

    当开发的系统多了.用户多了.合作伙伴多了.对接厂商多了.开发人员多了.部署的服务器也多了,各种安全问题就暴露出来了. 如何安全的把这些系统集成在一起?实现集群的单点登录.严格统一的用户安全体系管理? ...

  5. C#.NET 大型通用信息化系统集成快速开发平台 4.1 版本 - 树形选择项目的标准例子

    用成套的现成的方法引导大家开发程序,整个团队的开发效率会很高.例如我们现在有30多个开发人员,若有300个开发人员,这开发工作很容易乱套,我们需要有效的管理维护所有团队的开发工作.把数据结构.通用的组 ...

  6. C#.NET 大型通用信息化系统集成快速开发平台 4.0 版本 - 省市区数据权限的实现效果

    折腾了2-3周,终于把全国网点数据权限,省.市.县数据规范化,查询权限规范化,基础数据规范化的思路理清楚了, 今天应该是一个里程碑式的一天 省市区数据规范化后 1:网点的基础数据可以更加严谨规范化. ...

  7. C#.NET 大型通用信息化系统集成快速开发平台 4.0 版本 - 标准省市县数据的公司选择窗口实现

    若全国各地有上千个分公司,加盟店,网点,那就需要一个友善的选择分公司的功能,得有标准的全国省市县的划分数据.这样有了牢靠的基础数据后,才能开发程序得心应手了.当习惯了开发一个公司内部系统时,全国性大公 ...

  8. C#.NET 大型通用信息化系统集成快速开发平台 4.1 版本 - 成熟组件化运行效果分解

    1:成熟的组件就是可以写很少的代码,可以实现很多功能.2:又可以用源码方式调用,又可以用dll方式调用.3:不需要学习里面的细节,只要会调用就可以了.4:成熟稳定,功能齐全,bug少,甚至没bug.5 ...

  9. C#.NET 大型通用信息化系统集成快速开发平台 4.1 版本 - 即时消息提醒功能改进

    可以给自己的信息管理系统增加一些即时消息提醒功能,简单方便,一般是一行代码就可以发送提醒信息了,方便二次开发,个性化改进. 1:可以用简拼,快速查找内部员工. 2:双击直接可以发QQ消息. 3:双击直 ...

随机推荐

  1. tarjan讲解(用codevs1332(tarjan的裸题)讲解)

    主要借助这道比较裸的题来讲一下tarjan这种算法 tarjan是一种求解有向图强连通分量的线性时间的算法.(用dfs来实现) 如果两个顶点可以相互通达,则称两个顶点强连通.如果有向图G的每两个顶点都 ...

  2. Java开发web的几种开发模式

    Java Web开发方案有多种可供选择,这里列举一些经典的开发模式进行横向比较,为Java Web的开发模式选择提供参考.除此之外还有好多方案(如Tapestry和Wicket等等)并不了解,这里就不 ...

  3. Java基础学习 -- 异常

    当异常发生时,原本要接着执行的代码不再执行,转而让其他部分的代码来处理.如果没有代码负责处理,控制台会报告异常. 异常出现时的执行机制: 异常机制最大的好处是:清晰地分开了 正常的业务逻辑 和 遇到情 ...

  4. jQuery:年月日三级联动

    <%@ Page Language="C#" AutoEventWireup="true" CodeFile="Default3.aspx.cs ...

  5. 基于WCF MSMQ 的企业应用解决方案

    最近研究了一下基于MSMQ的WCF应用,从书上.网上查了很多资料,但始终没能彻底理解WCF-MSMQ的工作原理,也没能得到一个合理的应用解决方案.索性还是自己做个实验,探索一下吧.经过反复试验,颇有收 ...

  6. transformjs:让天下没有难做的生意!不对,是特效!

    写在前面 transform是css3新增的一个属性,可是令开发者费解的是,其内部又有大量的属性如旋转.缩放.扭曲.平移,这也就导致了获取或者是设置transform中一个或者多个属性变得异常麻烦. ...

  7. 深入浅出React Native 3: 从零开始写一个Hello World

    这是深入浅出React Native的第三篇文章. 1. 环境配置 2. 我的第一个应用 将index.ios.js中的代码全部删掉,为什么要删掉呢?因为我们准备从零开始写一个应用~学习技术最好的方式 ...

  8. 极简MarkDown排版介绍(How to)

    如何切换编辑器 切换博客园编辑器为MarkDown:MarkDown Editor 选择一个在线编辑和预览站点:StackEdit 如何排版章节 MarkDown: 大标题 ========== 小标 ...

  9. forward和redirect的区别(转)

    Redirect Forward 不同的request 不同的对象,但是可以渠道上一个页面的内容 send后面的语句会继续执行,除非return Forward后面的语句不会继续发送给客户端 速度慢 ...

  10. mysql-Federated存储方式,远程表,相当于sql server的linked server

    MySQL中针对不同的功能需求提供了不同的存储引擎.所谓的存储引擎也就是MySQL下特定接口的具体实现. FEDERATED是其中一个专门针对远程数据库的实现.一般情况下在本地数据库中建表会在数据库目 ...