服务器上保存有上万条的基础数据,需要同步到全国各地的成千上万个客户端,而且这些基础数据也经常在有变化调整。这时候需要有一个稳定的数据同步程序,能分批同步基础数据,由于网络流量,网络的稳定性等因素,需要分批读取有更新过的数据,花费了半天时间写了一个例子代码,客户端同步从服务器上同步基础数据的功能,可以提供给大家参考一下,希望能有重复利用的价值。

            // 1:打开业务数据库
SqLiteHelper dbHelper = new SqLiteHelper(BaseSystemInfo.BusinessDbConnection);
// 2: 先保存个同步时间标志,什么时间成功同步过本地数据库?这样不用每次都同步所有的数据,只同步那个时间之后的数据就可以了。
BaseParameterManager parameterService = new BaseParameterManager(dbHelper, BaseSystemInfo.UserInfo);
// 3:用参数的方式读取同步时间
string synchronous = parameterService.GetParameter("System", BaseOrganizeEntity.TableName, "Synchronous");
// 4: 传递参数用的,为了防注入漏洞的
List<KeyValuePair<string, object>> dbParameters = new List<KeyValuePair<string, object>>();
// 5:只获取有效的,未被删除的数据,(数据有被删除,也应该能同步才可以)
string whereConditional = string.Empty;
// string whereConditional = BaseOrganizeEntity.FieldDeletionStateCode + " = 0 AND " + BaseOrganizeEntity.FieldEnabled + " = 1 ";
int recordCount = ;
int pageIndex = ;
// 网络情况好,客户端少,每次多获取一些数据,网络情况糟糕每次少获取一些数据
int pageSize = ;
// 6:不需要获取所有数据,在最大程度上减少网络上的数据流量
string selectField = BaseOrganizeEntity.FieldId + ","
+ BaseOrganizeEntity.FieldCode + ","
+ BaseOrganizeEntity.FieldFullName + ","
+ BaseOrganizeEntity.FieldEnabled + ","
+ BaseOrganizeEntity.FieldDeletionStateCode; int pageCount = ;
if (!string.IsNullOrEmpty(synchronous))
{
DateTime modifiedOn = DateTime.Parse(synchronous);
dbParameters.Add(new KeyValuePair<string, object>(BaseOrganizeEntity.FieldModifiedOn, modifiedOn));
if (!string.IsNullOrEmpty(whereConditional))
{
whereConditional += " AND ";
}
// 7:只获取上次同步之后修改过的数据
whereConditional += BaseOrganizeEntity.FieldModifiedOn + " > " + DbHelper.GetParameter(BaseOrganizeEntity.FieldModifiedOn);
}
// 8:调用远程服务,获取需要同步的数据
DotNetService dotNetService = new DotNetService();
DataTable dtSynchronous = dotNetService.UserCenterDbHelperService.GetDataTableByPage(BaseSystemInfo.UserInfo, out recordCount, BaseOrganizeEntity.TableName, selectField, pageIndex, pageSize, whereConditional, dbParameters, BaseOrganizeEntity.FieldId);
// 9:防止网络连接超时,把网络连接释放掉
if (dotNetService.UserCenterDbHelperService is ICommunicationObject)
{
((ICommunicationObject)dotNetService.UserCenterDbHelperService).Close();
}
// 取得总页数
if (recordCount % pageSize == )
{
pageCount = recordCount / pageSize;
}
else
{
pageCount = recordCount / pageSize + ;
}
BaseOrganizeManager organizeManager = null;
// 10:按每页进行循环获取,也防止数据库连接超时,网络连接超时,每次获取一部分数据
while (dtSynchronous != null && dtSynchronous.Rows.Count > )
{
BaseOrganizeEntity organizeEntity = null;
// 11:防止本地数据库连接超时,每次重新打开一个数据库连接,这样保险一些
organizeManager = new BaseOrganizeManager(dbHelper, BaseSystemInfo.UserInfo);
foreach (DataRow dr in dtSynchronous.Rows)
{
// 12:不用实体化其实也可以的,先实体化吧,代码规范一些
organizeEntity = new BaseOrganizeEntity();
organizeEntity.Id = int.Parse(dr[BaseOrganizeEntity.FieldId].ToString());
organizeEntity.Code = dr[BaseOrganizeEntity.FieldCode].ToString();
organizeEntity.FullName = dr[BaseOrganizeEntity.FieldFullName].ToString();
organizeEntity.Enabled = int.Parse(dr[BaseOrganizeEntity.FieldEnabled].ToString());
organizeEntity.DeletionStateCode = int.Parse(dr[BaseOrganizeEntity.FieldDeletionStateCode].ToString());
// 13: 先按更新操作。
SQLBuilder sqlBuilder = new SQLBuilder(dbHelper);
sqlBuilder.BeginUpdate(BaseOrganizeEntity.TableName);
sqlBuilder.SetValue(BaseOrganizeEntity.FieldCode, organizeEntity.Code);
sqlBuilder.SetValue(BaseOrganizeEntity.FieldFullName, organizeEntity.FullName);
sqlBuilder.SetValue(BaseOrganizeEntity.FieldEnabled, organizeEntity.Enabled);
sqlBuilder.SetValue(BaseOrganizeEntity.FieldDeletionStateCode, organizeEntity.DeletionStateCode);
sqlBuilder.SetWhere(BaseOrganizeEntity.FieldId, organizeEntity.Id);
if (sqlBuilder.EndUpdate() == )
{
// 14: 若没找到数据,进行插入操作。
sqlBuilder.BeginInsert(BaseOrganizeEntity.TableName);
sqlBuilder.SetValue(BaseOrganizeEntity.FieldId, organizeEntity.Id);
sqlBuilder.SetValue(BaseOrganizeEntity.FieldCode, organizeEntity.Code);
sqlBuilder.SetValue(BaseOrganizeEntity.FieldFullName, organizeEntity.FullName);
sqlBuilder.SetValue(BaseOrganizeEntity.FieldEnabled, organizeEntity.Enabled);
sqlBuilder.SetValue(BaseOrganizeEntity.FieldDeletionStateCode, organizeEntity.DeletionStateCode);
sqlBuilder.EndInsert();
}
// 15: 这个代码是按实体进行更新同步的代码例子。
// 若有缺少字段什么的,也闹心
// if (organizeManager.UpdateObject(organizeEntity) == 0)
// {
// organizeManager.AddObject(organizeEntity);
// }
}
// 16: 看是否有必要继续获取数据,判断页数,若没必要能少循环一次就少循环一次
dtSynchronous = null;
if (pageIndex < pageCount)
{
// 17: 若数据没获取好,继续获取数据
pageIndex++;
dotNetService = new DotNetService();
dtSynchronous = dotNetService.UserCenterDbHelperService.GetDataTableByPage(BaseSystemInfo.UserInfo, out recordCount, BaseOrganizeEntity.TableName, selectField, pageIndex, pageSize, whereConditional, dbParameters, BaseOrganizeEntity.FieldId);
if (dotNetService.UserCenterDbHelperService is ICommunicationObject)
{
((ICommunicationObject)dotNetService.UserCenterDbHelperService).Close();
}
}
}
// 18: 更新数据库中的同步时间标志。
parameterService.SetParameter("System", BaseOrganizeEntity.TableName, "Synchronous", DateTime.Now.ToString(BaseSystemInfo.DateTimeFormat));

C#.NET 大型通用信息化系统集成快速开发平台 4.1 版本 - 远程同步服务器大量基础数据到客户端的更多相关文章

  1. C#.NET 大型通用信息化系统集成快速开发平台 4.1 版本 - 主管可以看下属的数据

    主管可以看下属的数据,这个是经常用到的一个权限,不管是大公司,还是小公司都需要的功能. 通过以下2个方法,可以任意达到想要的效果了,设置简单灵活,还能递归运算下属,有时候简单好用就是硬道理. #reg ...

  2. C#.NET 大型通用信息化系统集成快速开发平台 4.1 版本 - .NET商业化成品成熟各种数据权限的需求对应例子代码

    还是我上次提出的那个问题问题:假设一个订单表,1.角色A可以看自己的2.角色B可以看工作组的3.角色C可以看金额是1000元以下的(自定义条件是否可行?如果可以,请详细说明)4.角色D可以看整个部门的 ...

  3. C#.NET 大型通用信息化系统集成快速开发平台 4.1 版本 - 区域管理功能增强(电子商务方向)

    由于公司是面向全国服务的.全国各地都有分公司,需要管理到覆盖全国的各种业务,各种业务系统信息系统的数据都需要规范化. 公司开展网络订单功能,在全国范围内实现网络下单.提高工作效率,提高各公司之间的数据 ...

  4. C#.NET 大型通用信息化系统集成快速开发平台 4.6 版本 - SSO单点登录接口

    当开发的系统多了.用户多了.合作伙伴多了.对接厂商多了.开发人员多了.部署的服务器也多了,各种安全问题就暴露出来了. 如何安全的把这些系统集成在一起?实现集群的单点登录.严格统一的用户安全体系管理? ...

  5. C#.NET 大型通用信息化系统集成快速开发平台 4.1 版本 - 树形选择项目的标准例子

    用成套的现成的方法引导大家开发程序,整个团队的开发效率会很高.例如我们现在有30多个开发人员,若有300个开发人员,这开发工作很容易乱套,我们需要有效的管理维护所有团队的开发工作.把数据结构.通用的组 ...

  6. C#.NET 大型通用信息化系统集成快速开发平台 4.0 版本 - 省市区数据权限的实现效果

    折腾了2-3周,终于把全国网点数据权限,省.市.县数据规范化,查询权限规范化,基础数据规范化的思路理清楚了, 今天应该是一个里程碑式的一天 省市区数据规范化后 1:网点的基础数据可以更加严谨规范化. ...

  7. C#.NET 大型通用信息化系统集成快速开发平台 4.0 版本 - 标准省市县数据的公司选择窗口实现

    若全国各地有上千个分公司,加盟店,网点,那就需要一个友善的选择分公司的功能,得有标准的全国省市县的划分数据.这样有了牢靠的基础数据后,才能开发程序得心应手了.当习惯了开发一个公司内部系统时,全国性大公 ...

  8. C#.NET 大型通用信息化系统集成快速开发平台 4.1 版本 - 成熟组件化运行效果分解

    1:成熟的组件就是可以写很少的代码,可以实现很多功能.2:又可以用源码方式调用,又可以用dll方式调用.3:不需要学习里面的细节,只要会调用就可以了.4:成熟稳定,功能齐全,bug少,甚至没bug.5 ...

  9. C#.NET 大型通用信息化系统集成快速开发平台 4.1 版本 - 即时消息提醒功能改进

    可以给自己的信息管理系统增加一些即时消息提醒功能,简单方便,一般是一行代码就可以发送提醒信息了,方便二次开发,个性化改进. 1:可以用简拼,快速查找内部员工. 2:双击直接可以发QQ消息. 3:双击直 ...

随机推荐

  1. ZKUI中文编码以及以docker方式运行的问题

    *:first-child { margin-top: 0 !important; } body>*:last-child { margin-bottom: 0 !important; } /* ...

  2. node-inspector调试工具应用

    一.起因 想调试某些开源的nodejs项目,然后就选择了node-inspector插件. 他的优点: 1.可以借用chrome或firefox浏览器进行调试,与前端调试融合. 2.配置简单 二.必备 ...

  3. 【JavaScript】详解JSON

    目录结构: // contents structure [-] 什么是JSON JSON和XML的比较 相同点 不同点 JSON语法 如何解析JSON文本 eval()方法 JSON.parse()方 ...

  4. hibernate(1) —— 入门

    hibernate框架主要是实现数据库与实体类间的映射,使的操作实体类相当与操作hibernate框架. 只要实体类写好配置文件配好,就能实现和数据库的映射,其中实体类对应表,类的属性对应数据库的表字 ...

  5. Egret白鹭H5小游戏开发入门(二)

    前言: 昨天的文章中简单的介绍了Egret白鹭引擎从安装到基本的使用配置等问题,今天着重介绍H5小游戏开发的起步阶段,如Wing面板的使用,素材的处理,类的说明,开始布局等等. 整体概况: 根据上一篇 ...

  6. iOS 隐藏自定义tabbar

    iOS  隐藏自定义tabbar -(void)viewWillAppear:(BOOL)animated { NSArray *array=self.tabBarController.view.su ...

  7. SDWebImage的使用

    - setItem:(CustomItem *)item { _item = item; // 占位图片 UIImage *placeholder = [UIImage imageNamed:@&qu ...

  8. Wireshark设置interface 时提示“There are no interfaces on which a capture can be done ”

    Wireshark设置interface 时提示“There are no interfaces on which a capture can be done ” 解决方法: 今天在电脑上安装了WIR ...

  9. 微信小程序 - 开发指南

    一.下载并安装开发工具 下载地址 二.创建项目 打开开发工具 添加项目 进入预览和调试界面 代码编辑器 编译并预览 三.启动流程 四.适用场景 五.技术框架 六.科普 [图片较大 - 点击查看]

  10. ASP.NET MVC3 Razor 调试与预加载

    目录(?)[-] 获取服务器信息 FormsAuthenticationSlidingExpiration 属性 MVC3预加载   在ASP.NET MVC3开发中,调试中怎么也是不可缺少的,那对于 ...