.NET SAAS 架构与设计 -SqlSugar ORM
1、数据库设计
常用的Saas分库分为2种类型的库
1.1 基础信息库
主要存组织架构 、权限、字典、用户等 公共信息
性能优化:因为基础信息库是共享的,所以我们可以使用 读写分离,或者二级缓存来进行性能上的优化
2.2 业务库
我们要进行的分库都基于业务库进行分库,例如 A集团使用 A01库 ,B集团使用B01库 ,也可以多个小集团使用一个 数据库
如下:
业务库1 :集团A
业务库2 : 集团B, 集团F
业务库3 : 集团C, 集团D, 集团E
性能优先:因为合理的进行了分库,所以在性能上并没有什么瓶颈,并且数据库可以扔到不同的服务器上
2、表设计
下面的表设计的比较简单,主要是通过用户可以拿到当前用户的连接字符串,然进行数据库操作
2.1 数据库配置表
主键、数据库连接信息、集团ID (基础信息库)
2.2 用户表
主键、用户名、密码、集团ID (基础信息库)
3、代码编写
下面的代码很简单,我们通了多租户方式实现了动态根据用户获取不同的业务库
操作业务库我们使用 DbManger.BizDb
操作基础信息库我们使用 DbManger.MasterDb
如果我们要用到事务就用 DbManger.Db
/// <summary>
/// 数据库管理
/// </summary>
public class DbManger
{ /// <summary>
/// 获取业务库对象
/// </summary>
public static ISqlSugarClient BizDb
{
get
{
UserInfo user = GetUserInfo();//获取用户数据库连接字符串信息
var configId = user.OrgId.ToString();//集团ID(也可以叫租户ID)
if(!Db.IsAnyConnection(configId)){
Db.AddConnection(new ConnectionConfig() {
ConfigId = configId,
ConnectionString = "DataSource=" + user.Connection,
DbType = DbType.SqlServer,
IsAutoCloseConnection = true });
}
var result=Db.GetConnection(configId);
//可以给业务库result设置AOP
return result;
}
} /// <summary>
/// 业取基础信息库
/// </summary>
public static ISqlSugarClient MasterDb
{
get
{
//如果是跨服务库分库,也需要动态配置的,因为库的IP会变
//参考业务库用法
return Db.GetConnection("default");
}
} /// <summary>
/// 利用SqlSugarScope单例+多租户来处理多库事务
/// </summary>
public static SqlSugarScope Db =new SqlSugarScope(new ConnectionConfig()
{
ConfigId="default",
DbType = SqlSugar.DbType.SqlServer,
ConnectionString = @"基础信息库连接字符串",
IsAutoCloseConnection = true
},
db =>
{
//基础库AOP
db.Aop.OnLogExecuting = (s, p) =>
{ }; }); /// <summary>
/// 获取用户数据库连接字符串信息
/// </summary>
/// <returns></returns>
private static UserInfo GetUserInfo()
{
throw new System.NotImplementedException();
} }
使用用例,继承后直接使用
public class OrderManger: DbManger
{
public void Test()
{
try
{
Db.BeginTran();//用Db管理 MasterDb和BizDb事务 MasterDb.Insertable(xxx).ExecuteCommand();//操作基础信息库
BizDb.Insertable(xxx).ExecuteCommand();//操作业务库 Db.CommitTran();//统一事务 }
catch (System.Exception ex)
{
Db.RollbackTran();
throw ex;
};
}
}
4、跨库查询
4.1 跨库同服务器
跨库查询我们要用BizDb进行查询,因为BizDb是多变的,而MasterDb是固定的,查询用BizDb为主
var List = BizDb.Queryable<Order>()
.LeftJoin<Custom>((o, cus) => o.CustomId == cus.Id)
.AS<Custom>("SQLSUGAR4XTEST.dbo.Custom") //主表用AS("") 从表用AS<T>("")
.Where(o => o.Id == 1)
.Select((o, cus) => new ViewOrder { Id = o.Id, CustomName = cus.Name })
.ToList();
生成的SQL如下:
SELECT [o].[Id] AS [Id] ,
[cus].[Name] AS [CustomName]
FROM [Order] o
Left JOIN [SQLSUGAR4XTEST].[dbo].[Custom] cus --生成的Sql就多了库名
ON ( [o].[CustomId] = [cus].[Id] ) WHERE ( [o].[Id] = @Id0 )
注意:上面的例子是SqlServer跨库查询的用法,不同的数据库跨库查询用法不一样
更多用法: https://www.donet5.com/Home/Doc?typeId=2244
4.2跨库不同服务器
因为我们基础信息库是固定的,所以我们可以把基础信息库,同步到不同的服务器上,通过读分离的方式 ,那么每个业务服务器都会有一个
基础信息库了,然后在通过4.1的方式实现
5、业务表创建
我们可以通过CodeFirst创建业务库和表
https://www.donet5.com/Home/Doc?typeId=1207
7、表过滤
一个业务库中的表对应多个集团,那我们设计表的时候肯定有个 OrgId或者租户ID进行数据表区别
我们需要将DbManger.bizDb进行修改,添加相应的表过滤器如果表中有OrgId的就可以添加过滤器
/// <summary>
/// 获取业务库对象
/// </summary>
public static ISqlSugarClient BizDb
{
get
{
UserInfo user = GetUserInfo();//获取用户数据库连接字符串信息
var configId = user.OrgId.ToString();//集团ID(也可以叫租户ID)
if(!Db.IsAnyConnection(configId)){
Db.AddConnection(new ConnectionConfig() {
ConfigId = configId,
ConnectionString = "DataSource=" + user.Connection,
DbType = DbType.SqlServer,
IsAutoCloseConnection = true });
} var result=Db.GetConnection(configId);
result.QueryFilter.Add(new TableFilterItem<Order>(it => it.OrgId==configId);//添加表过滤器
//可以多个表 return result;
}
}
https://www.donet5.com/Home/Doc?typeId=1205
8、高安全性日志
我们可以通过差异日志拿到数据更变记录,记录到日志,SAAS操作一些核心数据差异日志肯定少不了,安全系数高
db.Aop.OnDiffLogEvent = it =>
{
//操作前记录 包含: 字段描述 列名 值 表名 表描述
var editBeforeData = it.BeforeData;
//操作后记录 包含: 字段描述 列名 值 表名 表描述
var editAfterData = it.AfterData;
var sql = it.Sql;
var parameter = it.Parameters;
var data = it.BusinessData;//这边会显示你传进来的对象
var time = it.Time;
var diffType=it.DiffType;//enum insert 、update and delete //Write logic
}; db.Insertable(new Student() { Name = "beforeName" })
.EnableDiffLogEvent() //注意需要加上启用日志,可以传参数
.ExecuteReturnIdentity();
具体用法:https://www.donet5.com/Home/Doc?typeId=1204
9、总结
SAAS架构用到技术基本上都是现有功能,我这一篇文章相当于一个汇总,本人也做了6年SAAS架构,至少目前的方案是成熟方案 ,并且有产品验证并且上线运营,如果有更好的建议可能发贴,或者直接找我沟通
1、数据库设计
常用的Saas分库分为2种类型的库
1.1 基础信息库
主要存组织架构 、权限、字典、用户等 公共信息
性能优化:因为基础信息库是共享的,所以我们可以使用 读写分离,或者二级缓存来进行性能上的优化
2.2 业务库
我们要进行的分库都基于业务库进行分库,例如 A集团使用 A01库 ,B集团使用B01库 ,也可以多个小集团使用一个 数据库
如下:
业务库1 :集团A
业务库2 : 集团B, 集团F
业务库3 : 集团C, 集团D, 集团E
性能优先:因为合理的进行了分库,所以在性能上并没有什么瓶颈,并且数据库可以扔到不同的服务器上
2、表设计
下面的表设计的比较简单,主要是通过用户可以拿到当前用户的连接字符串,然进行数据库操作
2.1 数据库配置表
主键、数据库连接信息、集团ID (基础信息库)
2.2 用户表
主键、用户名、密码、集团ID (基础信息库)
3、代码编写
下面的代码很简单,我们通了多租户方式实现了动态根据用户获取不同的业务库
操作业务库我们使用 DbManger.BizDb
操作基础信息库我们使用 DbManger.MasterDb
如果我们要用到事务就用 DbManger.Db
/// <summary> /// 数据库管理 /// </summary> public class DbManger { /// <summary> /// 获取业务库对象 /// </summary> public static ISqlSugarClient BizDb { get { UserInfo user = GetUserInfo();//获取用户数据库连接字符串信息 var configId = user.OrgId.ToString();//集团ID(也可以叫租户ID) if(!Db.IsAnyConnection(configId)){ Db.AddConnection(new ConnectionConfig() { ConfigId = configId, ConnectionString = "DataSource=" + user.Connection, DbType = DbType.SqlServer, IsAutoCloseConnection = true }); } var result=Db.GetConnection(configId); //可以给业务库result设置AOP return result; } } /// <summary> /// 业取基础信息库 /// </summary> public static ISqlSugarClient MasterDb { get { //如果是跨服务库分库,也需要动态配置的,因为库的IP会变 //参考业务库用法 return Db.GetConnection("default"); } } /// <summary> /// 利用SqlSugarScope单例+多租户来处理多库事务 /// </summary> public static SqlSugarScope Db =new SqlSugarScope(new ConnectionConfig() { ConfigId="default", DbType = SqlSugar.DbType.SqlServer, ConnectionString = @"基础信息库连接字符串", IsAutoCloseConnection = true }, db => { //基础库AOP db.Aop.OnLogExecuting = (s, p) => { }; }); /// <summary> /// 获取用户数据库连接字符串信息 /// </summary> /// <returns></returns> private static UserInfo GetUserInfo() { throw new System.NotImplementedException(); } } |
使用用例,继承后直接使用
public class OrderManger: DbManger { public void Test() { try { Db.BeginTran();//用Db管理 MasterDb和BizDb事务 MasterDb.Insertable(xxx).ExecuteCommand();//操作基础信息库 BizDb.Insertable(xxx).ExecuteCommand();//操作业务库 Db.CommitTran();//统一事务 } catch (System.Exception ex) { Db.RollbackTran(); throw ex; }; } } |
4、跨库查询
4.1 跨库同服务器
跨库查询我们要用BizDb进行查询,因为BizDb是多变的,而MasterDb是固定的,查询用BizDb为主
var List = BizDb.Queryable<Order>() .LeftJoin<Custom>((o, cus) => o.CustomId == cus.Id) .AS<Custom>("SQLSUGAR4XTEST.dbo.Custom") //主表用AS("") 从表用AS<T>("") .Where(o => o.Id == 1) .Select((o, cus) => new ViewOrder { Id = o.Id, CustomName = cus.Name }) .ToList(); |
生成的Sql如下
SELECT [o].[Id] AS [Id] , [cus].[Name] AS [CustomName] FROM [Order] o Left JOIN [SQLSUGAR4XTEST].[dbo].[Custom] cus --生成的Sql就多了库名ON ( [o].[CustomId] = [cus].[Id] ) WHERE ( [o].[Id] = @Id0 ) |
注意:上面的例子是SqlServer跨库查询的用法,不同的数据库跨库查询用法不一样,
更多用法: https://www.donet5.com/Home/Doc?typeId=2244
4.2跨库不同服务器
因为我们基础信息库是固定的,所以我们可以把基础信息库,同步到不同的服务器上,通过读分离的方式 ,那么每个业务服务器都会有一个
基础信息库了,然后在通过4.1的方式实现
5、业务表创建
我们可以通过CodeFirst创建业务库和表
https://www.donet5.com/Home/Doc?typeId=1207
7、表过滤
一个业务库中的表对应多个集团,那我们设计表的时候肯定有个 OrgId或者租户ID进行数据表区别
我们需要将DbManger.bizDb进行修改,添加相应的表过滤器如果表中有OrgId的就可以添加过滤器
/// <summary>/// 获取业务库对象/// </summary>public static ISqlSugarClient BizDb { get { UserInfo user = GetUserInfo();//获取用户数据库连接字符串信息 var configId = user.OrgId.ToString();//集团ID(也可以叫租户ID) if(!Db.IsAnyConnection(configId)){ Db.AddConnection(new ConnectionConfig() { ConfigId = configId, ConnectionString = "DataSource=" + user.Connection, DbType = DbType.SqlServer, IsAutoCloseConnection = true }); } var result=Db.GetConnection(configId); result.QueryFilter.Add(new TableFilterItem<Order>(it => it.OrgId==configId);//添加表过滤器 //可以多个表 return result; }} |
https://www.donet5.com/Home/Doc?typeId=1205
8、高安全性日志
我们可以通过差异日志拿到数据更变记录,记录到日志,SAAS操作一些核心数据差异日志肯定少不了,安全系数高
db.Aop.OnDiffLogEvent = it =>{ //操作前记录 包含: 字段描述 列名 值 表名 表描述 var editBeforeData = it.BeforeData; //操作后记录 包含: 字段描述 列名 值 表名 表描述 var editAfterData = it.AfterData; var sql = it.Sql; var parameter = it.Parameters; var data = it.BusinessData;//这边会显示你传进来的对象 var time = it.Time; var diffType=it.DiffType;//enum insert 、update and delete //Write logic};db.Insertable(new Student() { Name = "beforeName" }).EnableDiffLogEvent() //注意需要加上启用日志,可以传参数.ExecuteReturnIdentity(); |
具体用法:https://www.donet5.com/Home/Doc?typeId=1204
9、总结
SAAS架构用到技术基本上都是现有功能,我这一篇文章相当于一个汇总,本人也做了6年SAAS架构,至少目前的方案是成熟方案 ,并且有产品验证并且上线运营,如果有更好的建议可能发贴,或者直接找我沟通
源码下载: https://github.com/donet5/sqlsugar
Nuget: 安装SqlSugarCore
.NET SAAS 架构与设计 -SqlSugar ORM的更多相关文章
- 记SqlSugar ORM框架之找不到主键问题
前端时间在.NetCore项目中使用SqlSugar ORM框架(引用sqlSugarCore依赖包)的时候遇到了一个奇葩问题:对表进行数据更新操作的时候,报错 “ You cannot have n ...
- 高性能数据导入方案&表过滤器&一对多支持筛选- .NET SqlSugar ORM
一.数据导入有哪些难题 1.数据分类 你需要将 插入.更新.忽略不计.错误数据 等进么分类汇总,最后返回给客户,如果没有很好的设计想把这些操作一步到位非常的难 2.高性能 对于插入或者更新 肯定不能单 ...
- Saas系统架构的思考,多租户Saas架构设计分析
ToB Saas系统最近几年都很火.很多创业公司都在尝试创建企业级别的应用 cRM, HR,销售, Desk Saas系统.很多Saas创业公司也拿了大额风投.毕竟Saas相对传统软件的优势非常明显. ...
- 要想不踩SaaS那些坑,得先了解“SaaS架构”
摘要:围绕当下许多企业青睐的SaaS应用开发,华为云开发者技术服务工程师程泽在DTT首期带来主题为 <SaaS云原生应用典型架构> 的DTT首期直播分享. 本文分享自华为云社区<DT ...
- SqlSugar ORM已经支持读写分离
目前只有MYSQL版 3.5.2.9 支持,其库版本12月3号更新该功能 用例讲解 using (var db = new SqlSugarClient("主连接字符串", &qu ...
- 基于Flume的美团日志收集系统(一)架构和设计
美团的日志收集系统负责美团的所有业务日志的收集,并分别给Hadoop平台提供离线数据和Storm平台提供实时数据流.美团的日志收集系统基于Flume设计和搭建而成. <基于Flume的美团日志收 ...
- 基于Flume的美团日志收集系统(一)架构和设计【转】
美团的日志收集系统负责美团的所有业务日志的收集,并分别给Hadoop平台提供离线数据和Storm平台提供实时数据流.美团的日志收集系统基于Flume设计和搭建而成. <基于Flume的美团日志收 ...
- Micro 架构与设计
Micro 架构与设计 翻译自 Micro architecture & design patterns for microservices 注: 原文作者即 Micro 框架的开发者. 过去 ...
- 也谈TDD,以及三层架构、设计模式、ORM……:没有免费的午餐
想在园子里写点东西已经很久了,但一直没有落笔,忙着做 一起帮 的开发直播,还有些软文做推广,还要做奶爸带孩子,还要……好吧,我承认,真正的原因是: 太特么的难写了! 但再难写也要写啊,要等到“能写好了 ...
随机推荐
- Linux下Zabbix5.0 LTS监控基础原理及安装部署(图文教程)
Zabbix 是什么? zabbix 是一个基于 Web 界面的提供分布式系统监视以及网络监视功能的企业级的开源解决方案.通过 C/S 模式采集数据,通过 B/S 模式在 Web 端展示和配置,能监视 ...
- Java 16 新功能介绍
点赞再看,动力无限.Hello world : ) 微信搜「程序猿阿朗 」. 本文 Github.com/niumoo/JavaNotes 和 程序猿阿朗博客 已经收录,有很多知识点和系列文章. Ja ...
- Relocations in generic ELF (EM: 40)
最近在搞机器上的wifi热点,需要移植一大堆东西,如hostapd\wpa_suppliant.dhcp等,这些玩意又依赖其他的一大堆库的移植,比如libnl,openssl等,今天在移植编译libn ...
- 【数据结构&算法】05-线性表之数组
目录 前言 线性结构与非线性结构 数组 数组的两个限制 数组的随机访问特性 数组的操作 插入操作 删除操作 数组越界 容器 数组下标 前言 本笔记主要记录数组的一些基础特性及操作. 顺便解答下为什么大 ...
- redis开外网访问
Redis: 注释掉bind 127.0.0.1可以使所有的ip访问redis 若是想指定多个ip访问,但并不是全部的ip访问,可以bind protected-mode no /etc/init.d ...
- dart系列之:dart语言中的变量
目录 简介 dart中的变量 定义变量 变量的默认值 Late变量 常量 总结 简介 flutter是google在2015年dart开发者峰会上推出的一种开源的移动UI构建框架,使用flutter可 ...
- iNeuOS工业互联网操作系统,发布实时存储方式:实时存储、变化存储、定时存储,增加设备振动状态和电能状态监测驱动,v3.6.2
目 录 1. 概述... 1 2. 平台演示... 2 3. 存储方式... 2 4. 设备状态和用电状态监控驱动... 3 1. 概述 本次升 ...
- postman使用(待更新)
参考文档
- 设置IDEA启动,不要自动打开上次使用时的项目
打开idea时自动加载最近编辑的项目,很费时间,关闭设置如下
- Vue3+Vue-cli4项目中使用腾讯滑块验证码
Vue3+Vue-cli4项目中使用腾讯滑块验证码 简介: 滑块验证码相比于传统的图片验证码具有以下优点: 验证码的具体验证不需要服务端去验证,服务端只需要核验验证结果即可. 验证码的实现不需要我们去 ...