.NET SAAS 架构与设计 -SqlSugar ORM
1、数据库设计
常用的Saas分库分为2种类型的库
1.1 基础信息库
主要存组织架构 、权限、字典、用户等 公共信息
性能优化:因为基础信息库是共享的,所以我们可以使用 读写分离,或者二级缓存来进行性能上的优化
2.2 业务库
我们要进行的分库都基于业务库进行分库,例如 A集团使用 A01库 ,B集团使用B01库 ,也可以多个小集团使用一个 数据库
如下:
业务库1 :集团A
业务库2 : 集团B, 集团F
业务库3 : 集团C, 集团D, 集团E
性能优先:因为合理的进行了分库,所以在性能上并没有什么瓶颈,并且数据库可以扔到不同的服务器上
2、表设计
下面的表设计的比较简单,主要是通过用户可以拿到当前用户的连接字符串,然进行数据库操作
2.1 数据库配置表
主键、数据库连接信息、集团ID (基础信息库)
2.2 用户表
主键、用户名、密码、集团ID (基础信息库)
3、代码编写
下面的代码很简单,我们通了多租户方式实现了动态根据用户获取不同的业务库
操作业务库我们使用 DbManger.BizDb
操作基础信息库我们使用 DbManger.MasterDb
如果我们要用到事务就用 DbManger.Db
/// <summary>
/// 数据库管理
/// </summary>
public class DbManger
{ /// <summary>
/// 获取业务库对象
/// </summary>
public static ISqlSugarClient BizDb
{
get
{
UserInfo user = GetUserInfo();//获取用户数据库连接字符串信息
var configId = user.OrgId.ToString();//集团ID(也可以叫租户ID)
if(!Db.IsAnyConnection(configId)){
Db.AddConnection(new ConnectionConfig() {
ConfigId = configId,
ConnectionString = "DataSource=" + user.Connection,
DbType = DbType.SqlServer,
IsAutoCloseConnection = true });
}
var result=Db.GetConnection(configId);
//可以给业务库result设置AOP
return result;
}
} /// <summary>
/// 业取基础信息库
/// </summary>
public static ISqlSugarClient MasterDb
{
get
{
//如果是跨服务库分库,也需要动态配置的,因为库的IP会变
//参考业务库用法
return Db.GetConnection("default");
}
} /// <summary>
/// 利用SqlSugarScope单例+多租户来处理多库事务
/// </summary>
public static SqlSugarScope Db =new SqlSugarScope(new ConnectionConfig()
{
ConfigId="default",
DbType = SqlSugar.DbType.SqlServer,
ConnectionString = @"基础信息库连接字符串",
IsAutoCloseConnection = true
},
db =>
{
//基础库AOP
db.Aop.OnLogExecuting = (s, p) =>
{ }; }); /// <summary>
/// 获取用户数据库连接字符串信息
/// </summary>
/// <returns></returns>
private static UserInfo GetUserInfo()
{
throw new System.NotImplementedException();
} }
使用用例,继承后直接使用
public class OrderManger: DbManger
{
public void Test()
{
try
{
Db.BeginTran();//用Db管理 MasterDb和BizDb事务 MasterDb.Insertable(xxx).ExecuteCommand();//操作基础信息库
BizDb.Insertable(xxx).ExecuteCommand();//操作业务库 Db.CommitTran();//统一事务 }
catch (System.Exception ex)
{
Db.RollbackTran();
throw ex;
};
}
}
4、跨库查询
4.1 跨库同服务器
跨库查询我们要用BizDb进行查询,因为BizDb是多变的,而MasterDb是固定的,查询用BizDb为主
var List = BizDb.Queryable<Order>()
.LeftJoin<Custom>((o, cus) => o.CustomId == cus.Id)
.AS<Custom>("SQLSUGAR4XTEST.dbo.Custom") //主表用AS("") 从表用AS<T>("")
.Where(o => o.Id == 1)
.Select((o, cus) => new ViewOrder { Id = o.Id, CustomName = cus.Name })
.ToList();
生成的SQL如下:
SELECT [o].[Id] AS [Id] ,
[cus].[Name] AS [CustomName]
FROM [Order] o
Left JOIN [SQLSUGAR4XTEST].[dbo].[Custom] cus --生成的Sql就多了库名
ON ( [o].[CustomId] = [cus].[Id] ) WHERE ( [o].[Id] = @Id0 )
注意:上面的例子是SqlServer跨库查询的用法,不同的数据库跨库查询用法不一样
更多用法: https://www.donet5.com/Home/Doc?typeId=2244
4.2跨库不同服务器
因为我们基础信息库是固定的,所以我们可以把基础信息库,同步到不同的服务器上,通过读分离的方式 ,那么每个业务服务器都会有一个
基础信息库了,然后在通过4.1的方式实现
5、业务表创建
我们可以通过CodeFirst创建业务库和表
https://www.donet5.com/Home/Doc?typeId=1207
7、表过滤
一个业务库中的表对应多个集团,那我们设计表的时候肯定有个 OrgId或者租户ID进行数据表区别
我们需要将DbManger.bizDb进行修改,添加相应的表过滤器如果表中有OrgId的就可以添加过滤器
/// <summary>
/// 获取业务库对象
/// </summary>
public static ISqlSugarClient BizDb
{
get
{
UserInfo user = GetUserInfo();//获取用户数据库连接字符串信息
var configId = user.OrgId.ToString();//集团ID(也可以叫租户ID)
if(!Db.IsAnyConnection(configId)){
Db.AddConnection(new ConnectionConfig() {
ConfigId = configId,
ConnectionString = "DataSource=" + user.Connection,
DbType = DbType.SqlServer,
IsAutoCloseConnection = true });
} var result=Db.GetConnection(configId);
result.QueryFilter.Add(new TableFilterItem<Order>(it => it.OrgId==configId);//添加表过滤器
//可以多个表 return result;
}
}
https://www.donet5.com/Home/Doc?typeId=1205
8、高安全性日志
我们可以通过差异日志拿到数据更变记录,记录到日志,SAAS操作一些核心数据差异日志肯定少不了,安全系数高
db.Aop.OnDiffLogEvent = it =>
{
//操作前记录 包含: 字段描述 列名 值 表名 表描述
var editBeforeData = it.BeforeData;
//操作后记录 包含: 字段描述 列名 值 表名 表描述
var editAfterData = it.AfterData;
var sql = it.Sql;
var parameter = it.Parameters;
var data = it.BusinessData;//这边会显示你传进来的对象
var time = it.Time;
var diffType=it.DiffType;//enum insert 、update and delete //Write logic
}; db.Insertable(new Student() { Name = "beforeName" })
.EnableDiffLogEvent() //注意需要加上启用日志,可以传参数
.ExecuteReturnIdentity();
具体用法:https://www.donet5.com/Home/Doc?typeId=1204
9、总结
SAAS架构用到技术基本上都是现有功能,我这一篇文章相当于一个汇总,本人也做了6年SAAS架构,至少目前的方案是成熟方案 ,并且有产品验证并且上线运营,如果有更好的建议可能发贴,或者直接找我沟通
1、数据库设计
常用的Saas分库分为2种类型的库
1.1 基础信息库
主要存组织架构 、权限、字典、用户等 公共信息
性能优化:因为基础信息库是共享的,所以我们可以使用 读写分离,或者二级缓存来进行性能上的优化
2.2 业务库
我们要进行的分库都基于业务库进行分库,例如 A集团使用 A01库 ,B集团使用B01库 ,也可以多个小集团使用一个 数据库
如下:
业务库1 :集团A
业务库2 : 集团B, 集团F
业务库3 : 集团C, 集团D, 集团E
性能优先:因为合理的进行了分库,所以在性能上并没有什么瓶颈,并且数据库可以扔到不同的服务器上
2、表设计
下面的表设计的比较简单,主要是通过用户可以拿到当前用户的连接字符串,然进行数据库操作
2.1 数据库配置表
主键、数据库连接信息、集团ID (基础信息库)
2.2 用户表
主键、用户名、密码、集团ID (基础信息库)
3、代码编写
下面的代码很简单,我们通了多租户方式实现了动态根据用户获取不同的业务库
操作业务库我们使用 DbManger.BizDb
操作基础信息库我们使用 DbManger.MasterDb
如果我们要用到事务就用 DbManger.Db
/// <summary> /// 数据库管理 /// </summary> public class DbManger { /// <summary> /// 获取业务库对象 /// </summary> public static ISqlSugarClient BizDb { get { UserInfo user = GetUserInfo();//获取用户数据库连接字符串信息 var configId = user.OrgId.ToString();//集团ID(也可以叫租户ID) if(!Db.IsAnyConnection(configId)){ Db.AddConnection(new ConnectionConfig() { ConfigId = configId, ConnectionString = "DataSource=" + user.Connection, DbType = DbType.SqlServer, IsAutoCloseConnection = true }); } var result=Db.GetConnection(configId); //可以给业务库result设置AOP return result; } } /// <summary> /// 业取基础信息库 /// </summary> public static ISqlSugarClient MasterDb { get { //如果是跨服务库分库,也需要动态配置的,因为库的IP会变 //参考业务库用法 return Db.GetConnection("default"); } } /// <summary> /// 利用SqlSugarScope单例+多租户来处理多库事务 /// </summary> public static SqlSugarScope Db =new SqlSugarScope(new ConnectionConfig() { ConfigId="default", DbType = SqlSugar.DbType.SqlServer, ConnectionString = @"基础信息库连接字符串", IsAutoCloseConnection = true }, db => { //基础库AOP db.Aop.OnLogExecuting = (s, p) => { }; }); /// <summary> /// 获取用户数据库连接字符串信息 /// </summary> /// <returns></returns> private static UserInfo GetUserInfo() { throw new System.NotImplementedException(); } } |
使用用例,继承后直接使用
public class OrderManger: DbManger { public void Test() { try { Db.BeginTran();//用Db管理 MasterDb和BizDb事务 MasterDb.Insertable(xxx).ExecuteCommand();//操作基础信息库 BizDb.Insertable(xxx).ExecuteCommand();//操作业务库 Db.CommitTran();//统一事务 } catch (System.Exception ex) { Db.RollbackTran(); throw ex; }; } } |
4、跨库查询
4.1 跨库同服务器
跨库查询我们要用BizDb进行查询,因为BizDb是多变的,而MasterDb是固定的,查询用BizDb为主
var List = BizDb.Queryable<Order>() .LeftJoin<Custom>((o, cus) => o.CustomId == cus.Id) .AS<Custom>("SQLSUGAR4XTEST.dbo.Custom") //主表用AS("") 从表用AS<T>("") .Where(o => o.Id == 1) .Select((o, cus) => new ViewOrder { Id = o.Id, CustomName = cus.Name }) .ToList(); |
生成的Sql如下
SELECT [o].[Id] AS [Id] , [cus].[Name] AS [CustomName] FROM [Order] o Left JOIN [SQLSUGAR4XTEST].[dbo].[Custom] cus --生成的Sql就多了库名ON ( [o].[CustomId] = [cus].[Id] ) WHERE ( [o].[Id] = @Id0 ) |
注意:上面的例子是SqlServer跨库查询的用法,不同的数据库跨库查询用法不一样,
更多用法: https://www.donet5.com/Home/Doc?typeId=2244
4.2跨库不同服务器
因为我们基础信息库是固定的,所以我们可以把基础信息库,同步到不同的服务器上,通过读分离的方式 ,那么每个业务服务器都会有一个
基础信息库了,然后在通过4.1的方式实现
5、业务表创建
我们可以通过CodeFirst创建业务库和表
https://www.donet5.com/Home/Doc?typeId=1207
7、表过滤
一个业务库中的表对应多个集团,那我们设计表的时候肯定有个 OrgId或者租户ID进行数据表区别
我们需要将DbManger.bizDb进行修改,添加相应的表过滤器如果表中有OrgId的就可以添加过滤器
/// <summary>/// 获取业务库对象/// </summary>public static ISqlSugarClient BizDb { get { UserInfo user = GetUserInfo();//获取用户数据库连接字符串信息 var configId = user.OrgId.ToString();//集团ID(也可以叫租户ID) if(!Db.IsAnyConnection(configId)){ Db.AddConnection(new ConnectionConfig() { ConfigId = configId, ConnectionString = "DataSource=" + user.Connection, DbType = DbType.SqlServer, IsAutoCloseConnection = true }); } var result=Db.GetConnection(configId); result.QueryFilter.Add(new TableFilterItem<Order>(it => it.OrgId==configId);//添加表过滤器 //可以多个表 return result; }} |
https://www.donet5.com/Home/Doc?typeId=1205
8、高安全性日志
我们可以通过差异日志拿到数据更变记录,记录到日志,SAAS操作一些核心数据差异日志肯定少不了,安全系数高
db.Aop.OnDiffLogEvent = it =>{ //操作前记录 包含: 字段描述 列名 值 表名 表描述 var editBeforeData = it.BeforeData; //操作后记录 包含: 字段描述 列名 值 表名 表描述 var editAfterData = it.AfterData; var sql = it.Sql; var parameter = it.Parameters; var data = it.BusinessData;//这边会显示你传进来的对象 var time = it.Time; var diffType=it.DiffType;//enum insert 、update and delete //Write logic};db.Insertable(new Student() { Name = "beforeName" }).EnableDiffLogEvent() //注意需要加上启用日志,可以传参数.ExecuteReturnIdentity(); |
具体用法:https://www.donet5.com/Home/Doc?typeId=1204
9、总结
SAAS架构用到技术基本上都是现有功能,我这一篇文章相当于一个汇总,本人也做了6年SAAS架构,至少目前的方案是成熟方案 ,并且有产品验证并且上线运营,如果有更好的建议可能发贴,或者直接找我沟通
源码下载: https://github.com/donet5/sqlsugar
Nuget: 安装SqlSugarCore
.NET SAAS 架构与设计 -SqlSugar ORM的更多相关文章
- 记SqlSugar ORM框架之找不到主键问题
前端时间在.NetCore项目中使用SqlSugar ORM框架(引用sqlSugarCore依赖包)的时候遇到了一个奇葩问题:对表进行数据更新操作的时候,报错 “ You cannot have n ...
- 高性能数据导入方案&表过滤器&一对多支持筛选- .NET SqlSugar ORM
一.数据导入有哪些难题 1.数据分类 你需要将 插入.更新.忽略不计.错误数据 等进么分类汇总,最后返回给客户,如果没有很好的设计想把这些操作一步到位非常的难 2.高性能 对于插入或者更新 肯定不能单 ...
- Saas系统架构的思考,多租户Saas架构设计分析
ToB Saas系统最近几年都很火.很多创业公司都在尝试创建企业级别的应用 cRM, HR,销售, Desk Saas系统.很多Saas创业公司也拿了大额风投.毕竟Saas相对传统软件的优势非常明显. ...
- 要想不踩SaaS那些坑,得先了解“SaaS架构”
摘要:围绕当下许多企业青睐的SaaS应用开发,华为云开发者技术服务工程师程泽在DTT首期带来主题为 <SaaS云原生应用典型架构> 的DTT首期直播分享. 本文分享自华为云社区<DT ...
- SqlSugar ORM已经支持读写分离
目前只有MYSQL版 3.5.2.9 支持,其库版本12月3号更新该功能 用例讲解 using (var db = new SqlSugarClient("主连接字符串", &qu ...
- 基于Flume的美团日志收集系统(一)架构和设计
美团的日志收集系统负责美团的所有业务日志的收集,并分别给Hadoop平台提供离线数据和Storm平台提供实时数据流.美团的日志收集系统基于Flume设计和搭建而成. <基于Flume的美团日志收 ...
- 基于Flume的美团日志收集系统(一)架构和设计【转】
美团的日志收集系统负责美团的所有业务日志的收集,并分别给Hadoop平台提供离线数据和Storm平台提供实时数据流.美团的日志收集系统基于Flume设计和搭建而成. <基于Flume的美团日志收 ...
- Micro 架构与设计
Micro 架构与设计 翻译自 Micro architecture & design patterns for microservices 注: 原文作者即 Micro 框架的开发者. 过去 ...
- 也谈TDD,以及三层架构、设计模式、ORM……:没有免费的午餐
想在园子里写点东西已经很久了,但一直没有落笔,忙着做 一起帮 的开发直播,还有些软文做推广,还要做奶爸带孩子,还要……好吧,我承认,真正的原因是: 太特么的难写了! 但再难写也要写啊,要等到“能写好了 ...
随机推荐
- Machine learning (7-Regularization)
1.The Problem of Over-fitting 2.Cost Function 3.Regularized Linear Regression 4.Regularized Logistic ...
- systemverilog 字符串类型
转载:https://blog.csdn.net/Holden_Liu/article/details/100727957 传统的Veriog仅仅支持文字表述上的字符串, 而SystemVerilog ...
- 前端---梳理 http 知识体系 1
最近看了http相关的知识点,觉得还是有必要整理下,这样对自己的网络知识体系也有帮助. http 是什么 http叫超文本传输协议,可以拆成超文本.传输.协议来理解 协议 http 是一个用在计算机里 ...
- 关于docker中容器可以Ping通外网,真机无法Ping通容器的问题
首先我们要知道整体的框架结构,docker是我们安装在centos7上的,而centos7是安装在vmware上.其中docker中还有若干容器运行. 整体框架图如下: 我们将它分为两部分,一部分是d ...
- Kioskcached(2) 之 使用tcmalloc 替换 ptmalloc
前言 我在 Kioskcached(1)之 Memcached & Redis & Kioskcached 性能测试对比 中找到的一个问题是 malloc,对于一个内存型数据库,很容易 ...
- 深入探索 Linux listen() 函数 backlog 的含义
1:listen()回顾以及问题引入 2:正确的解释 3:实验验证 1:listen()回顾以及问题引入 listen()函数是网络编程中用来使服务器端开始监听端口的系统调用,首先来回顾下listen ...
- sqlalchemy insert on duplicate update
sqlalchemy insert on duplicate update from sqlalchemy.dialects.mysql import insert insert_stmt = ins ...
- Java发展的重大事故
1990年,在Sun计算机公司中,由Patrick Naughton.Mi keSheridan 及 James Gosling领导的小组Green Team,开发出的新的程序语言,命名为0ak, 后 ...
- 获取鼠标在 canvas 中的位置
一般情况 一般情况下,如果需要在 canvas 中获取鼠标指针坐标,可以通过监听鼠标的 mousemove(如果只需单击时的坐标,可以用 click)事件. 当事件被触发时,我们可以获取鼠标相对于 v ...
- Effective C++ 总结笔记(一)
一.让自己习惯C++ 01.视C++为一个语言联邦 c++是多重范型编程 语言,视c++包括4种次语言: 1:C 2:Object-Oreinted C++: 3:Template C++: 4:ST ...