分区
分区就是把一个数据表的文件和索引分散存储在不同的物理文件中。把一张表的数据分成N多个区块,这些区块可以在同一个磁盘上,也可以在不同的磁盘上,数据库不同实现方式有所不同。
与分表不同,一张大表进行分区后,他还是一张表,不会变成二张表,但是他存放数据的区块变多了。分区的概念,我觉得就想突破磁盘I/O瓶颈,想提高磁盘的读写能力,来增加数据库的性能。
分区实现是比较简单的,建立分区表,根建平常的表没什么区别,并且对开发代码端来说是透明。
postgresql10以上的自动分区分表功能:
1、首先创建主分区表:
create table fenbiao( id int, year varchar ) partition by list(year)
这里设置的是根据year列进行数据分表;创建后使用navicat是看不到的;
2.创建分表:
create table fenbiao_2017 partition of fenbiao for values in ('2017'); create
table fenbiao_2018 partition of fenbiao for values in ('2018');
这样这两天数据会依靠规则插入到不同分表中,如果插入一条不符合规则的数据,则会报错误:no partition of relation "fenbiao"
found for row.
分表
分表从表面意思上看呢,就是把一张表分成N多个小表,每一个小表都是完正的一张表。分表后数据都是存放在分表里,总表只是一个外壳,存取数据发生在一个一个的分表里面。
分表后单表的并发能力提高了,磁盘I/O性能也提高了。并发能力为什么提高了呢,因为查寻一次所花的时间变短了,如果出现高并发的话,总表可以根据不同
的查询,将并发压力分到不同的小表里面。
分库分表
分库分表把原本存储于一个库的数据分块存储到多个库上,把原本存储于一个表的数据分块存储到多个表上。
数据库中的数据量不一定是可控的,在未进行分库分表的情况下,随着时间和业务的发展,库中的表会越来越多,表中的数据量也会越来越大,相应地,数据操作,增删改查的开销也会越来越大;另外,一台服务器的资源(CPU、磁盘、内存、IO等)是有限的,最终数据库所能承载的数据量、数据处理能力都将遭遇瓶颈。
FreeSql.Repository 之分表
FreeSql 提供 AsTable 分表的基础方法,GuidRepository 作为分存式仓储将实现了分表与分库(不支持跨服务器分库)的封装。
var logRepository = fsql.GetGuidRepository<Log>(null, oldname =>
$"{oldname}_201903");
上面我们得到一个日志仓储按年月分表,使用它 CURD 最终会操作 Log_201903 表。
注意事项:
* 不能使用 CodeFirst 迁移分表,开发环境时仍然可以迁移 Log 表;
* 不可在分表分库的实体类型中使用《延时加载》;
跨表查询
var sql = fsql.Select<User>() .AsTable((type, oldname) => "table_1")
.AsTable((type, oldname) => "table_2") .AsTable((type, oldname) => "table_3")
.ToSql(a => a.Id);
得到SQL:
select * from (SELECT a."Id" as1 FROM "table_1" a) ftb UNION ALL select * from
(SELECT a."Id" as1 FROM "table_2" a) ftb UNION ALL select * from (SELECT a."Id"
as1 FROM "table_3" a) ftb
多表查询:
var sql = fsql.Select<User>().LeftJoin<UserGroup>((a,b) => a.UserGroupId ==
b.Id) .AsTable((type, oldname) => oldname + "_1") .AsTable((type, oldname) =>
oldname + "_2") .AsTable((type, oldname) => oldname + "_3") .ToSql(a => a.Id);
期待更多发散。。。
巧用AsTable
var sql = fsql.Select<User>() .AsTable((a, b) => "(select * from tb_topic
where clicks > 10)") .Page(1, 10).ToList()
系列文章导航
*
(一)入门 <https://www.cnblogs.com/FreeSql/p/11531300.html>
*
(二)自动迁移实体 <https://www.cnblogs.com/FreeSql/p/11531301.html>
*
(三)实体特性 <https://www.cnblogs.com/FreeSql/p/11531302.html>
*
(四)实体特性 Fluent Api <https://www.cnblogs.com/FreeSql/p/11531304.html>
*
(五)插入数据 <https://www.cnblogs.com/FreeSql/p/11531306.html>
*
(六)批量插入数据 <https://www.cnblogs.com/FreeSql/p/11531309.html>
*
(七)插入数据时忽略列 <https://www.cnblogs.com/FreeSql/p/11531316.html>
*
(八)插入数据时指定列 <https://www.cnblogs.com/FreeSql/p/11531318.html>
*
(九)删除数据 <https://www.cnblogs.com/FreeSql/p/11531320.html>
*
(十)更新数据 <https://www.cnblogs.com/FreeSql/p/11531321.html>
*
(十一)更新数据 Where <https://www.cnblogs.com/FreeSql/p/11531324.html>
*
(十二)更新数据时指定列 <https://www.cnblogs.com/FreeSql/p/11531327.html>
*
(十三)更新数据时忽略列 <https://www.cnblogs.com/FreeSql/p/11531334.html>
*
(十四)批量更新数据 <https://www.cnblogs.com/FreeSql/p/11531335.html>
*
(十五)查询数据 <https://www.cnblogs.com/FreeSql/p/11531339.html>
*
(十六)分页查询 <https://www.cnblogs.com/FreeSql/p/11531341.html>
*
(十七)联表查询 <https://www.cnblogs.com/FreeSql/p/11531346.html>
*
(十八)导航属性 <https://www.cnblogs.com/FreeSql/p/11531352.html>
*
(十九)多表查询 <https://www.cnblogs.com/FreeSql/p/11531362.html>
*
(二十)多表查询 WhereCascade <https://www.cnblogs.com/FreeSql/p/11531372.html>
*
(二十一)查询返回数据 <https://www.cnblogs.com/FreeSql/p/11531376.html>
*
(二十二)Dto 映射查询 <https://www.cnblogs.com/FreeSql/p/11531381.html>
*
(二十三)分组、聚合 <https://www.cnblogs.com/FreeSql/p/11531384.html>
*
(二十四)Linq To Sql 语法使用介绍 <https://www.cnblogs.com/FreeSql/p/11531392.html>
*
(二十五)延时加载 <https://www.cnblogs.com/FreeSql/p/11531395.html>
*
(二十六)贪婪加载 Include、IncludeMany、Dto、ToList
<https://www.cnblogs.com/FreeSql/p/11531404.html>
*
(二十七)将已写好的 SQL 语句,与实体类映射进行二次查询
<https://www.cnblogs.com/FreeSql/p/11531416.html>
*
(二十八)事务 <https://www.cnblogs.com/FreeSql/p/11531423.html>
*
(二十九)Lambda 表达式 <https://www.cnblogs.com/FreeSql/p/11531425.html>
*
(三十)读写分离 <https://www.cnblogs.com/FreeSql/p/11531430.html>
*
(三十一)分区分表
*
(三十二)Aop <https://www.cnblogs.com/FreeSql/p/11531471.html>
*
(三十三)CodeFirst 类型映射 <https://www.cnblogs.com/FreeSql/p/11531543.html>
*
(三十四)CodeFirst 迁移说明 <https://www.cnblogs.com/FreeSql/p/11531550.html>
*
(三十五)CodeFirst 自定义特性 <https://www.cnblogs.com/FreeSql/p/11531576.html>
热门工具 换一换