搜云库技术团队

背景 挑战 目标 背景 面对日益增加的系统访问量，数据库的吞吐量面临着巨大瓶颈。 对于同一时刻有大量并发读操作和较少写操作类型的应用系统来说，将数据库拆分为主库和从库，主库负责处理事务性的增删改操作，从库负责处理查询操作，能够有效的避免由数...

赞(0)站长2020-07-24ShardingSphere汇总 阅读(689)

导览 本小节介绍数据分片部分的其他功能，主要包括： Inline表达式 分布式主键 强制分片路由 行表达式 实现动机 语法说明 配置数据节点 配置分片算法 实现动机 配置的简化与一体化是行表达式所希望解决的两个主要问题。 在繁琐的数据分片规...

赞(0)站长2020-07-24ShardingSphere汇总 阅读(786)

ShardingSphere使用不同解析器支持SQL多种方言。对于未实现解析器的特定SQL方言，默认采用SQL92标准进行解析。 特定SQL方言解析器 PostgreSQL解析器 MySQL解析器 Oracle解析器 SQLServer解析...

赞(0)站长2020-07-24ShardingSphere汇总 阅读(732)

背景 虽然ShardingSphere希望能够完全兼容所有的SQL以及单机数据库，但分布式为数据库带来了更加复杂的场景。ShardingSphere希望能够优先解决海量数据OLTP的问题，OLAP的相关支持，会一点一点的逐渐完善。 请进一步...

赞(0)站长2020-07-24ShardingSphere汇总 阅读(943)

将从各个数据节点获取的多数据结果集，组合成为一个结果集并正确的返回至请求客户端，称为结果归并。 ShardingSphere支持的结果归并从功能上分为遍历、排序、分组、分页和聚合5种类型，它们是组合而非互斥的关系。 从结构划分，可分为流式归...

赞(0)站长2020-07-24ShardingSphere汇总 阅读(692)

ShardingSphere采用一套自动化的执行引擎，负责将路由和改写完成之后的真实SQL安全且高效发送到底层数据源执行。 它不是简单地将SQL通过JDBC直接发送至数据源执行；也并非直接将执行请求放入线程池去并发执行。它更关注平衡数据源连...

赞(0)站长2020-07-24ShardingSphere汇总 阅读(692)

工程师面向逻辑库与逻辑表书写的SQL，并不能够直接在真实的数据库中执行，SQL改写用于将逻辑SQL改写为在真实数据库中可以正确执行的SQL。 它包括正确性改写和优化改写两部分。 正确性改写 在包含分表的场景中，需要将分表配置中的逻辑表名称改...

赞(0)站长2020-07-24ShardingSphere汇总 阅读(715)

根据解析上下文匹配数据库和表的分片策略，并生成路由路径。 对于携带分片键的SQL，根据分片键的不同可以划分为单片路由(分片键的操作符是等号)、多片路由(分片键的操作符是IN)和范围路由(分片键的操作符是BETWEEN)。 不携带分片键的SQ...

赞(0)站长2020-07-24ShardingSphere汇总 阅读(813)

相对于其他编程语言，SQL是比较简单的。 不过，它依然是一门完善的编程语言，因此对SQL的语法进行解析，与解析其他编程语言（如：Java语言、C语言、Go语言等）并无本质区别。 抽象语法树 解析过程分为词法解析和语法解析。 词法解析器用于将...

赞(0)站长2020-07-24ShardingSphere汇总 阅读(732)

ShardingSphere的3个产品的数据分片主要流程是完全一致的。 核心由SQL解析 => 执行器优化 => SQL路由 => SQL改写 => SQL执行 => 结果归并的流程组成。 SQL解析 分为词法...

赞(0)站长2020-07-24ShardingSphere汇总 阅读(741)