搜云库技术团队

MHA是什么？ MHA（master high availability） 是用来保证 Mysql 集群高可用性的，对 master 进行监控，发现 master 出现故障后，自动进行故障转移，从众多 slave 中选举出新的 master...

赞(0)站长2019-12-12优质文章 阅读()

1. 问题描述 并发竞争key这个问题简单讲就是： 同时有多个客户端去set一个key。 示例场景 1 例如有多个请求一起去对某个商品减库存，通常操作流程是： 取出当前库存值 计算新库存值 写入新库存值 假设当前库存值为 20，现在有2个连...

赞(0)站长2019-12-12优质文章 阅读()

高并发设计可以从以下几方面考虑： 无状态 拆分 服务化 消息队列 数据异构 缓存 并发化 1. 无状态 无状态的应用容易进行水平扩展。 实际常用：应用无状态，配置文件有状态，例如，不同的机房读取不同的配置文件，通过配置中心指定。 2. 拆分...

赞(0)站长2019-12-12优质文章 阅读()

Leader 选举用于保证系统的高可用，例如一个重要服务，为防止其出现故障使服务中断，同时准备好另外2个备用，这就需要从3个服务节点中选出一个对外服务，这个服务出现故障后，从另两个服务节点中再选出一个对外提供服务，这个选主过程就是 Lead...

赞(0)站长2019-12-12优质文章 阅读()

线上数据库难免会有修改表结构的需求，MySQL 在修改表结构时会锁表，这就会影响读写操作，小表还好，一会儿就修改完成了，但大表会比较麻烦，下面看一个解决方案 解决思路 （1）新建一个表，结构就是要修改后的结构 （2）在旧表上建立触发器，旧表...

赞(0)站长2019-12-12优质文章 阅读()

1. 简介 Elasticsearch 是一个高可靠开源全文搜索与分析引擎，可以让我们实时存储、查询、分析海量数据 具有安装方便、稳定可靠、快速、实时等特点，是当前流行的企业级搜索引擎 应用场景示例： 在线商店中的产品搜索，可以使用 Ela...

赞(0)站长2019-12-11优质文章 阅读()

问题描述 Hadoop 中有一个分布式调度框架 YARN，是很基础的重要框架，用来支持多种计算模型和进行资源调度。 先看下 YARN 的架构图 不需要了解这个架构的细节，只需要看到其中的一个重点： 中间的 ResourceManager 存...

赞(0)站长2019-12-11优质文章 阅读()

昨天的文章写了系统被黑过程，原因是redis安全配置没做好，让黑客轻松通过redis设置了ssh免密码登陆，从而成功入侵 对这个攻击过程有点好奇，就查了下相关资料，弄清楚了攻击思路 基本思路 黑客在自己的机器中生成 ssh 的公钥/私钥，需...

赞(0)站长2019-12-11优质文章 阅读()

隔离是通过将系统、资源分开，从而保证在发生问题时使其影响最小化，防止出现雪崩效应。 例如系统中有服务接口 A B C，因为某些原因，接口A的访问量激增，占用了大量系统资源，导致 B C 接口也无法正常运行了。如果使用了隔离机制，即使A的访问...

赞(0)站长2019-12-11优质文章 阅读()

Hive是什么 简单来说，通过 Hive 可以使用 SQL 来查询分析 Hadoop 中的大规模数据 Hive 的思路就是将结构化的数据文件映射为数据库表，然后把SQL语句转换为MapReduce任务来执行 下面看一个简单的示例，了解下 H...

赞(0)站长2019-12-11优质文章 阅读()