搜云库技术团队

大数据篇：ElasticSearch ElasticSearch是什么 ElasticSearch是一个基于Lucene的搜索服务器。它提供了一个分布式多用户能力的全文搜索引擎，基于RESTful web接口。Elasticsearch是用...

赞(0)站长2020-07-30Java汇总 阅读()

大数据篇：Zookeeper 1 Zookeeper概念 Zookeeper是什么 是一个基于观察者设计模式的分布式服务管理框架，它负责和管理需要关心的数据，然后接受观察者的注册，一旦这些数据的状态发生变化，Zookeeper就将负责通知已...

赞(0)站长2020-07-30Java汇总 阅读()

大数据篇：YARN YARN是什么? YARN是一种新的 Hadoop 资源管理器，它是一个通用资源管理系统，可为上层应用提供统一的资源管理和调度，它的引入为集群在利用率、资源统一管理和数据共享等方面带来了巨大好处。 如果没有YARN! 1...

赞(0)站长2020-07-30Java汇总 阅读()

大数据篇：MapReduce MapReduce是什么? MapReduce源自于Google发表于2004年12月的MapReduce论文，是面向大数据并行处理的计算模型、框架和平台，而Hadoop MapReduce是Google Ma...

赞(0)站长2020-07-30Java汇总 阅读()

大数据篇：HDFS HDFS是什么? Hadoop分布式文件系统(HDFS)是指被设计成适合运行在通用硬件(commodity hardware)上的分布式文件系统（Distributed File System）。它和现有的分布式文件系统...

赞(0)站长2020-07-30Java汇总 阅读()

IntelliJ IDEA 2020.2 稳定版已发布，此版本带来了不少新功能，包括支持在 IDE 中审查和合并 GitHub PR、新增加的 Inspections 小组件(Inspections Widget)支持在文件的警告和错误之间...

赞(0)站长2020-07-30软件资讯 阅读()

1、Producer负载均衡 Producer端，每个实例在发消息的时候，默认会轮询所有的message queue发送，以达到让消息平均落在不同的queue上。而由于queue可以散落在不同的broker，所以消息就发送到不同的broke...

赞(0)站长2020-07-29Java汇总 阅读()

一、分布式集群 RocketMQ分布式集群是通过Master和Slave的配合达到高可用性的。 Master和Slave的区别：在Broker的配置文件中，参数brokerId的值为0表明这个Broker是Master，大于0表明这个Bro...

赞(0)站长2020-07-29Java汇总 阅读()

一、基本流程 分布式队列因为有高可靠性的要求，所以数据要进行持久化存储。 1、 消息生成者发送消息 2、 MQ收到消息，将消息进行持久化，在存储中新增一条记录 3、 返回 ACK给生产者 4、 MQ push 消息给对应的消费者，然后等待消...

赞(0)站长2020-07-29Java汇总 阅读()

1、背景： RockeyMQ实现分布式事务（拿下单和扣减库存为例，如果下单和扣减库存在一个分布式系统中，需要维持一个事务性） 如果下单后发消息提示需要扣减库存，保持一个分布式事务的一致性，就会出现以下场景： 场景一：先下单后发消息 问题：先...

赞(0)站长2020-07-29Java汇总 阅读()