搜云库技术团队

　　之前介绍过2篇SolrCloud的部署流程，第一个是使用安装脚本的方式进行抽取安装，启动比较方便，但是会创建多个目录，感觉比较乱；第二个是官方教程上提供的方法，使用比较简单，直接释放压缩包即可，并且启动cloud实例的时候默认会创建一个...

赞(0)站长2020-08-25技术文章汇总 阅读(527)

　　前面说过了Storm的测试项目，那么此时我们更想自己写一个小项目来练练手，首先我们自己的Windows系统上首先应该安装好maven，然后启动Eclipse for JavaEE版本，接下来开始建立项目并开发 　　注意，在开发过程中，无...

赞(0)站长2020-08-25技术文章汇总 阅读(627)

　　之前Storm安装之后，也知道了Storm的一些相关概念，那么怎么样才可以运行一个例子对Storm流式计算有一个感性的认识呢，那么下面来运行一个Storm安装目录自带的测试案例，我们的Storm安装在服务器的/usr/storm/apa...

赞(0)站长2020-08-25技术文章汇总 阅读(600)

　　在大数据出现的早期，当时企业或者开发者所注重的都是批量计算，当时对于开发者来说，对于一定量数据的处理，利用普通的程序就可以解决，然而当数据量或者计算量到达一定数量之后，应用程序的计算需要的时间也和数据量一样飞速增长，这个时候仅仅依靠传统...

赞(0)站长2020-08-25技术文章汇总 阅读(525)

　　前面说过Kafka集群环境的部署，现在主要说一下在本地测试中Kafka单机环境的部署，和前面一样首先保证zookeeper服务的正常运行，然后解压并释放kafka安装包，并放到指定位置： tar -xvzf kafka_2.9.2-0....

赞(0)站长2020-08-25技术文章汇总 阅读(563)

　　前面说过storm集群的部署，这篇主要介绍storm单机环境部署，其实他们之间很类似，就是将之前配置文件中所有的集群条目改成本机的地址即可，部署之前应该按前面solr和zookeeper单机环境部署那篇文章中，正确设置好zookeepe...

赞(0)站长2020-08-25技术文章汇总 阅读(539)

　　首先和之前一样下载solr-5.3.1.tgz，然后执行下面命令释放文件并放置在/usr/目录下： $ tar -xvzf solr-5.3.1.tgz $ mv solr-5.3.1 /usr/ $ cd /usr/solr-5.3....

赞(0)站长2020-08-25技术文章汇总 阅读(597)

　　Zookeeper服务安装之后，一般会在这个服务的基础之上安装其他的大数据平台，其他的框架一般会提供很多接口对Zookeeper中的内容进行一定的操作，但是功能相对单一，所以有些时候，有必要我们自己登录Zookeeper服务器，对里面的...

赞(0)站长2020-08-25技术文章汇总 阅读(549)

　　Kafka是一个分布式、可分区、可复制的消息系统。Kafka将消息以topic为单位进行归纳；Kafka消息的程序称为producer，也叫生产者；Kafka预订topics并消费消息的程序称为consumer，也叫消费者；当Kafka...

赞(0)站长2020-08-25技术文章汇总 阅读(563)

　　前面写过生产过程中的SolrCloud集群配置，实际上官方给出的是免安装配置，启动时采用命令行参数的方式启动，这样相对简单，并且官方文档也给出了外部Zookeeper的配置，和前面说的基本一致，这个不影响，在配置好Zookeeper之后...

赞(0)站长2020-08-25技术文章汇总 阅读(642)