搜云库技术团队

　　Storm集群的安装分为以下几步： 　　1、首先保证Zookeeper集群服务的正常运行以及必要组件的正确安装 　　2、释放压缩包 　　3、修改storm.yaml添加集群配置信息 　　4、使用storm脚本启动相应服务并查看服务状态 ...

赞(0)站长2020-08-25技术文章汇总 阅读(543)

　　Solr是一个企业级搜索服务器，对外提供Web-Service接口，用户可以通过http请求，向搜索引擎提交xml或者json格式的数据，生成索引；然后可以通过http get请求查找，获取返回的xml或者json等多种格式的数据。 　...

赞(0)站长2020-08-25技术文章汇总 阅读(548)

　　Zookeeper是一个分布式、开源的分布式应用程序协调服务，是Google的Chubby的开源实现，也是和Hadoop、Hbase相互配合的重要组件，作用就是为分布式应用程序提供一致性服务，包括配置维护、名字服务、分布式同步等 　　接...

赞(0)站长2020-08-25技术文章汇总 阅读(516)

　　上个博客写了Hadoop2.6.0的环境部署，下面写一个简单的基于数字排序的小程序，真正实现分布式的计算，原理就是对多个文件中的数字进行排序，每个文件中每个数字占一行，排序原理是按行读取后分块进行排序，最后对块进行合并，通俗来说就是首先...

赞(0)站长2020-08-25技术文章汇总 阅读(493)

　　Hadoop的集群部署和单节点部署类似，配置文件不同，另外需要修改网络方面的配置 　　首先，准备3台虚拟机，系统为CentOS 6.6，其中一台为namenode 剩余两台为 datanode； 　　修改主机名主节点为：hadoopha...

赞(0)站长2020-08-25技术文章汇总 阅读(635)

　　首先编写WordCount.java源文件，分别通过map和reduce方法统计文本中每个单词出现的次数，然后按照字母的顺序排列输出， 　　Map过程首先是多个map并行提取多个句子里面的单词然后分别列出来每个单词，出现次数为1，全部列...

赞(0)站长2020-08-25技术文章汇总 阅读(653)

　　Hadoop环境搭建成功后，一般会运行一个小例子，这时候就涉及到了对HDFS文件系统的操作，对于刚开始学习Hadoop的初学者一般会多次的进行name节点的格式化操作，最后导致上传文件会抛出异常，通过jps命令查看会发现除了DataNo...

赞(0)站长2020-08-25技术文章汇总 阅读(623)

　　首先要下载hadoop的包，版本选择1.2.1的，下载地址为：http://mirrors.cnnic.cn/apache/hadoop/common/hadoop-1.2.1/ 　　 　　这里可以下载hadoop-1.2.1-tar....

赞(0)站长2020-08-25技术文章汇总 阅读(591)

ssh是比较可靠的应用层远程会话协议，也是通过客户端管理大量服务器的主流协议，默认情况下通过ssh登录服务器需要输入用户名和密码进行连接，但是集群的服务器之间一般都会配置免密码登录，这样对于运维和软件运行都非常方便，比如hadoop集群，如...

赞(0)站长2020-08-25技术文章汇总 阅读(528)

前言： Spire.Cloud 在线编辑器是一款基于网页的 Office 文件编辑工具，支持在网页中打开、编辑、打印 Word、Excel、PPT 文件，支持将文档保存到私有云盘。支持 IE、Chrome、FireFox、搜狗、遨游、360...

赞(0)站长2020-08-25技术文章汇总 阅读(538)