搜云库技术团队

一、分布式HDFS的安装和启动 ①在$HADOOP_HOME/etc/hadoop/core-site.xml文件 <configuration> <property> <name>fs.defaultF...

赞(0)站长2020-07-19优质文章 阅读(918)

一、Hadoop的安装 ①Hadoop运行的前提是本机已经安装了JDK，配置JAVA_HOME变量 ②在Hadoop中启动多种不同类型的进程 例如NN,DN，RM,NM，这些进程需要进行通信！ 在通信时，常用主机名进行通信！ 在19...

赞(0)站长2020-07-19优质文章 阅读(965)

一、Hadoop 1.hadoop的初衷是采用大量的廉价机器，组成一个集群！完成大数据的存储和计算！ 2.hadoop历史版本 hadoop 1.x HDFS: 负责大数据的存储 Common: HDFS和MR共有的常用的工具包模块！ Ma...

赞(0)站长2020-07-19优质文章 阅读(1016)

推荐大家看完上一篇伪分布搭建，在上一篇中，基础条件都有详细配置过程，本次全分布式搭建只是在伪分布的基础上有所加深。 相较于伪分布，多了以下内容 第一步：添加主机名与IP映射（每个节点都要配置） vi /etc/hosts，增加以下内容： 1...

赞(0)站长2020-07-19优质文章 阅读(1099)

第一步：配置网络（静态IP） vi /etc/sysconfig/network-scripts/ifcfg-ens33（网卡名称可能不同） 1、 修改： 将该配置文件中的ONBOOT=no修改为yes（网络开机自启） 将BOOTPROTO...

赞(0)站长2020-07-19优质文章 阅读(965)

第一步：配置网络（静态IP） vi /etc/sysconfig/network-scripts/ifcfg-ens33（网卡名称可能不同） 1、 修改： 将该配置文件中的ONBOOT=no修改为yes（网络开机自启） 将BOOTPROTO...

赞(0)站长2020-07-19优质文章 阅读(1053)

大数据特点 4V****：volume variety velocity value 海量性（volume）：大数据的数据量很大，每天我们的行为都会产生大批量数据 多样性（variety）：大数据的类型多种多样，比如视频、音频和图片都属于数...

赞(0)站长2020-07-19优质文章 阅读(1036)

一、基础介绍 　　多数据源字面意思，比如说二个数据库，甚至不同类型的数据库。在用SpringBoot开发项目时，随着业务量的扩大，我们通常会进行数据库拆分或是引入其他数据库，从而我们需要配置多个数据源。 二、项目目录截图 三、多数据源SQL...

赞(0)站长2020-07-19优质文章 阅读(1164)

一、前言 　　最近收到很多网友给我私信，学习软件开发有点吃力，不知道从何处开始学习，会点基础但是做不出来什么项目， 都想放弃了。我就回复道：当下互联网飞速发展，软件开发行业非常吃香而且前景相当不错。希望能刻苦一下多多学习软件开发的知识，我利...

赞(0)站长2020-07-19优质文章 阅读(1088)

一、基础介绍 　　VMWare虚拟机软件是一个“虚拟PC”软件，它使你可以在一台机器上同时运行二个或更多Windows、DOS、LINUX系统。与“多启动”系统相比，VMWare采用了完全不同的概念。多启动系统在一个时刻只能运行一个系统，在...

赞(0)站长2020-07-19优质文章 阅读(1175)