搜云库技术团队

环境篇：数据同步工具DataX 1 概述 https://github.com/alibaba/DataX DataX是什么？ DataX 是阿里巴巴集团内被广泛使用的离线数据同步工具/平台，实现包括 MySQL、SQL Server、Or...

赞(0)站长2020-07-30Java汇总 阅读(795)

环境篇：DolphinScheduler-1.3.1安装部署 1 配置jdk JDK百度网盘：https://pan.baidu.com/s/1og3mfefJrwl1QGZGZDZ8Sw 提取码：t6l1 #查看命令 rpm -qa | ...

赞(4)站长2020-07-30Java汇总 阅读(1278)

环境篇：Kylin3.0.1集成CDH6.2.0 Kylin是什么? Apache Kylin™是一个开源的、分布式的分析型数据仓库，提供Hadoop/Spark 之上的 SQL 查询接口及多维分析（OLAP）能力以支持超大规模数据，最初由...

赞(0)站长2020-07-30Java汇总 阅读(823)

环境篇：呕心沥血@CDH线上调优 为什么出这篇文章？ 近期有很多公司开始引入大数据，由于各方资源有限，并不能合理分配服务器资源，和服务器选型，小叶这里将工作中的总结出来，给新入行的小伙伴带个方向，不敢说一定对，但是本人亲自测试，发现集群使用...

赞(0)站长2020-07-30Java汇总 阅读(837)

环境篇：CM+CDH6.3.2环境搭建(全网最全) 一 环境准备 1.1 三台虚拟机准备 Master( 32g内存 + 100g硬盘 + 4cpu + 每个cpu2核) 2台Slave( 12g内存 + 100g硬盘 + 4cpu + 每...

赞(5)站长2020-07-30Java汇总 阅读(973)

环境篇：Zeppelin Zeppelin 是什么 Apache Zeppelin 是一个让交互式数据分析变得可行的基于网页的开源框架。Zeppelin提供了数据分析、数据可视化等功能。 Zeppelin 是一个提供交互数据分析且基于Web...

赞(0)站长2020-07-30Java汇总 阅读(744)

环境篇：Atlas2.0.0兼容CDH6.2.0部署 Atlas 是什么? Atlas是一组可扩展和可扩展的核心基础治理服务，使企业能够有效地满足Hadoop中的合规性要求，并允许与整个企业数据生态系统集成。 Apache Atlas为组织...

赞(0)站长2020-07-30Java汇总 阅读(777)

环境篇：Docker www.docker.com Docker 是什么? Docker 是一个开源的应用容器引擎，基于Go语言并遵从Apache协议的开源，让开发者可以打包他们的应用以及依赖包到一个可移植的镜像中，然后发布到任何流行的 L...

赞(0)站长2020-07-30Java汇总 阅读(742)

环境篇：Virtualbox+Vagrant安装Centos7 1 安装Vagrant Vagrant下载地址：https://www.vagrantup.com/ Vagrant百度网盘：https://pan.baidu.com/s/1...

赞(0)站长2020-07-30Java汇总 阅读(910)

环境篇：VMware Workstation安装Centos7 1 VMware Workstation安装 CentOS下载地址：http://isoredirect.centos.org/centos/7/isos/x86_64...

赞(0)站长2020-07-30Java汇总 阅读(789)