搜云库技术团队

　　Spark大数据平台有使用一段时间了，但大部分都是用于实验而搭建起来用的，搭建过Spark完全分布式，也搭建过用于测试的伪分布式。现在是写一遍随笔，记录一下曾经搭建过的环境，免得以后自己忘记了。也给和初学者以及曾经挖过坑的人用作参考。 ...

赞(0)站长2020-08-20技术文章汇总 阅读()

前言 大纲: 正文 进程控制概念。 进程控制的主要功能是对系统找那个的所有进程实施的有效管理，他具有创建新的进程、撤销已有进程、实现进程转换等功能。 创建态:需要初始化pcb、分配系统资源 创建态到就绪态: 修改pcb内容，将pcb放到就绪...

赞(0)站长2020-08-20技术文章汇总 阅读()

　　自己的主机上的Hadoop版本是2.7.6，是测试用的伪分布式Hadoop，在前段时间部署了Hive on Spark，但由于没有做好功课，导致了Hive无法正常启动，原因在于Hive 3.x版本不适配Hadoop 2.x版本。之前我在...

赞(0)站长2020-08-20技术文章汇总 阅读()

前言 大纲： 正文 3种基本状态 创建态和终止态 创建态： 操作系统需要完成创建进程，操作系统为该进程分配所需的内存空间等系统资源，并为其创建、初始化pcb。 终止态： 无论是异常终止还是执行结束，操作系统要完成撤销进程的相关工作。将分配给...

赞(0)站长2020-08-20技术文章汇总 阅读()

　　本编随笔是小编参照个人的笔记、官方文档以及网上的资料等后对HDFS的概念以及运行原理进行系统性地归纳，说起来真的惭愧呀，自学了很长一段时间也没有对Hadoop知识点进行归纳，有时候在实战中或者与别人交流Hadoop相关技术时，很多概念也...

赞(0)站长2020-08-20技术文章汇总 阅读()

前言 大纲： 正文 为什么有进程呢？ 说一段历史。 从前是单道处理程序。 也就是说一个程序占用整个电脑的资源，如cpu、内存、io设备等。 内存中低地址段放的是程序段，高地址存放的是程序段要允许的数据段。 那么后面多道处理程序出现后，操作系...

赞(0)站长2020-08-20技术文章汇总 阅读()

前言 上一章讲到一个东西，那就是程序系统调用发出中断（内中断）操作，然后由操作系统接管后续程序。 正文 什么是系统调用，系统调用是程序调用操作系统的接口，看图。 为什么有系统调用呢？为什么不是程序自己去操作打印呢？ 应用程序通过系统调用请求...

赞(0)站长2020-08-20技术文章汇总 阅读()

前言 这里的中断和异常指的是处理机的中断和异常，处理机可以理解为cpu。 正文 中断是怎么产生的呢？ 是因为操作系统的诞生，引入了中断机制，用来实现多道程序的并发。 简单点说就是这样子的，以前是一道一道程序执行，现在多道程序要想并发执行，其...

赞(0)站长2020-08-20技术文章汇总 阅读()

前言 介绍处理机的调度。 正文 高级调度 中级调度 低级调度 七状态模型 小结 总结 文章永久链接：https://tech.souyunku.com/46675

赞(0)站长2020-08-20技术文章汇总 阅读()

前言 为什么有线程这个概念呢？ 传统的进程只能串行执行一系列程序。因此，引入线程来增加并发度。 这个时候cpu执行的最小单位就是线程了。 线程是一个基本的cpu执行单元，也是程序执行流的最小单位。 引入线程之后，不仅是进程之间可以并发，进程...

赞(0)站长2020-08-20技术文章汇总 阅读()