1、Kubernetes的重要概念 1.1 节点 节点通常指的就是服务器。可以使物理机或虚拟机，在k8s中有两种节点：管理节点（Master Node）和工作节点（Worker Node） 管理节点（Master Node）：负责管理整个k8s集群、是 Cluster 的大脑，主要职责是调度，即决定将应用放在哪里运行，一般由3个管理节点组成HA的架…
（一）之概念和架构解析与环境准备
Hadoop和Spark联系与区别
谈到大数据，相信大家对Hadoop和Apache Spark这两个名字并不陌生。但我们往往对它们的理解只是提留在字面上，并没有对它们进行深入的思考，下面不妨跟我一块看下它们究竟有什么异同。 解决问题的层面不一样 首先，Hadoop和Apache Spark两者都是大数据框架，但是各自存在的目的不尽相同。Hadoop实质上更多是一个分布式数据基础设施…
HDFS Namenode 高可用
HDFS Namenode 高可用 在 Hadoop 2.0.0 之前，一个集群只有一个Namenode，这将面临单点故障问题。如果 Namenode 机器挂掉了，整个集群就用不了了。只有重启 Namenode ，才能恢复集群。另外正常计划维护集群的时候，还必须先停用整个集群，这样没办法达到 7 * 24小时可用状态。Hadoop 2.0 及之后版…