为了账号安全,请及时绑定邮箱和手机立即绑定

怎么在kubernetes里面搭建hadoop集群

/ 猿问

怎么在kubernetes里面搭建hadoop集群

慕姐4208626 2019-01-02 18:18:06

怎么在kubernetes里面搭建hadoop集群


查看完整描述

2 回答

?
tonybai

hadoop是有状态应用并且涉及到存储的处理。建议采用helm方式在k8s上创建hadoop。可参考:https://github.com/helm/charts/tree/master/stable/hadoop 

---

实战课:Kubernetes实战:高可用集群搭建,配置,运维与应用

免费课:Kubernetes基础:开启云原生之门


查看完整回答
反对 回复 2019-02-21
?
慕村225694

Kubernetes是一个开源项目,它把谷歌的集群管理工具引入到虚拟机和裸机场景中。它可以完美运行在现代的操作系统环境(比如CoreOS
和Red Hat
Atomic),并提供可以被你管控的轻量级的计算节点。Kubernetes使用Golang开发,具有轻量化、模块化、便携以及可扩展的特点。我们
(Kubernetes开发团队)正在和一些不同的技术公司(包括维护着Mesos项目的MesoSphere)合作来把Kubernetes升级为一种
与计算集群交互的标准方式。Kubernetes重新实现了Google在构建集群应用时积累的经验。这些概念包括如下内容:

Pods:一种将容器组织在一起的方法;

Replication Controllers:一种控制容器生命周期的方法(译者注:Replication Controller确保任何时候Kubernetes集群中有指定数量的pod副本(replicas)在运行);

Labels:一种可以找到和查询容器的方法;

Services:一个用于实现某一特定功能的容器组;

因此,只要使用Kubernetes你就能够简单并快速的启动、移植并扩展集群。在这种情况下,集群就像是类似虚拟机一样灵活的资源,它是一个逻辑运算单元。打开它,使用它,调整它的大小,然后关闭它,就是这么快,就是这么简单。

Mesos和Kubernetes的愿景差不多,但是它们在不同的生命周期中各有不同的优势。Mesos是分布式系统内核,它可以将不同的机器整
合在一个逻辑计算机上面。当你拥有很多的物理资源并想构建一个巨大的静态的计算集群的时候,Mesos就派上用场了。有很多的现代化可扩展性的数据处理应
用都可以在Mesos上运行,包括Hadoop、Kafka、Spark等,同时你可以通过容器技术将所有的数据处理应用都运行在一个基础的资源池中。在
某个方面来看,Mesos是一个比Kubernetes更加重量级的项目,但是得益于那些像Mesosphere一样的贡献者,Mesos正在变得更加简



查看完整回答
反对 回复 2019-01-06

添加回答

回复

举报

0/150
提交
取消
意见反馈 帮助中心 APP下载
官方微信