• -------------------------------------------------------------
  • ====================================

标签:mesos

基于Mesos/Docker构建数据处理平台

平台概览2014 年下半年左右,去哪儿完成了有关构建私有云服务的技术调研,并最终拍定了 Docker/Mesos 这一方案。下图 1 展示了去哪儿数据平台的整体架构:图 1:去哪儿数据平台的整体架构该平台目前已实现了如下多项功能:每天处理约 340 亿/25TB 的数据;90%的数据在 100ms 内完成处理;最长 3h/24h 的……

巅峰对决之Swarm、Kubernetes、Mesos

【编者的话】这篇文章对比了三大主流调度框架:Swarm、Kubernetes 和 Mesos。文章不仅从理论上讨论了各个框架的优缺点,还从两个实际的案例出发,分析了每个框架具体使用方法。这篇文章对比了三大主流调度框架:Docker Swarm、Google Kubernetes 和 Apache Mesos(基于 Marathon 框架)。在解释了调度和容……

由浅入深 | 如何优雅地写一个Mesos Framework

上周小数羞涩出镜,和数人云架构师春明一起为大家进行了在线直播的干货分享,今天小数抱来了实录,大家可以一睹为快啦!本文从 Mesos 的基础概念讲起,不懂 Mesos 的小伙伴也完全没有问题,一步一步教你写出优雅的Framework,让 Mesos 更加强大好用:)今天主要和大家聊一聊 Mesos、Marathon,以及数人云刚刚开源不久的一个 Me……

Mesos大神Tim实录分享 | 解读Mesos 1.0 + 更长久的Mesos Containerizer

本文是 Mesos 专家Timothy Chen 在 7 月 23 日数人云对话 Docker&Mesos 沙龙活动上做的分享实录,Tim畅谈了 Mesos 架构的设计特点。无独有偶,2016 年 7 月 27 日 Apache 社区发布了 Apache Mesos 1.0.0。 1.0.0 版本的推出,印证了Tim在分享中提到的很多改进: Doc……

Mesos isolation cgroups/cpu & cgroups/mem

最近一直在纠结 mesos/marathon 中 isolation cgroups/cpu是如何工作的,为什么明明设置了 cpus 限制, 但是任务用的 cpu还是会超过阈值呢?最近偶然看到了 cgruops cfs相关介绍才明白,设置cgroups/cpu 的同时还要设置cgroups cfs, 这样 cpu才是独占的, 而默认情况下 cpu ……

mesos学习之cgroup

最近在啃mesos源码,mesos用cgroup做资源隔离,由于之前没有接触 linux container,所以写了一些小代码做了一些小试验来学习一下cgroup。/proc/mounts 文件是以/etc/mtab 文件的格式给出当前系统所挂载的文件系统信息,这个文件也能反映出任何手工安装从而在/etc/mtab 文件中没有包含的文件系统。当挂……

Mesos 配置解读

Mesos 配置(丰富中。。。)转自 http://blog.csdn.net/yeasy/article/details/46683297 .。基本项–ip 监听的 IP 地址–port 监听的端口,Master 默认为 5050,slave 默认为 5051–firewall_rule&n……

Mesos+Zookeeper+Marathon的Docker管理平台部署记录(1)

随着”互联网+”时代的业务增长、变化速度及大规模计算的需求,廉价的、高可扩展的分布式 x86 集群已成为标准解决方案,如 Google 已经在几千万台服务器上部署分布式系统。Docker 及其相关技术的出现和发展,又给大规模集群管理带来了新的想象空间。如何将二者进行有效地结合?下面将记录使用 Mesos+Zookeeper+Mara……

kubernetes 对比 mesos + marathon

这篇博客中我们将比较 Kubernetes 与 Mesos + Marathon容器编排解决方案。我们将深入的讨论 Kubernetes 与 Mesos + marathon,分析他们的特点,及他们的优缺点。Kubernetes 概述根据 Kubernetes 网站的说法,“Kubernetes 是一个自动化,容器化应用程序部署扩展和管理的……

CentOS 7中Mesos+Zookeeper+Marathon安装部署全程详解

注意,以下安装过程均是在CentOS 7 中 root 下完成,如果是普通用户,用 sudo 提权的方式安装。一、环境1、配置三台服务器,三个mesos-master 节点,三个 slave 节点,我用测试 IP主机名IP 地址所安装的服务mesos-node1eth0:192.168.10.227mesos-master……