Changes between Version 1 and Version 2 of concept


Ignore:
Timestamp:
08/16/2012 02:13:31 PM (14 years ago)
Author:
liaojiaohe
Comment:

--

Legend:

Unmodified
Added
Removed
Modified
  • concept

    v1 v2  
    88 
    99 
    10 == 前景:资源统一管理与调度平台 == 
     10== 下一步:资源统一管理与调度平台 == 
    1111      考虑到资源利用率,运维成本,数据共享等因素,公司一般希望将所有这些框架部署到一个公共的集群中,让它们共享集群的资源,并对资源进行统一使用,资源统一管理与调度平台应运而生。 
    1212 资源统一管理和调度平台应该支持多种计算框架,有扩展性,容错性和资源的高利用率,典型代表是Mesos和YARN(下一代的HADOOP) 
    1313       
    14 [[Image()]] 
     14[[Image(mesos.png)]]Mesos的架构图可以比较清楚说明资源统一管理与调度平台 
     15 
     16 
     17由于现有系统的不成熟,有些公司也自己做了一下系统来监控和调度Hadoop的任务,从淘宝公布的资料来看,他们应该有一套,毕竟机器多了,监控很重要。 
     18 
     19[[Image(taobao_data.gif)]]  
     20 
     21其中prom下面对应的就是hbase,MyFox对应的是Mysql等关系型数据库,通过TDDL解决数据自动切分,迁移等功能 
     22在监控换管理方面,我们通过这个[/wiki/concept/yunti.pdf  pdf]文件了解一个大概。