Changes between Version 1 and Version 2 of concept
- Timestamp:
- 08/16/2012 02:13:31 PM (14 years ago)
Legend:
- Unmodified
- Added
- Removed
- Modified
-
concept
v1 v2 8 8 9 9 10 == 前景:资源统一管理与调度平台 ==10 == 下一步:资源统一管理与调度平台 == 11 11 考虑到资源利用率,运维成本,数据共享等因素,公司一般希望将所有这些框架部署到一个公共的集群中,让它们共享集群的资源,并对资源进行统一使用,资源统一管理与调度平台应运而生。 12 12 资源统一管理和调度平台应该支持多种计算框架,有扩展性,容错性和资源的高利用率,典型代表是Mesos和YARN(下一代的HADOOP) 13 13 14 [[Image()]] 14 [[Image(mesos.png)]]Mesos的架构图可以比较清楚说明资源统一管理与调度平台 15 16 17 由于现有系统的不成熟,有些公司也自己做了一下系统来监控和调度Hadoop的任务,从淘宝公布的资料来看,他们应该有一套,毕竟机器多了,监控很重要。 18 19 [[Image(taobao_data.gif)]] 20 21 其中prom下面对应的就是hbase,MyFox对应的是Mysql等关系型数据库,通过TDDL解决数据自动切分,迁移等功能 22 在监控换管理方面,我们通过这个[/wiki/concept/yunti.pdf pdf]文件了解一个大概。
![(please configure the [header_logo] section in trac.ini)](http://www1.pconline.com.cn/hr/2009/global/images/logo.gif)