随着Apache Hadoop的起步,云客户的增多面临的首要问题就是如何为他们新的的Hadoop集群选择合适的硬件。
尽管Hadoop被设计为运行在行业标准的硬件上,提出一个理想的集群配置不想提供硬件规格列表那么简单。 选择硬件,为给定的负载在性能和经济性提供最佳平衡是需要测试和验证其有效性。(比如,IO密集型工作负载的用户将会为每个核心主轴投资更多)。
在这个博客帖子中,你将会学到一些工作负载评估的原则和它在硬件选择中起着至关重要的作用。在这个过程中,你也将学到Hadoop管理员应该考虑到各种因素。
结合存储和计算
过去的十年,IT组织已经标准化了刀片服务器和存储区域网(SAN)来满足联网和处理密集型的工作负载。尽管这个模型对于一些方面的标准程序是有相当意义 的,比如网站服务器,程序服务器,小型结构化数据库,数据移动等,但随着数据数量和用户数的增长,对于基础设施的要求也已经改变。网站服务器现在有了缓存 层;数据库需要本地硬盘支持大规模地并行;数据迁移量也超过了本地可处理的数量。
金羊网科技频道主要发布轻松有趣的科技信息和业界前沿,还有提供家电、数码、移动互联、军事等信息。
王通博客专注于为你分享有关互联网营销、网络营销咨询服务,同时为网友分享有关互联网营销、策划、书籍软件、哲学思想等方面的 内容。
最好的电脑装机联盟,技术员联盟,是中国收益最高的装机技术联盟,不扣量结算快的装机联盟网站,装机联盟哪个好,首选7654技术员联盟。
MinDat是国际互联网中最大的矿物数据库平台和矿物学参考资源网站,提供世界各地的矿物数据,矿产地数据,由众多地质人员更新最新的矿物信息、矿产地、图片、储量等数...
宅乐软件园汇聚了海量绿色游戏软件,包括提供热门安卓苹果手机游戏下载、应用软件免费下载、实用的app软件下载等服务。
谷歌中国是全球最大的并且最受欢迎的搜索引擎,主要的搜索服务有:网页搜索,图片搜索,视频搜索,地图搜索,新闻搜索,购物搜索,博客搜索,论坛搜索,学术搜索,财经搜索...