今天,亚马逊网络服务非常的重要一步解锁云计算的优势的一个非常重要的应用领域。集群计算机Amazon EC2实例是一个新实例类型专门为高性能计算的应用程序。客户与紧密耦合等复杂的计算工作负载,并行处理,或与网络性能非常敏感的应用程序,现在可以实现相同的高计算和网络性能提供了定制的基础设施,同时受益于弹性、灵活性和Amazon EC2的成本优势

在我的学术生涯中,我花了多年致力于高性能计算技术,如用户级网络接口,大规模的高速互联,HPC软件栈,等等。在那些日子里,我的主要目标是把建筑高度专用的高性能集群环境的进步,把它们变成商品技术为企业使用。不仅对HPC但OLTP等关键任务的企业系统。今天,我很自豪能成为一个Amazon Web服务的团队,我们真正作为一个随需应变的商品来提供高性能计算每必威体育精装版应用官网er使用。。

HPC和Amazon EC2

Amazon EC2几乎立即推出后,我们的客户开始使用高性能计算。早期的用户包括一些华尔街公司知道如何平衡计算的规模对结果的质量他们需要创建一个竞争优势。他们有复杂的蒙特卡罗模拟运行成千上万的实例在晚上来确定如何在市场开放做好准备。其他行业使用Amazon EC2 HPC-style工作量包括制药、石油勘探、工业和汽车设计、媒体和娱乐等等。。

进一步计算密集型、高度并行工作负载也找到了Amazon EC2企业探索使用HPC类型的算法对其他应用程序类别,例如处理非常大的商业智能应用程序的非结构化数据集。这导致了Hadoop的流行的强劲增长和减少地图技术,包括Amazon Elastic地图减少作为便于运行这些工具计算工作拿走很多重活累活通常与运行相关的大型Hadoop集群。。

Amazon EC2和弹性地图减少已成功地释放一些HPC客户提供高度并行工作负载从HPC的典型挑战基础设施资本投资和相关的操作重任,有几个类别的HPC现有的工作负载类型的Amazon EC2实例没有被正确的解决方案。特别是这是适用于基于算法的应用程序——通常基于mpi——这取决于频繁的低延迟通信和/或需要大量截面带宽。此外,许多高端HPC应用程序利用知道他们内部硬件平台实现主要加速利用特定的处理器架构。没有简单的方法为必威体育精装版应用官网人为此在Amazon EC2。。。直到今天。。

引入集群计算为Amazon EC2实例

类似于其他Amazon EC2实例集群计算机实例但一直提供特别设计的高性能计算和网络。集群计算实例可以分组为集群使用“集群放置组”表明这些实例需要低延迟、高带宽的通信。当实例被放置在一个集群中他们获得低延迟、阻塞10 Gbps网络通信时集群中的其他实例。。

接下来,集群计算实例指定的处理器类型所以必威体育精装版应用官网人可以使用编译器挤压最优性能的特定于体系结构的优化。在启动集群计算机为Amazon EC2实例将有2个英特尔至强X5570(也称为四酷睿i7或Nehalem)处理器。。

解锁的HPC云社区的好处

集群计算为Amazon EC2实例改变HPC游戏有两个重要原因:

可伸缩的随需应变的能力

专用的高性能计算集群需要大量资本投资和他们的采购通常交货期延长比许多企业级服务器系统。这意味着大多数HPC系统限制在一个或多个维度的时候,他们开始运作。因此,HPC系统通常是共享资源的长队等待执行工作和许多用户必须非常小心不超过他们的能力分配。集群计算实例对Amazon EC2云计算的优势这类高性能计算消除前期资本投资的必要性,给用户提供高性能计算能力需求的规模,他们需要为他们的应用程序。。

大众化HPC的管理资源

传统上我们已经想到了HPC极端专长的领域;这种研究只发生在美国国家实验室等地方。这些实验室获得的一些世界上最快的超级计算机,有专门的员工让他们一年365天,满载运行。但有一个更大的一类潜在的高性能计算用户除了这些顶级超级计算机专家,甚至包括在这些实验室的中档HPC工作负载如劳伦斯伯克利国家实验室,他们已经成功的早期用户新集群的计算实例。。

许多组织使用中档HPC系统为他们的企业和研究的需要。鉴于这些平台的专业性质,它们需要专用的资源维护和操作,把IT组织一个大负担。集群计算为Amazon EC2实例消除了繁重的操作负担通常与HPC系统相关联。没有更多硬件修改需要保持集群运行(很多个不眠的夜晚,我这样做;没有荣耀)。这些实例类型管理完全其他Amazon EC2实例的管理方式允许用户利用投资,他们已经在这个领域。。

更多的信息

如果你正在寻找更多信息集群计算为Amazon EC2实例访问我们高性能计算解决方案页面。杰夫·巴尔在他的博客文章AWS必威体育精装版应用官网博客有额外的细节和一些早期的奖状集群计算的实例的客户新闻稿。。

评论

博客评论的Disqus