IBM Spectrum LSF Data Manager 通过缓存数据传输优化集群吞吐量

IBM Spectrum LSF Data Manager 通过缓存数据传输优化集群吞吐量

亮点
● 独立于群集工作负载管理数据传输,提高吞吐量,优化计算资源的使用;
● 利用智能托管缓存消除重复数据传输,降低存储成本;
● 使用 IBM® Spectrum LSF 调度策略全面了解和控制数据传输作业;
● 通过为入站/出站数据传输配置专用 I/O 节点来简化管理;
● 对缓存数据提供用户和管理员访问控制。

随着全球组织将 IT 资源整合到更大的集中式数据中心,并通过公有云和私有云提供服务,应用程序的性能受到影响。由于业务用户、客户和合作伙伴都访问相同的系统和数据,因此当数据从存储资源移动到计算资源并再返回时,关键工作负载可能会变慢。

安排数据传输以降低成本
IBM Spectrum LSF Data Manager 可控制数据传输,通过最大限度地减少计算周期和节省磁盘空间,帮助组织提高数据吞吐量并降低成本。IBM Spectrum LSF Data Manager 可自动传输在 IBM Spectrum LSF 集群和云上运行的应用程序工作负载所使用的数据,通过将常用数据存储在可在用户和工作负载之间共享的智能托管缓存中,使这些数据更接近计算资源。

数据的存储独立于工作负载, 从而释放计算资源以处理其他作业,同时在计算资源和存储之间来回传输数据。IBM Spectrum LSF Data Manager 还利用了已有的数据移动基础架构,使其能够轻松集成到现有集群基础架构中。

智能托管缓存
IBM Spectrum LSF Data Manager 利用智能托管缓存来重用多个工作负载通用的数据,并加快获得结果的时间。传输的文件会自动缓存在执行的集群上,并具有可选的缓存时间。缓存副本可用于需要访问数据的所有工作负载,并且可以在适当的情况下在多个用户之间共享。在执行集群上运行的工作负载还可以将中间数据(例如重启数据)写入本地缓存,以供其他作业使用。

精确控制数据移动
IBM Spectrum LSF Data Manager 允许将数据传输调度为 IBM Spectrum LSF 中的作业。通过集中查看传输流量并控制并发传输的数量和这些传输的优先级,组织可以按工作负载或项目精确控制数据移动。可以建立由用户确定优先级的传输,也可以将输入数据集的传输优先于结果的返回。

为什么选择 IBM?
IBM Spectrum Computing 提供全面的软件定义基础架构解决方案组合,旨在帮助您的组织以最高效的方式提供 IT 服务,优化资源利用率,加快实现结果并降低成本。这些产品有助于最大限度地发挥基础架构的潜力,以加速分析、高性能计算 (HPC)、Hadoop、ApacheSpark 和任何规模的云原生应用程序。该产品组合的核心价值是简化模拟和分析,帮助您发现对业务或科学的见解,并更快地将更高质量的产品推向市场。

相关推荐

  1. 单台服务器(非节点)向Hadoop传输数据

    2024-01-08 14:12:02       15 阅读
  2. redis模糊获取缓存redisKey

    2024-01-08 14:12:02       40 阅读

最近更新

  1. TCP协议是安全的吗?

    2024-01-08 14:12:02       16 阅读
  2. 阿里云服务器执行yum,一直下载docker-ce-stable失败

    2024-01-08 14:12:02       16 阅读
  3. 【Python教程】压缩PDF文件大小

    2024-01-08 14:12:02       15 阅读
  4. 通过文章id递归查询所有评论(xml)

    2024-01-08 14:12:02       18 阅读

热门阅读

  1. 05.构造程序逻辑

    2024-01-08 14:12:02       39 阅读
  2. Spring整合drools

    2024-01-08 14:12:02       32 阅读
  3. 详解Nacos和Eureka的区别

    2024-01-08 14:12:02       37 阅读
  4. Nacos vs Eureka的区别:微服务注册中心的选择

    2024-01-08 14:12:02       36 阅读
  5. [设计模式 Go实现] 结构型~外观模式

    2024-01-08 14:12:02       30 阅读
  6. 2024年超详细的Python3学习路径规划

    2024-01-08 14:12:02       35 阅读