建设方案
一、 建设内容
气候变化与农业水资源数值模拟实验平台项目，主要是建立一套高性能科学计算平台，进行气候变化数值模拟、农业水资源数据统计分析、预测等科研课题。
二、技术要求
（一）. 软件平台(推荐品牌： platform、Fusion cluster 、景行) 1、基本要求 1.1 软件用途 用于气候变化与农业水资源数值模拟实验平台的资源管理与调度。 气候变化与农业水资源数值模拟实验平台的功能包括： 1）分析与预测软件计算资源管理与调度。运行的常用计算软件，包括WRF、MATLAB、R等以及基于各种MPI的自研软件等。 2）支持WRF应用软件的并行优化，并提供优化和测试证明 1.2 基本要求 3）供方提供对WRF应用软件的故障分析定位服务，并能准确指导用户排除WRF软件的运行故障 4）满足不少于25个两路节点的集群资源调度分配，能够满足不少于50人同时登录使用该平台。 2、资源管理与作业调度模块 异构、多2.1 集群、分布式环境气候变化与农业水资源数值模拟实验平台架构完全独立，不能与任何硬件厂商绑定，支持多个厂商的硬件，扩展性良好。 支持Linux和Windows混合架构的分析与预测计算集群；支持（如支持 Windows2008/2012/2003、Windows 7、Suse Linux、Redhat Linux、Centos Linux等）多版本的操作系统。 预留接口支持多个集群的扩展和多个异构集群资源调度管理模式。 支持刀片服务器，胖节点服务器，软件许可证资源统一调度管理 提供先来先服务、优先级抢占、公平共享、节点资源独占等多种调度策略。 具有开放式作业调度接口，用户可以根据自己的实际需求自行编写数据库PL-SQL脚本来生成自定义调度策略。 支持许可证调度管理功能，可以对作业的软件许可证请求进行调度。 2.2 调度策略 支持集群节点分组、定义多个队列、用户分组，节点组、队列、用户组可以实现不同的管理策略和资源分配策略。 支持GPU调度功能，支持GPU绑定功能 支持CPU绑定 支持虚拟机调度，可以根据作业资源需求自动启动作业所需操作系统和资源要求的虚拟机执行作业，作业完成后自动挂起虚拟机释放资源 支持作业的密级、项目（型号）属性。 支持作业的暂停、恢复、杀死等操作。 支持作业指定所需的资源，支持作业运行在指定的节点上面。 分析预测2.3 作业管理 支持作业的迁移。 支持管理员修改作业队列顺序，用户调整自己所提交作业的运行顺序。 灵活细致的用户或队列权限分配：支持用户分组，每组实现不同的控制和管理；可设定包括硬件资源限制（基本核数、最大核数）、软件资源限制（软件授权及规模）等。 支持大规模并行作业管理，可收集多个节点上并行作业的进程信息，当并行作业的任何子进程失败时，自动清除其他节点上的进程，避免产生死进程。 能跟踪每一个作业的运行和其状态变化，保证作业永不丢失，在系统出错情况下，能重新恢复作业状态，能跟踪作业整个运行周期，不管是作业迁移还是重新运算。 系统要具备断点续算（Check Point）机制，在所运行软件支持的情况下，可以将长时间运行作业断点保存和恢复，从而保证关键作业的正常运行。 集群节点自动热备份，发生故障时不影响调度业务的正常运行。 支持多级容错，包含系统级容错、作业级容错，即系统发生故障（如网2.4 可靠性 络中断、系统宕机）或作业因为偶然故障（如磁盘空间不足，获取许可证失败）引起的作业失败时，该作业能被重新调度到其它机器上执行。 3、门户模块 用户可通过浏览器进行分析预测相关作业的提交、监控、中止以及数据文件传输等操作；用户可查询和管理作业相关的数据，如输入数据、分析预测作中间结果和最终结果。 3.1 业提交与管支持作业的暂停、恢复、杀死等操作。 理 在用户提交作业时提供实时信息查询，包括：集群的CPU使用情况、许可证的使用情况等信息。 支持定义作业的密级属性。
相关推荐：
loading