首页 > 成果展示
大数据Spark集群Job管理系统

专利权人:安徽大学

AdminSJMS(Admin Spark Job Manager System) 是一个基于Spark的Job管理系统,通过该系统可以轻松管理Spark集群的任务和所有节点。 系统可以给所有用户分配HDFS(Hadoop Distributed File System)空间,可在线操作自己的HDFS文件,并将文件的位置作为Spark任务的数据输入路径,方便用户进行Job的提交、运行、结果下载与可视化,并提供Spark和HDFS相关操作的接口。主要技术特点(指标):直观简洁的人机交互界面管理Spark集群

具体了解该成果信息,请致电:

AdminSJMS(Admin Spark Job Manager System) 是一个基于Spark的Job管理系统,通过该系统可以轻松管理Spark集群的任务和所有节点。 系统可以给所有用户分配HDFS(Hadoop Distributed File System)空间,可在线操作自己的HDFS文件,并将文件的位置作为Spark任务的数据输入路径,方便用户进行Job的提交、运行、结果下载与可视化,并提供Spark和HDFS相关操作的接口。主要技术特点(指标):直观简洁的人机交互界面管理Spark集群的状态管理任务列表管理集群的所有节点完备的HDFS操作轻松管理用户及用户的任务提供相应的系统设置支持Java、Scala任务包等