我看过Hadoop-on-Demand，以及SGE上的Hadoop集成。我的理解是这需要管理员权限，而我在工作的大集群上没有。管理员忙得不可开交，几个月内都无法设置我们。我认识到临时虚拟集群对HDFS实用程序的限制。我也明白使用lustre文件系统是如何违背常规的，但是有没有人编写过SGE或Torque(PBS)脚本来将作业提交到启动hadoop实例的集群？ 最佳答案 参见MyHadoop:http://www.sdsc.edu/~allans/MyHadoop.pdf错误链接。此处提供文章:http://archive.futur

我怎样才能让qstat给我完整的工作名称？我知道qstat-r给出了关于任务的详细信息，但是它太多了，并且包括了资源需求。qstat-r输出如下:1318060.25001tumor_focaajalaliqw09/29/201415:49:4112-100:1Fulljobname:tumor_focality-TCGA-THCA-ratboost_linear_svcHardResources:distribution=wheezy(0.000000)h_rt=72000(0.000000)mem_free=15G(0.000000)h_vmem=15G(0.000000)h_st

我怎样才能让qstat给我完整的工作名称？我知道qstat-r给出了关于任务的详细信息，但是它太多了，并且包括了资源需求。qstat-r输出如下:1318060.25001tumor_focaajalaliqw09/29/201415:49:4112-100:1Fulljobname:tumor_focality-TCGA-THCA-ratboost_linear_svcHardResources:distribution=wheezy(0.000000)h_rt=72000(0.000000)mem_free=15G(0.000000)h_vmem=15G(0.000000)h_st