本發(fā)明一般地涉及計(jì)算機(jī)技術(shù)領(lǐng)域，更具體地，涉及用于GEMS計(jì)算程序的處理方法。

背景技術(shù)：
GEMS(GlobalMonitoringforEnvironmentandSecurity，全球環(huán)境和安全監(jiān)測系統(tǒng))，是由歐洲基金組織贊助研發(fā)的一款對大氣重要成分和空氣質(zhì)量全面監(jiān)測和預(yù)報(bào)的系統(tǒng)，其包括氣候的觀測、污染物遠(yuǎn)程遷移的監(jiān)測、人體健康的檢驗(yàn)、陸地可更新資源的監(jiān)測、海洋污染狀況的監(jiān)測。它能對主要溫室氣體進(jìn)行分析和建模，對全球氣象和人類健康生存提供很大的保障。現(xiàn)有技術(shù)中，在傳統(tǒng)的高性能計(jì)算集群環(huán)境中，用戶要運(yùn)行GEMS通常需要使用遠(yuǎn)程字符終端在命令行環(huán)境下執(zhí)行一系列操作，一般包括如下幾個(gè)流程：準(zhǔn)備好GEMS軟件的輸入文件。這些文件通常需要放置在集群的全局共享存儲中，用戶一般使用FTP、SFTP等工具向集群上傳這些文件；確定運(yùn)行GEMS軟件需要的進(jìn)程數(shù)，以及在哪些節(jié)點(diǎn)上運(yùn)行，將這些信息通過命令行參數(shù)的方式在遠(yuǎn)程字符終端運(yùn)行；以及程序運(yùn)行完成后，查看計(jì)算結(jié)果，或使用FTP、SFTP等工具下載結(jié)果文件到用戶本地終端。由于用戶在高性能計(jì)算集群上提交并行計(jì)算任務(wù)，需要統(tǒng)一使用作業(yè)調(diào)度軟件提供的接口，用戶通常還需要再編寫一個(gè)作業(yè)調(diào)度腳本，在腳本中申請計(jì)算資源，通過這個(gè)腳本提交并行計(jì)算任務(wù)，由作業(yè)調(diào)度軟件來處理任務(wù)排隊(duì)、分配資源、發(fā)起并行程序，因此，執(zhí)行效率低。傳統(tǒng)的高性能計(jì)算集群環(huán)境中，用戶運(yùn)行GEMS軟件的基本流程，這些流程通常需要在遠(yuǎn)程字符終端通過命令行的方式來實(shí)現(xiàn)，因此，出錯(cuò)概率大。此外，對于高性能計(jì)算集群的管理員來說，對普通用戶開放命令行終端，也存在安全性的風(fēng)險(xiǎn)。用戶的誤操作可能會影響系統(tǒng)的穩(wěn)定運(yùn)行，黑客也有可能趁虛而入。

技術(shù)實(shí)現(xiàn)要素：
針對以上現(xiàn)有技術(shù)中提交并行計(jì)算任務(wù)存在操作難度大，執(zhí)行效率低，出錯(cuò)概率大等的缺陷，本發(fā)明提供了能夠解決上述缺陷的用于GEMS計(jì)算程序的處理方法。根據(jù)本發(fā)明的實(shí)施例，提供了一種用于GEMS計(jì)算程序的處理方法，包括：根據(jù)應(yīng)用類型選擇與應(yīng)用類型相對應(yīng)的應(yīng)用配置文件；利用應(yīng)用配置文件和集群系統(tǒng)的可用資源顯示web界面，并通過web界面接收多個(gè)參數(shù)；以及根據(jù)包括多個(gè)參數(shù)的web界面生成作業(yè)任務(wù)并將作業(yè)任務(wù)提交給集群系統(tǒng)。優(yōu)選地，利用應(yīng)用配置文件和集群系統(tǒng)的可用資源顯示web界面進(jìn)一步包括：利用應(yīng)用配置文件和集群系統(tǒng)的可用資源配置web頁面信息并將web頁面信息提供給頁面生成器；根據(jù)接收到的web頁面信息配置web界面上的功能模塊；以及顯示具有功能模塊的web界面。優(yōu)選地，根據(jù)包括多個(gè)參數(shù)的web界面生成作業(yè)任務(wù)并將作業(yè)任務(wù)提交給集群系統(tǒng)進(jìn)一步包括：從web界面中提取多個(gè)參數(shù)并根據(jù)多個(gè)參數(shù)收集多個(gè)參數(shù)的提交信息；利用提交信息生成作業(yè)任務(wù)的腳本程序；將作業(yè)任務(wù)的腳本程序提交到集群系統(tǒng)的隊(duì)列中；以及由集群系統(tǒng)的作業(yè)調(diào)度模塊接收作業(yè)任務(wù)的腳本程序并返回作業(yè)號。優(yōu)選地，多個(gè)參數(shù)包括輸入文件目錄、GEMS計(jì)算程序的路徑、申請的計(jì)算資源和網(wǎng)絡(luò)協(xié)議。優(yōu)選地，進(jìn)一步包括：對提交信息進(jìn)行檢查，并且當(dāng)提交信息不正確時(shí)，顯示錯(cuò)誤提示信息。優(yōu)選地，根據(jù)多個(gè)參數(shù)收集多個(gè)參數(shù)的提交信息進(jìn)一步包括：根據(jù)輸入文件目錄獲取輸入文件作為部分提交信息，其中，預(yù)先建立用于GEMS計(jì)算程序的數(shù)學(xué)模型，并且將數(shù)學(xué)模型作為輸入文件。優(yōu)選地，對輸入文件進(jìn)行檢查，并且當(dāng)輸入文件的格式不正確時(shí)，通過文本框或者突出顯示的形式顯示錯(cuò)誤提示信息。優(yōu)選地，在根據(jù)應(yīng)用類型選擇與應(yīng)用類型相對應(yīng)的應(yīng)用配置文件之前，檢查集群系統(tǒng)的可用資源，可用資源包括：可用節(jié)點(diǎn)數(shù)、單個(gè)節(jié)點(diǎn)的CPU核心數(shù)、隊(duì)列名、集群系統(tǒng)的隊(duì)列中的任務(wù)數(shù)量。優(yōu)選地，在GEMS計(jì)算完成以后，將計(jì)算結(jié)果存儲在集群系統(tǒng)的全局共享存儲區(qū)中。優(yōu)選地，進(jìn)一步包括：根據(jù)作業(yè)號，從全局共享存儲區(qū)中下載計(jì)算結(jié)果并查看計(jì)算結(jié)果。利用本發(fā)明的技術(shù)方案能夠克服現(xiàn)有技術(shù)的缺陷，在高性能計(jì)算集群上運(yùn)行GEMS軟件進(jìn)行了Web封裝，并利用相應(yīng)軟件界面實(shí)現(xiàn)具體功能。通過封裝，將GEMS軟件的任務(wù)提交流程隱藏在底層，提供給用戶一個(gè)簡單直觀的Web頁面，用戶只需要在Web頁面上執(zhí)行簡單的操作就能實(shí)現(xiàn)數(shù)據(jù)文件準(zhǔn)備、計(jì)算資源申請、計(jì)算任務(wù)提交、計(jì)算結(jié)果查看等整套流程。通過Web封裝，可以大大降低用戶的使用門檻，從而降低了操作難度大，提高了使用效率，減小出錯(cuò)概率并且提高了安全性。本發(fā)明的其它特征和優(yōu)點(diǎn)將在隨后的說明書中闡述，并且，部分地從說明書中變得顯而易見，或者通過實(shí)施本發(fā)明而了解。本發(fā)明的目的和其他優(yōu)點(diǎn)可通過在所寫的說明書、權(quán)利要求書、以及附圖中所特別指出的結(jié)構(gòu)來實(shí)現(xiàn)和獲得。附圖說明附圖用來提供對本發(fā)明的進(jìn)一步理解，并且構(gòu)成說明書的一部分，與本發(fā)明的實(shí)施例一起用于解釋本發(fā)明，并不構(gòu)成對本發(fā)明的限制。在附圖中：圖1是根據(jù)本發(fā)明的實(shí)施例的GEMS計(jì)算程序的處理方法的整體流程圖；圖2是根據(jù)本發(fā)明的實(shí)施例的GEMS計(jì)算程序的處理模塊的框圖；圖3是根據(jù)本發(fā)明的實(shí)施例的利用應(yīng)用配置文件和集群系統(tǒng)的可用資源顯示web界面步驟的具體流程圖；以及圖4是根據(jù)本發(fā)明的實(shí)施例的根據(jù)包括多個(gè)參數(shù)的web界面生成作業(yè)任務(wù)并將作業(yè)任務(wù)提交給集群系統(tǒng)步驟的具體流程圖。具體實(shí)施方式以下結(jié)合附圖對本發(fā)明的優(yōu)選實(shí)施例進(jìn)行說明，應(yīng)當(dāng)理解，此處所描述的優(yōu)選實(shí)施例僅用于說明和解釋本發(fā)明，并不用于限定本發(fā)明。圖1是根據(jù)本發(fā)明的實(shí)施例的GEMS計(jì)算程序的處理方法的整體流程圖。如圖1所示，GEMS計(jì)算程序的處理方法100通過以下步驟來實(shí)施GEMS計(jì)算程序的處理方法。在S102步驟中，根據(jù)應(yīng)用類型選擇與應(yīng)用類型相對應(yīng)的應(yīng)用配置文件。應(yīng)用類型為應(yīng)用程序類型，即，GEMS計(jì)算程序的應(yīng)用子程序的類型，例如，應(yīng)用子程序可以包括氣候的觀測、污染物遠(yuǎn)程遷移的監(jiān)測、人體健康的檢驗(yàn)、陸地可更新資源的監(jiān)測、海洋污染狀況的監(jiān)測應(yīng)用子程序。針對每個(gè)應(yīng)用子程序都具有一種與該應(yīng)用子程序相對應(yīng)的應(yīng)用配置文件。具體地，在開啟GEMS程序時(shí)，根據(jù)應(yīng)用程序的類型選擇與該應(yīng)用程序類型相對應(yīng)的應(yīng)用配置文件。例如，當(dāng)使用氣候觀測應(yīng)用子程序時(shí)，選擇與氣候觀測應(yīng)用子程序相對應(yīng)的應(yīng)用配置文件。各個(gè)應(yīng)用配置文件中都具有相應(yīng)的應(yīng)用子程序的界面初始值。例如，氣候觀測應(yīng)用子程序的應(yīng)用配置文件中具有氣候觀測應(yīng)用子程序的界面初始值。在步驟S104中，利用應(yīng)用配置文件和集群系統(tǒng)的可用資源顯示web界面，并通過web界面接收多個(gè)參數(shù)。在根據(jù)應(yīng)用類型選擇與應(yīng)用類型相對應(yīng)的應(yīng)用配置文件之前，檢查集群系統(tǒng)的可用資源，可用資源包括：可用節(jié)點(diǎn)數(shù)、單個(gè)節(jié)點(diǎn)的CPU核心數(shù)、隊(duì)列名、集群系統(tǒng)的隊(duì)列中的任務(wù)數(shù)量等。由于GEMS計(jì)算程序?yàn)榧合到y(tǒng)的環(huán)境中運(yùn)行的大型模擬軟件，所以與該集群系統(tǒng)連接的各個(gè)客戶端的用戶可以申請?jiān)揋EMS計(jì)算程序的各個(gè)應(yīng)用子程序。因此，該GEMS計(jì)算程序會在該集群環(huán)境中，通過集群系統(tǒng)的隊(duì)列和作業(yè)調(diào)度模塊來對作業(yè)任務(wù)進(jìn)行調(diào)度排序等。該處理方法在開始之前首先檢查該集群系統(tǒng)的可用資源。此外，還檢查磁盤配額和計(jì)費(fèi)額度。具體地，對申請的GEMS計(jì)算程序的用戶的磁盤配額和計(jì)費(fèi)額度進(jìn)行檢查，以確定該用戶是否具有申請權(quán)限。如果檢查結(jié)果為該用戶沒有申請權(quán)限，則向用戶顯示沒有申請權(quán)限的提示信息。如果用戶順利通過該檢查，則利用應(yīng)用配置文件和集群系統(tǒng)的可用資源顯示web界面以允許用戶在web界面上的相應(yīng)文本框中輸入或選擇需要填寫的多個(gè)參數(shù)，該web界面接收用戶輸入或選擇的多個(gè)參數(shù)。在其他實(shí)施例中，在相應(yīng)的文本框中可以標(biāo)示出相應(yīng)的參數(shù)說明，以及該參數(shù)的范圍等。因此，用戶不再需要熟練掌握Linux操作系統(tǒng)基本操作、Shell腳本語言、常用的文本編輯和字符處理工具、GEMS運(yùn)行命令、作業(yè)調(diào)度軟件等與用戶專業(yè)背景無關(guān)的知識和工具，而僅通過在web界面上的選項(xiàng)框輸入或選擇多個(gè)參數(shù)來提交作業(yè)任務(wù)，從而大幅降低了使用難度。在步驟S106中，根據(jù)包括多個(gè)參數(shù)的web界面生成作業(yè)任務(wù)并將作業(yè)任務(wù)提交給集群系統(tǒng)。具體地，在用戶在選擇提交任務(wù)以后，根據(jù)包括用戶輸入的多個(gè)參數(shù)的web界面生成要提交的作業(yè)任務(wù)，并且將生成的作業(yè)任務(wù)提交給集群系統(tǒng)。因此，將繁瑣復(fù)雜的命令行操作全部隱藏在底層，在底層自動批量執(zhí)行，相應(yīng)地節(jié)省了大量的用戶操作時(shí)間，提高了使用效率。利用本發(fā)明的實(shí)施例的GEMS計(jì)算程序的處理方法，通過web封裝，將GEMS計(jì)算程序的任務(wù)提交流程隱藏在底層，提供給用戶一個(gè)簡單直觀的web界面，從而降低了使用難度，提高了使用效率，簡化了復(fù)雜的提交流程，并且提高了高性能計(jì)算集群的使用安全性下文中，將參照圖2、圖3和圖4，對GEMS計(jì)算程序的處理方法進(jìn)行詳細(xì)描述。圖2是根據(jù)本發(fā)明的實(shí)施例的GEMS計(jì)算程序的處理模塊的框圖。圖3是根據(jù)本發(fā)明的實(shí)施例的利用應(yīng)用配置文件和集群系統(tǒng)的可用資源顯示web界面步驟的具體流程圖。利用應(yīng)用配置文件和集群系統(tǒng)的可用資源顯示web界面的具體流程圖200包括以下具體步驟。在步驟S302中，利用應(yīng)用配置文件和集群系統(tǒng)的可用資源配置web頁面信息并將web頁面信息提供給頁面生成器。具體地，參考圖2(其中，虛線箭頭是后臺程序完成的步驟，實(shí)線箭頭是需要用戶完成的步驟)，配置解析器204讀取配置文件206，然后配置解析器204對相應(yīng)應(yīng)用的配置文件206進(jìn)行解析并利用配置文件206中的初始值和集群系統(tǒng)的可用資源來配置web頁面的默認(rèn)值，然后通過解析所獲得的頁面的各項(xiàng)默認(rèn)值提供給頁面生成器208。在步驟S304中，根據(jù)接收到的web頁面信息配置web界面上的功能模塊。具體地，參考圖2，頁面生成器208通過配置解析器204所配置的頁面的各項(xiàng)默認(rèn)值來配置web界面上的各個(gè)功能模塊，例如，可用資源模塊、相關(guān)參數(shù)模塊(例如，GEMS計(jì)算程序的所在路徑、所需的輸入文件目錄等)以及功能選擇模塊(例如，下文所述的vnc(Virtualnetworkcomputing)功能或checkpoint功能等)等。在步驟S306中，顯示具有功能模塊的web界面。頁面生成器208配置完web界面上的各個(gè)功能模塊以后，將具有各個(gè)功能模塊的web應(yīng)用界面提供給用戶。用戶可以在該web界面上輸入或選擇多個(gè)參數(shù)。用戶可以在可以在可用資源模塊中輸入多個(gè)參數(shù)，例如，可以在該web界面的文本框中輸入申請的計(jì)算節(jié)點(diǎn)數(shù)；在下拉列表中選擇作業(yè)任務(wù)的隊(duì)列；在文本框中輸入每個(gè)節(jié)點(diǎn)使用的核心數(shù)。可以在web界面上輸入需要的輸入文件目錄。此外，還可以在功能選擇模塊中選擇多個(gè)參數(shù)，例如，選擇vnc或checkpoint功能。當(dāng)用戶在web界面上選擇vnc功能時(shí)，可以全程跟蹤GEMS計(jì)算程序的整個(gè)計(jì)算過程。其中，vnc功能將完整的窗口界面通過網(wǎng)絡(luò)傳輸?shù)搅硪慌_計(jì)算機(jī)的屏幕上，因此，將該功能集成在web界面中，當(dāng)用戶想要了解整個(gè)計(jì)算過程時(shí)，通過簡單地選擇vnc功能就可以全程跟蹤GEMS計(jì)算程序的整個(gè)計(jì)算過程。當(dāng)用戶選擇checkpoint功能時(shí)，在計(jì)算程序意外中斷以后，記錄斷點(diǎn)，并且等計(jì)算程序恢復(fù)正常以后，從所述斷點(diǎn)處開始繼續(xù)進(jìn)行計(jì)算。由于集群系統(tǒng)通過網(wǎng)絡(luò)連接，所以在網(wǎng)絡(luò)意外中斷、集群系統(tǒng)的GEMS計(jì)算程序故障時(shí)，可以通過checkpoint功能記錄斷點(diǎn)，并且在系統(tǒng)恢復(fù)正常以后，可以從斷點(diǎn)處繼續(xù)進(jìn)行計(jì)算，而無需重新開始計(jì)算，從而大幅減少了重復(fù)工作的概率，減少了計(jì)算時(shí)間，提高了計(jì)算效率。因此，用戶可以在該web應(yīng)用界面上進(jìn)行選擇和簡單的輸入多個(gè)參數(shù)來完成提交作業(yè)的工作。從而大幅降低了用戶工作量，提高了工作效率，而且對于大部分普通用戶來說，通過簡單的操作，就可以實(shí)現(xiàn)復(fù)雜的功能，從而大幅降低了使用難度。圖4是根據(jù)本發(fā)明的實(shí)施例的根據(jù)包括多個(gè)參數(shù)的web界面生成作業(yè)任務(wù)并將作業(yè)任務(wù)提交給集群系統(tǒng)步驟的具體流程圖。根據(jù)包括多個(gè)參數(shù)的web界面生成作業(yè)任務(wù)并將作業(yè)任務(wù)提交給集群系統(tǒng)步驟的具體流程圖400包括以下具體步驟。在步驟S402中，從web界面中提取多個(gè)參數(shù)并根據(jù)多個(gè)參數(shù)收集多個(gè)參數(shù)的提交信息。其中，多個(gè)參數(shù)包括：輸入文件目錄、GEMS計(jì)算程序的路徑、申請的計(jì)算資源和網(wǎng)絡(luò)協(xié)議等。再次參考圖2，腳本程序生成器212從web界面中提取該web界面中的多個(gè)參數(shù)并根據(jù)多個(gè)參數(shù)收集多個(gè)參數(shù)的提交信息。其中，根據(jù)多個(gè)參數(shù)收集多個(gè)參數(shù)的提交信息進(jìn)一步包括：根據(jù)輸入文件目錄獲取輸入文件作為部分提交信息，其中，在打開GEMS計(jì)算程序之前，預(yù)先建立用于GEMS計(jì)算程序的數(shù)學(xué)模型，并且將數(shù)學(xué)模型作為輸入文件。在步驟S404中，利用提交信息生成作業(yè)任務(wù)的腳本程序。具體地，腳本程序生成器212利用收集的多個(gè)參數(shù)的提交信息來生成作業(yè)任務(wù)的腳本程序。在步驟S406中，將作業(yè)任務(wù)的腳本程序提交到集群系統(tǒng)的隊(duì)列中，具體地，由于在集群環(huán)境下，允許多個(gè)用戶同時(shí)提交作業(yè)任務(wù)，所以在用戶提交作業(yè)任務(wù)時(shí)，首先將作業(yè)任務(wù)提交到集群系統(tǒng)的隊(duì)列中，等待作業(yè)調(diào)度模塊接收該作業(yè)任務(wù)。然后，在步驟S408中，由集群系統(tǒng)的作業(yè)調(diào)度模塊接收作業(yè)任務(wù)的腳本程序并返回作業(yè)號。具體地，集群系統(tǒng)的作業(yè)調(diào)度模塊順序接收隊(duì)列中的作業(yè)任務(wù)，當(dāng)集群系統(tǒng)的作業(yè)調(diào)度模塊接收作業(yè)任務(wù)的腳本程序時(shí)，通常會返回一個(gè)作業(yè)號，這樣便于用戶進(jìn)行計(jì)算過程跟蹤和查看計(jì)算結(jié)果。具體地，在GEMS計(jì)算完成以后，將計(jì)算結(jié)果存儲在集群系統(tǒng)的全局共享存儲區(qū)中。用于GEMS計(jì)算程序的處理方法進(jìn)一步包括：根據(jù)作業(yè)號，從全局共享存儲區(qū)中下載計(jì)算結(jié)果并查看計(jì)算結(jié)果。在根據(jù)多個(gè)參數(shù)收集多個(gè)參數(shù)的提交信息之后，還對提交信息進(jìn)行檢查，并且當(dāng)提交信息不正確時(shí)，顯示錯(cuò)誤提示信息。例如，檢查用戶申請的計(jì)算資源是否超過其權(quán)限，用戶輸入的參數(shù)是否合法，用戶的輸入文件格式是否正確等，如果判斷出提交信息存在錯(cuò)誤，會在Web界面給出相應(yīng)提示。具體地，在根據(jù)多個(gè)參數(shù)收集多個(gè)參數(shù)的提交信息之后，也就是在提交作業(yè)任務(wù)的腳本程序之前，還通過檢查模塊對提交信息進(jìn)行檢查，并且當(dāng)提交信息不正確時(shí)，向用戶顯示錯(cuò)誤提示信息，并且允許用戶重新輸入?yún)?shù)。優(yōu)選地，對輸入文件進(jìn)行檢查，并且當(dāng)輸入文件的格式不正確時(shí)，通過文本框或者突出顯示的形式顯示錯(cuò)誤提示信息。此外，還對除輸入文件之外的其他提交信息進(jìn)行檢查，例如，檢查用戶的申請的計(jì)算資源是否在可用資源的范圍內(nèi)。利用本發(fā)明實(shí)施例的用于處理GEMS計(jì)算程序的處理方法，首先，通過web封裝，將GEMS計(jì)算程序的任務(wù)提交流程隱藏在底層，提供給用戶一個(gè)簡單直觀的Web界面，用戶只需要在Web界面上執(zhí)行簡單的操作就能實(shí)現(xiàn)數(shù)據(jù)文件準(zhǔn)備、計(jì)算資源申請、計(jì)算任務(wù)提交、計(jì)算結(jié)果查看等整套流程，從而大大降低使用難度。因此，用戶不再需要熟練掌握Linux操作系統(tǒng)基本操作、Shell腳本語言、常用的文本編輯和字符處理工具、GEMS運(yùn)行命令、作業(yè)調(diào)度軟件等與其專業(yè)背景無關(guān)的知識和工具，就能輕松完成GEMS計(jì)算程序運(yùn)行的準(zhǔn)備、執(zhí)行等工作，大大降低了該GEMS計(jì)算程序的使用門檻。將繁瑣復(fù)雜的命令行操作全部隱藏在底層，在底層自動批量執(zhí)行，可以節(jié)省大量的人為操作時(shí)間，從而大幅提高了使用效率。對用戶在Web界面提交的參數(shù)和數(shù)據(jù)進(jìn)行的合法性檢查，從而通過這些合法性檢查可以大大提高并行任務(wù)提交的成功率。進(jìn)行Web封裝后，僅需要通過web界面上的一些選項(xiàng)框就能實(shí)現(xiàn)計(jì)算網(wǎng)絡(luò)的選擇，啟動CPU進(jìn)程綁定等這些功能。此外，將普通用戶的任務(wù)提交操作進(jìn)行Web封裝后，用戶執(zhí)行的都是封閉式的操作，很大程度上避免了影響系統(tǒng)穩(wěn)定或安全的用戶非法操作，因此，提高了高性能計(jì)算集群的使用安全性。以上所述僅為本發(fā)明的優(yōu)選實(shí)施例而已，并不用于限制本發(fā)明，對于本領(lǐng)域的技術(shù)人員來說，本發(fā)明可以有各種更改和變化。凡在本發(fā)明的精神和原則之內(nèi)，所作的任何修改、等同替換、改進(jìn)等，均應(yīng)包含在本發(fā)明的保護(hù)范圍之內(nèi)。