本發(fā)明涉及一種自動(dòng)化方法，尤其涉及一種自動(dòng)化在線實(shí)踐證據(jù)提取方法。
背景技術(shù)：
近年來，國內(nèi)外教育領(lǐng)域越來越注重創(chuàng)新型人才的培養(yǎng)，創(chuàng)新型人才的規(guī)模和質(zhì)量將對一個(gè)國家的核心競爭力產(chǎn)生根本性影響。但是，創(chuàng)新型人才培養(yǎng)長期以來面臨一種困境，即當(dāng)前主流的結(jié)果導(dǎo)向的總結(jié)性評價(jià)體系(即考試為中心的評價(jià)體系)很難對學(xué)習(xí)者的創(chuàng)新性進(jìn)行識別和排序，而面向過程的評價(jià)體系雖然更加客觀，但開銷巨大，難以實(shí)施。
目前，在線實(shí)踐平臺已在高等教育領(lǐng)域發(fā)揮著至關(guān)重要的作用，如在線作業(yè)平臺、在線實(shí)驗(yàn)平臺、在線開發(fā)平臺等，基本上覆蓋了高校的主要實(shí)驗(yàn)和實(shí)踐活動(dòng)。如何更好的利用此類在線實(shí)踐平臺中積累的行為數(shù)據(jù)和評價(jià)數(shù)據(jù)，實(shí)現(xiàn)過程性評價(jià)的自動(dòng)化，是國內(nèi)外教育領(lǐng)域面臨的重大課題。國內(nèi)外學(xué)者通過統(tǒng)計(jì)分析，發(fā)現(xiàn)這些數(shù)據(jù)具有以下特點(diǎn)和規(guī)律：
1、目前高校常用的在線實(shí)踐平臺中積累的過程數(shù)據(jù)基本上覆蓋了學(xué)習(xí)者的主要實(shí)踐行為及其階段性評價(jià)，對評估學(xué)習(xí)者的知識水平、實(shí)踐能力、協(xié)作能力，進(jìn)而輔助個(gè)性化教學(xué)和創(chuàng)新人才培養(yǎng)，都具有重要意義。
2、在線實(shí)踐平臺的作業(yè)庫、實(shí)驗(yàn)庫、團(tuán)隊(duì)協(xié)作項(xiàng)目庫中包含了大量實(shí)踐過程數(shù)據(jù)。但是，目前的人才培養(yǎng)體系并沒有將此類過程數(shù)據(jù)加以利用，忽略了此類能夠真實(shí)反映學(xué)習(xí)者真實(shí)能力的海量過程數(shù)據(jù)。
互聯(lián)網(wǎng)在線創(chuàng)新實(shí)踐平臺中，數(shù)量眾多的創(chuàng)新實(shí)踐用戶有著不同的行為，他們在社區(qū)中不同類型的問答模塊進(jìn)行交流、反饋、討論各種信息，這些信息包括在創(chuàng)新實(shí)踐項(xiàng)目的需求、缺陷信息，作業(yè)信息、編程活動(dòng)記錄等，同時(shí)實(shí)踐用戶會(huì)借助各類工具進(jìn)行訓(xùn)練和創(chuàng)新活動(dòng)，這些工具包括版本控制系統(tǒng)、云端代碼托管系統(tǒng)、項(xiàng)目需求管理系統(tǒng)、缺陷管理系統(tǒng)、在線編程等。對于廣泛分布于互聯(lián)網(wǎng)不同實(shí)踐社區(qū)的創(chuàng)新實(shí)踐用戶，如何快速準(zhǔn)確的讓教育工作者了解實(shí)踐用戶各種能力屬性指標(biāo)，并合理的指定培養(yǎng)方法，指導(dǎo)創(chuàng)新實(shí)踐活動(dòng)成為了一個(gè)函待解決的問題。其中，實(shí)踐證據(jù)自動(dòng)化獲取是一個(gè)解決該問題的關(guān)鍵技術(shù)。但是，由于此類平臺相互獨(dú)立、數(shù)據(jù)的異構(gòu)特性，很難有效的綜合利用其中的數(shù)據(jù)實(shí)現(xiàn)上述目標(biāo)。隨著coursera、edx等平臺的為代表的大規(guī)模在線開放課程的發(fā)展，越來越多的用戶加入到大規(guī)模在線實(shí)踐中來，實(shí)踐用戶在創(chuàng)新實(shí)踐過程中產(chǎn)生了大量、異構(gòu)的活動(dòng)行為數(shù)據(jù)，這些數(shù)據(jù)在多個(gè)維度上為度量和評估人才提供了新的思路。
在高等教育的人才考核領(lǐng)域，人才的測評可以定義為是一個(gè)收集和評估實(shí)踐用戶的行為信息的過程，現(xiàn)有的學(xué)生評價(jià)體系具有較大影響的主要是總結(jié)性評價(jià)和形成性評價(jià)?？偨Y(jié)性評價(jià)有確定的目標(biāo)，并且對評價(jià)對象達(dá)成目標(biāo)的程度做出評價(jià)，而形成性評價(jià)是在實(shí)踐過程中對學(xué)生的知識掌握和能力發(fā)展的評價(jià)。在評價(jià)模型上，有學(xué)者提出了基于勝任特征的人才測評和復(fù)合型人才的評價(jià)框架。其中復(fù)合型人才評價(jià)從知識、工具性能力、素養(yǎng)和心理健康水平。實(shí)踐證據(jù)是各種評價(jià)維度的基礎(chǔ)。在已有評價(jià)模型中，雖然考慮的具體屬性不同，但是其過程和方法基本一致，都是需要先定義人才度量屬性，在把各個(gè)屬性繼續(xù)細(xì)分為多個(gè)測量維度，評價(jià)的維度則需要通過人工過程產(chǎn)出，進(jìn)而給出具體的觀測屬性的分值，最后根據(jù)預(yù)先設(shè)定好的維度權(quán)重計(jì)算一個(gè)具體實(shí)踐用戶的綜合分?jǐn)?shù)。
上述方法不僅由于其度量方法的主觀性導(dǎo)致實(shí)用性不強(qiáng)，而且相關(guān)能力證據(jù)的獲取過程也異常繁瑣、開銷巨大，高校管理部門和教師為了應(yīng)對各類教學(xué)評估，往往需要投入巨大的時(shí)間和精力，即使將來可能出現(xiàn)的專業(yè)評估機(jī)構(gòu)顯然也無法完成對每年數(shù)百萬的學(xué)生進(jìn)行單獨(dú)評估的任務(wù)。這對于互聯(lián)網(wǎng)時(shí)代軟件數(shù)量的大規(guī)模增長是非常不適合的，無法滿足實(shí)時(shí)、方便、準(zhǔn)確的了解學(xué)習(xí)者各種能力屬性的需求。
技術(shù)實(shí)現(xiàn)要素：
本發(fā)明的目的在于針對現(xiàn)有實(shí)踐相關(guān)能力證據(jù)的獲取過程異常繁瑣、開銷巨大的技術(shù)不足，提出一種自動(dòng)化在線實(shí)踐證據(jù)提取方法。
為實(shí)現(xiàn)上述目的，本發(fā)明提供一種自動(dòng)化的在線實(shí)踐證據(jù)提取方法，包括下列步驟：
步驟1、搭建本地?cái)?shù)據(jù)服務(wù)，在本地服務(wù)器上配置關(guān)系數(shù)據(jù)庫，用于存儲(chǔ)在線實(shí)踐證據(jù)；
步驟2、通過網(wǎng)絡(luò)接口獲取在線實(shí)踐平臺中的實(shí)踐用戶列表信息，將列表信息存儲(chǔ)在內(nèi)存隊(duì)列中，并打上時(shí)間戳和本地同步標(biāo)記；
步驟3、本地服務(wù)器運(yùn)行生產(chǎn)者和消費(fèi)者程序，生產(chǎn)者從用戶隊(duì)列中取出用戶，并根據(jù)目標(biāo)在線實(shí)踐平臺的超鏈接結(jié)構(gòu)自動(dòng)組成待抓取的實(shí)踐證據(jù)鏈接，存入任務(wù)隊(duì)列，消費(fèi)者程序從任務(wù)隊(duì)列中獲取任務(wù)鏈接，連接到目標(biāo)在線實(shí)踐平臺，通過安全層超文本傳輸協(xié)議從遠(yuǎn)端服務(wù)器克隆指定用戶的最新實(shí)踐證據(jù)變更數(shù)據(jù)庫到本地磁盤；
步驟4、解析已克隆到本地的實(shí)踐證據(jù)變更數(shù)據(jù)庫，從中抽取和聚合用于度量和評價(jià)用戶的實(shí)踐證據(jù)維度信息，并結(jié)構(gòu)化后存入本地?cái)?shù)據(jù)服務(wù)；
步驟5、建立分布在局域網(wǎng)內(nèi)不同在線實(shí)踐系統(tǒng)的數(shù)據(jù)鏈接，獲取實(shí)踐用戶的歷史行為數(shù)據(jù)信息并將之結(jié)構(gòu)化存儲(chǔ)到本地?cái)?shù)據(jù)庫；
步驟6、鏈接本地?cái)?shù)據(jù)服務(wù)，對同一實(shí)踐用戶的不同賬號信息進(jìn)行識別和合并，并合并實(shí)踐證據(jù)，更新本地?cái)?shù)據(jù)庫；
步驟7、根據(jù)更新周期，定時(shí)執(zhí)行步驟2-6。
進(jìn)一步地，步驟2中的網(wǎng)絡(luò)接口和步驟3中的超鏈接結(jié)構(gòu)在配置文件中設(shè)置，通過網(wǎng)絡(luò)接口的請求中包含身份認(rèn)證令牌。
進(jìn)一步地，步驟3所述的實(shí)踐證據(jù)變更數(shù)據(jù)庫包括在線實(shí)踐平臺的作業(yè)庫、實(shí)驗(yàn)庫、團(tuán)隊(duì)協(xié)作項(xiàng)目庫、用戶動(dòng)態(tài)信息包括問答模塊的交流評論和用戶在實(shí)踐平臺上的活動(dòng)行為。
進(jìn)一步地，步驟2獲取的用戶列表在內(nèi)存隊(duì)列中通過哈希結(jié)構(gòu)存儲(chǔ)，鍵為用戶的唯一識別id，值是json結(jié)構(gòu)；當(dāng)獲取的用戶不在內(nèi)存隊(duì)列中時(shí)，將該用戶加入內(nèi)存隊(duì)列；如果獲取的用戶是已存在的用戶，則更新對應(yīng)用戶的時(shí)間戳標(biāo)記。
進(jìn)一步地，步驟5中建立數(shù)據(jù)鏈接的方法包括：
(1)通過系統(tǒng)的對外服務(wù)應(yīng)用程序編程接口api；
(2)通過受限的數(shù)據(jù)庫用戶信息直接鏈接到目標(biāo)在線實(shí)踐系統(tǒng)數(shù)據(jù)庫。
進(jìn)一步地，步驟4的實(shí)踐證據(jù)維度信息包括作業(yè)的完成數(shù)量、作業(yè)的平均分?jǐn)?shù)、作業(yè)的最高分?jǐn)?shù)、作業(yè)的最低分?jǐn)?shù)、完成作業(yè)的時(shí)間長度、作業(yè)的平均難度、作業(yè)是否為協(xié)同作業(yè)、實(shí)驗(yàn)的文檔數(shù)量、實(shí)驗(yàn)的平均等級、實(shí)驗(yàn)的平均完成度、實(shí)驗(yàn)的平均參與時(shí)間、實(shí)驗(yàn)的次數(shù)、團(tuán)隊(duì)協(xié)作項(xiàng)目庫中項(xiàng)目的數(shù)量、語言種類多少、版本庫被其他用戶克隆的數(shù)量、star數(shù)量、增加代碼行數(shù)、減少代碼行數(shù)、提交次數(shù)、修復(fù)缺陷的數(shù)量、改動(dòng)文件的數(shù)量、請求代碼合并的數(shù)量，關(guān)閉問題跟蹤的數(shù)量和惰性時(shí)間間隔。
進(jìn)一步地，步驟5所述實(shí)踐用戶的歷史行為數(shù)據(jù)信息包括：
實(shí)踐用戶的登陸次數(shù)，參與課程數(shù)量、完成作業(yè)數(shù)量、實(shí)踐庫數(shù)量、評論數(shù)量、粉絲數(shù)量、關(guān)注數(shù)量、實(shí)踐時(shí)長。
進(jìn)一步地，步驟6的同一身份用戶的不同賬號信息通過使用學(xué)號、身份證號及郵箱賬號的唯一識別符進(jìn)行合并，且可引入第三方的跨社區(qū)信息以提高合并準(zhǔn)確性。
進(jìn)一步地，步驟7所述的更新周期通過外部配置文件設(shè)置，其更新周期單位為時(shí)、星期、月。
進(jìn)一步地，在線實(shí)踐用戶的主體為學(xué)習(xí)者和開發(fā)者。
所述自動(dòng)化的在線實(shí)踐證據(jù)提取方法包含各種能夠反映用戶主體實(shí)踐能力的證據(jù)獲取方法,具有較高的可操作性和靈活性，能夠?yàn)橛脩籼峁┴S富的、可供選擇的實(shí)踐能力證據(jù)。
附圖說明
圖1為本發(fā)明的方法流程示意圖。
具體實(shí)施方式
下面將結(jié)合本發(fā)明實(shí)施例中的附圖，對本發(fā)明實(shí)施例中的技術(shù)方案進(jìn)行清楚、完整地描述，顯然，所描述的實(shí)施例僅僅是本發(fā)明一部分實(shí)施例，而不是全部的實(shí)施例?；诒景l(fā)明中的實(shí)施例，本領(lǐng)域普通技術(shù)人員在沒有做出創(chuàng)造性勞動(dòng)前提下所獲得的所有其他實(shí)施例，都屬于本發(fā)明保護(hù)的范圍。
請參閱圖1，本發(fā)明提供一種自動(dòng)化的在線實(shí)踐證據(jù)提取方法，包括下列步驟：
步驟1、搭建本地?cái)?shù)據(jù)服務(wù)，在本地服務(wù)器上配置關(guān)系數(shù)據(jù)庫，用于存儲(chǔ)在線實(shí)踐證據(jù)；
步驟2、通過網(wǎng)絡(luò)接口獲取在線實(shí)踐平臺中的實(shí)踐用戶列表信息，將列表信息存儲(chǔ)在內(nèi)存隊(duì)列中，并打上時(shí)間戳和本地同步標(biāo)記；
步驟3、本地服務(wù)器運(yùn)行生產(chǎn)者和消費(fèi)者程序，生產(chǎn)者從用戶隊(duì)列中取出用戶，并根據(jù)目標(biāo)在線實(shí)踐平臺的超鏈接結(jié)構(gòu)自動(dòng)組成待抓取的實(shí)踐證據(jù)鏈接，存入任務(wù)隊(duì)列，消費(fèi)者程序從任務(wù)隊(duì)列中獲取任務(wù)鏈接，連接到目標(biāo)在線實(shí)踐平臺，通過安全層超文本傳輸協(xié)議從遠(yuǎn)端服務(wù)器克隆指定用戶的最新實(shí)踐證據(jù)變更數(shù)據(jù)庫到本地磁盤；
步驟4、解析已克隆到本地的實(shí)踐證據(jù)變更數(shù)據(jù)庫，從中抽取和聚合用于度量和評價(jià)用戶的實(shí)踐證據(jù)維度信息，并結(jié)構(gòu)化后存入本地?cái)?shù)據(jù)服務(wù)；
步驟5、建立分布在局域網(wǎng)內(nèi)不同在線實(shí)踐系統(tǒng)的數(shù)據(jù)鏈接，獲取實(shí)踐用戶的歷史行為數(shù)據(jù)信息并將之結(jié)構(gòu)化存儲(chǔ)到本地?cái)?shù)據(jù)庫；
步驟6、鏈接本地?cái)?shù)據(jù)服務(wù)，對同一實(shí)踐用戶的不同賬號信息進(jìn)行識別和合并，并合并實(shí)踐證據(jù)，更新本地?cái)?shù)據(jù)庫；
步驟7、根據(jù)更新周期，定時(shí)執(zhí)行步驟2-6。
步驟2中的網(wǎng)絡(luò)接口和步驟3中的超鏈接結(jié)構(gòu)在配置文件中設(shè)置，通過網(wǎng)絡(luò)接口的請求中包含身份認(rèn)證令牌。
步驟2獲取的用戶列表在內(nèi)存隊(duì)列中通過哈希結(jié)構(gòu)存儲(chǔ)，鍵為用戶的唯一識別id，值是json結(jié)構(gòu)；當(dāng)獲取的用戶不在內(nèi)存隊(duì)列中時(shí)，將該用戶加入內(nèi)存隊(duì)列；如果獲取的用戶是已存在的用戶，則更新對應(yīng)用戶的時(shí)間戳標(biāo)記。
步驟3所述的實(shí)踐證據(jù)變更數(shù)據(jù)庫包括在線實(shí)踐平臺的作業(yè)庫、實(shí)驗(yàn)庫、團(tuán)隊(duì)協(xié)作項(xiàng)目庫、用戶動(dòng)態(tài)信息包括問答模塊的交流評論和用戶在實(shí)踐平臺上的活動(dòng)行為。
步驟4的實(shí)踐證據(jù)維度信息包括作業(yè)的完成數(shù)量、作業(yè)的平均分?jǐn)?shù)、作業(yè)的最高分?jǐn)?shù)、作業(yè)的最低分?jǐn)?shù)、完成作業(yè)的時(shí)間長度、作業(yè)的平均難度、作業(yè)是否為協(xié)同作業(yè)、實(shí)驗(yàn)的文檔數(shù)量、實(shí)驗(yàn)的平均等級、實(shí)驗(yàn)的平均完成度、實(shí)驗(yàn)的平均參與時(shí)間、實(shí)驗(yàn)的次數(shù)、團(tuán)隊(duì)協(xié)作項(xiàng)目庫中項(xiàng)目的數(shù)量、語言種類多少、版本庫被其他用戶克隆的數(shù)量、star數(shù)量、增加代碼行數(shù)、減少代碼行數(shù)、提交次數(shù)、修復(fù)缺陷的數(shù)量、改動(dòng)文件的數(shù)量、請求代碼合并的數(shù)量，關(guān)閉問題跟蹤的數(shù)量和惰性時(shí)間間隔。
步驟5中建立數(shù)據(jù)鏈接的方法包括：
(1)通過系統(tǒng)的對外服務(wù)應(yīng)用程序編程接口api；
(2)通過受限的數(shù)據(jù)庫用戶信息直接鏈接到目標(biāo)在線實(shí)踐系統(tǒng)數(shù)據(jù)庫。
步驟5所述實(shí)踐用戶的歷史行為數(shù)據(jù)信息包括：
實(shí)踐用戶的登陸次數(shù)，參與課程數(shù)量、完成作業(yè)數(shù)量、實(shí)踐庫數(shù)量、評論數(shù)量、粉絲數(shù)量、關(guān)注數(shù)量、實(shí)踐時(shí)長。
步驟6的同一身份用戶的不同賬號信息通過使用學(xué)號、身份證號及郵箱賬號的唯一識別符進(jìn)行合并，且可引入第三方的跨社區(qū)信息以提高合并準(zhǔn)確性。
步驟7所述的更新周期通過外部配置文件設(shè)置，其更新周期單位為時(shí)、星期、月。
該在線實(shí)踐用戶的主體為學(xué)習(xí)者和開發(fā)者。
所述自動(dòng)化的在線實(shí)踐證據(jù)提取方法包含各種能夠反映用戶主體實(shí)踐能力的證據(jù)獲取方法,具有較高的可操作性和靈活性，能夠?yàn)橛脩籼峁┴S富的、可供選擇的實(shí)踐能力證據(jù)。
綜上所述，。
需要說明的是，在本文中，諸如第一和第二等之類的關(guān)系術(shù)語僅僅用來將一個(gè)實(shí)體或者操作與另一個(gè)實(shí)體或操作區(qū)分開來，而不一定要求或者暗示這些實(shí)體或操作之間存在任何這種實(shí)際的關(guān)系或者順序。而且，術(shù)語“包括”、“包含”或者其任何其他變體意在涵蓋非排他性的包含，從而使得包括一系列要素的過程、方法、物品或者設(shè)備不僅包括那些要素，而且還包括沒有明確列出的其他要素，或者是還包括為這種過程、方法、物品或者設(shè)備所固有的要素。在沒有更多限制的情況下，由語句“包括一個(gè)……限定的要素，并不排除在包括所述要素的過程、方法、物品或者設(shè)備中還存在另外的相同要素”。
盡管已經(jīng)示出和描述了本發(fā)明的實(shí)施例，對于本領(lǐng)域的普通技術(shù)人員而言，可以理解在不脫離本發(fā)明的原理和精神的情況下可以對這些實(shí)施例進(jìn)行多種變化、修改、替換和變型，本發(fā)明的范圍由所附權(quán)利要求及其等同物限定。