基于互聯(lián)網(wǎng)采樣調(diào)節(jié)難度指標(biāo)的云端題庫的制作方法
【專利摘要】一種基于互聯(lián)網(wǎng)采樣調(diào)節(jié)難度指標(biāo)的云端題庫。本發(fā)明提供一個測試系統(tǒng)和方法，能通過一個處理器生成并提供給用戶一些具有難度系數(shù)的測試題目。通過獲取測試者輸入的答案，并進(jìn)一步獲取測試者完成題目所用的時間。處理器可以通過這些獲取得到的數(shù)據(jù)判斷是否對該題目的難度系統(tǒng)進(jìn)行調(diào)整，換句話說是基于用戶所用到的答題時間與標(biāo)準(zhǔn)極限時間進(jìn)行對比。
【專利說明】基于互聯(lián)網(wǎng)采樣調(diào)節(jié)難度指標(biāo)的云端題庫

【技術(shù)領(lǐng)域】
[0001] 本發(fā)明是關(guān)于一種基于測試用戶采樣進(jìn)行題目難度系數(shù)調(diào)整與教學(xué)的方法。

【背景技術(shù)】
[0002] 教學(xué)與培訓(xùn)當(dāng)中相當(dāng)重要的一個部分是提供測試來評估學(xué)生當(dāng)前的學(xué)習(xí)情況與 能力。而提供不同難度混雜在一起的測試題目對于老師教學(xué)來說是一件費(fèi)時傷神的事情。 而對于學(xué)生來說，如果教師需要花費(fèi)大量時間來提供這類測試題，就不能保證提供高質(zhì)量 的授課，進(jìn)而無法激發(fā)學(xué)生運(yùn)用不同的思維方式來解題并學(xué)習(xí)該科目。
[0003] 更多的測試實際上可以在網(wǎng)上完成，為教師和學(xué)生節(jié)省時間。學(xué)生或教師可以快 速、輕松地在線提交答案，接收結(jié)果。如果需要獲取更多的題目，通過在線環(huán)境，各個學(xué)術(shù)或 試題出版商都可以提供更多種類的試題。根據(jù)科目和年級水平，試題當(dāng)中可能包括不同的 難度級別或等級。然而，如果從出版商的角度來看難度或評級，這些難度級別可能是基于主 觀的因素。此外，學(xué)生可能并不會總是努力并且認(rèn)真地回答每一個問題，這可能會干擾確定 一個問題的難度。


【發(fā)明內(nèi)容】

[0004] 本發(fā)明是關(guān)于一個針對測試題目可自我調(diào)整的難度指標(biāo)的方法與系統(tǒng)，同時考慮 到學(xué)生的具體努力情況。具體來說這是一個方法和系統(tǒng)，能通過一個處理器生成并提供給 用戶一些具有難度系數(shù)的測試題目。通過獲取測試者輸入的答案，并進(jìn)一步獲取測試者完 成題目所用的時間。處理器可以通過這些獲取得到的數(shù)據(jù)判斷是否對該題目的難度系統(tǒng)進(jìn) 行調(diào)整，換句話說是基于用戶所用到的答題時間與極限時間進(jìn)行對比。

【專利附圖】

【附圖說明】
[0005] 本發(fā)明特別地指出并清楚地要求保護(hù)本說明書的結(jié)論部分，同時作為一種操作和 組織方法，連同它的目的、特征及其優(yōu)點。為了讓本發(fā)明更容易地被理解，最好的方式是通 過如下圖示進(jìn)行說明：
[0006] 圖1是一個根據(jù)本發(fā)明的實施而繪制的關(guān)于該測試系統(tǒng)的一個圖示。
[0007] 圖2是根據(jù)本發(fā)明的實施而繪制的一個邏輯流程圖，關(guān)于一種如何去收集測試參 與者采樣的方法。
[0008] 圖3是根據(jù)本發(fā)明實施的關(guān)于測試系統(tǒng)的軟件平臺結(jié)構(gòu)圖。
[0009] 圖4是根據(jù)本發(fā)明展示用于管理考試的用戶界面示意圖。
[0010] 圖5是根據(jù)本發(fā)明的實施，用于調(diào)節(jié)難度系數(shù)的一種方法的流程圖。
[0011] 為了簡單和清楚的說明，在圖中所示的元件并沒有按比例繪制。例如，一些元件的 尺寸，為清楚起見，相對于其他元素可能被夸大了。此外，在認(rèn)為合適的情況下，圖示中存在 重復(fù)的標(biāo)號數(shù)字，表示相應(yīng)的或類似的元件。

【具體實施方式】
[0012] 在下面的描述中，將詳細(xì)地描述本發(fā)明的各個方面內(nèi)容。為了更好地解釋本發(fā)明， 將會描述具體的配置和細(xì)節(jié)，使本發(fā)明更透徹地被理解。但對于一些在本領(lǐng)域的技術(shù)人員 將不需要在此詳細(xì)描述特別細(xì)節(jié)，所以，對于一些眾所周知的功能，在這里會被省略或簡 化。
[0013] 除非特別聲明，整個說明書中所使用的術(shù)語如"處理"，"計算"，"確定"或類似的操 作和/或處理計算機(jī)或計算系統(tǒng)，或類似的電子計算裝置、操作和/或轉(zhuǎn)換數(shù)據(jù)表示等概念 都是可被理解的。
[0014] 本發(fā)明可提供一種系統(tǒng)或方法關(guān)于調(diào)整、修改或確定一個測試問題的難度等級。 測試可以通過檢索或訪問一組存儲在遠(yuǎn)程計算機(jī)(或云服務(wù)器）上的問題。測試的參與者， 如在校學(xué)生或自學(xué)者通過如智能手機(jī)或平板電腦等計算機(jī)設(shè)備進(jìn)行測試。例如在一次測試 中可以生成任何一組問題，評估測試參與者的技能或知識掌握水平。每個測試可能是針對 特定科目的問題，或可能包括幾個科目?？颇靠赡馨ɡ鐢?shù)學(xué)，語文，英語，物理，化學(xué)等。 這些問題可能有不同的類型，如為判斷題，多選，填補(bǔ)空白，論述題，或其他類型的題目。
[0015] 相對于測試參加者，包括學(xué)生、教師、教育管理人員或標(biāo)準(zhǔn)化的測試機(jī)構(gòu)，都渴望 參與的測試能夠提供包括不同難度范圍的問題，這樣可以最好地評估參與者的技能或知識 的掌握程度。然而，確定測試的難度可能依賴于主觀因素，包含的因數(shù)是難以測量的，如教 師的教學(xué)技能，教科書的質(zhì)量，或測試目的所要求深度。此外，準(zhǔn)確確定測試或某個題目的 難度需要假設(shè)所有的參與者都盡力地回答這個問題。但是某些情況下，某些參與者可能是 在匆忙地完成或者沒有經(jīng)過足夠的主觀思考的情況進(jìn)行回答問題。本發(fā)明的實施則解決這 個問題，我們會根據(jù)參加者的用戶的行為測試，確定哪些參與者是在認(rèn)真完成測試或某個 題目的。這樣我們可在采樣用戶中即時計算出一個問題的難度指標(biāo)，而對于一些測試參與 者非認(rèn)真完成的回答，我們并不會進(jìn)行采樣，不作為難度指標(biāo)計算的樣本。
[0016] 本發(fā)明實施可確定測試參與者的行為是否正常或者合理，例如，測量或確定測試 參與者回答問題的時間。如果參賽者未能在一個合理的時間段內(nèi)來回答一個問題，那么該 參與者的行為可能被視為非正常測試行為。對于每一個問題，根據(jù)問題的類型科目，長度和 難度，極限時間或參考時間設(shè)定。極限時間代表了回答這個問題所需要的最少的時間。如 果一個測試參加者的所用時間小于極限時間而完成了一個問題，那很可能是回答時不小心 或隨意跳過這個問題，或者不夠時間完成。對于一些很長或者很復(fù)雜的問題類型，比如閱讀 理解題、數(shù)學(xué)的微積分等高級題目，對比一些簡單的判斷題，算術(shù)題，極限時間會變得更長。
[0017] 理論上，測試參與者在回答一個問題的時候，需要連續(xù)做三個過程的動作：讀題， 思考，最后是回答。這三個連續(xù)的過程可能在時間上有重疊。例如，測試參與者可能一邊閱 讀題目，一邊開始思考，或者一邊開始思考的過程中一邊進(jìn)行作答，所以我們在極限時間設(shè) 定的過程中考慮到這三者之間的重疊關(guān)系。In a
[0018] 圖1是一個測試系統(tǒng)的一個圖示，本發(fā)明的實施例。106測試材料的出版或提 供商可以上傳內(nèi)容到服務(wù)器或云計算系統(tǒng)110。服務(wù)器或云計算系統(tǒng)110都可以連接到 Internet互聯(lián)網(wǎng)。云計算系統(tǒng)110包括計算機(jī)服務(wù)器112,其中每一個計算機(jī)服務(wù)器112 包含了存儲器112a和處理器112b。出版商106可使用自己的電腦114或設(shè)備存儲器114a 和114b，將內(nèi)容上傳到云計算系統(tǒng)110處理器。教師或?qū)W校管理員102的可輸入測試參數(shù) 到一臺具有顯示器的計算機(jī)104,或輸入到、內(nèi)存104a和處理器104b的用戶界面106。測 試題目的參數(shù)以及題目所描述的特征會提供并展示給學(xué)生116。測試內(nèi)容通過設(shè)備118,可 能包括內(nèi)存118a和處理器118b，分發(fā)測試內(nèi)容到學(xué)生的計算機(jī)上。102管理員或教師和學(xué) 生116可以是一個學(xué)?；蚰辰逃M織的一部分，而他們使用的設(shè)備118U04是通過學(xué)校自 己的網(wǎng)絡(luò)或者Internet互聯(lián)網(wǎng)119進(jìn)行連接。如果學(xué)校本身就是一個在線的網(wǎng)校，那么并 通過互聯(lián)網(wǎng)，管理員102和學(xué)生116可以通過各自的設(shè)備進(jìn)行連接。
[0019] 教師102通過設(shè)備104可以輸入測試的參數(shù)，舉例包括一系列題目問題、科目、年 級、平均難度等。教師的設(shè)備104可以通過互聯(lián)網(wǎng)119連接或者耦合到遠(yuǎn)程服務(wù)器或者云 計算設(shè)備110上。教師或管理員102輸入?yún)?shù)可傳輸?shù)皆品?wù)器110上，而云服務(wù)器設(shè)備 110會根據(jù)接收的這些參數(shù)生成或者建立一系列具有特征描述的題目。云服務(wù)器110里面 通過112a儲存器儲存著由出版商106上傳的題目數(shù)據(jù)庫和數(shù)據(jù)表，數(shù)據(jù)庫或數(shù)據(jù)表里面包 含了題目的內(nèi)容例如題干、答案選項、正確的答案、題目的解析、難度參數(shù)、科目、年級、題目 長度、回答題目的極限時間等等信息。當(dāng)云計算設(shè)備110接收到這些參數(shù)后，根據(jù)參數(shù)生成 與數(shù)據(jù)庫中相應(yīng)的一系列題目，并通過學(xué)生的計算機(jī)設(shè)備118分發(fā)傳輸?shù)綄W(xué)生116的用戶 界面當(dāng)中。
[0020] 根據(jù)某些實施樣例，學(xué)生116通過設(shè)備118上的用戶測試界面輸入他們的答案。 用戶界面的形式可以是一個獨(dú)立的應(yīng)用程序或在線的網(wǎng)頁。處理器118b可以通過時間測 量程序計算學(xué)生116對于每一個題目的完成時間。測量學(xué)生116開始做題的時間起始點， 可以是當(dāng)一個測試題目顯示給學(xué)生116那一刻起。而測量學(xué)生116完成該題目的結(jié)束時間 點則可以是學(xué)生一旦選擇了一個答案，或者選擇跳到下一題。在網(wǎng)頁中，時間測量應(yīng)用程序 可能是一個Java小程序，或通過超文本標(biāo)記語言（HTML)在網(wǎng)頁中嵌入，或者也可以使用其 它的定時方法。每一個學(xué)生116所回答的答案和完成該題目的時間都會暫存在學(xué)生計算設(shè) 備118當(dāng)中的存儲設(shè)備118a當(dāng)中，又或者即時被傳送到云服務(wù)器110當(dāng)中。一旦測試進(jìn)程 完成后，云計算服務(wù)110會收到一個答題文件，里面包含每一個學(xué)生116對每個問題的答 案和完成時間。云計算服務(wù)110可確定是否要將學(xué)生116作答作為調(diào)整難度系數(shù)的采樣樣 品。每個題目都有一個預(yù)先設(shè)定的難度等級或系數(shù)，由題目提供者即出版商提供一個初始 的難度系數(shù)。例如，如果一條題目的難度系數(shù)是未知或未經(jīng)過計算的，它可能被指定為〇. 5 或0.7作為缺省值。而決定是否將學(xué)生116輸入的回答作為調(diào)整題目難度指標(biāo)，則是通過 儲存在云端服務(wù)器存儲單元112a中的該題目極限時間與該學(xué)生剛才作答的完成時間進(jìn)行 比較。問題回答的采樣與調(diào)整計算各題的難度指標(biāo)過程，可以通過避開網(wǎng)絡(luò)高峰期的時候 人工控制異步進(jìn)行。
[0021] 在某些實施樣例當(dāng)中，管理員102和學(xué)生116可能扮演著同一個參與測試者的角 色，因為舉個例子，在一些自我在線學(xué)習(xí)課程里，測試參加者或者學(xué)生116可以管理并生成 他們自己所需要的一系列題目用于自我測試。
[0022] 設(shè)備104,118,112,和114均可以包括一個或多個控制器或處理器104b、118b、 112b、114b，分別用于執(zhí)行操作指令。也可以包括一個或多個存儲單元104a、118a、112a和 114a，分別用于存儲數(shù)據(jù)。和/或指令(例如，軟件)由處理器執(zhí)行。處理器104b、118b、112b、 114b，均可以包括一個中央處理單元（CPU)，一個數(shù)字信號處理器（DSP)，微處理器，控制 器，芯片，微芯片，集成電路（1C)，或任何其它合適的多用途或特定的處理器或控制器。存儲 單元104a、118a、112a和114a，均可以包括隨機(jī)存取存儲器（RAM)，一個動態(tài)RAM(DRAM)，R 速存儲器，易失性存儲器，非易失性存儲器，高速緩沖存儲器，緩沖器，短期存儲器單元，長 期存儲器單元，或其他合適的存儲單元。處理器1〇牝、11813、11213、11413均為通用處理器，為 執(zhí)行本發(fā)明的實施樣例，例如可以通過執(zhí)行代碼或存儲在存儲器中的軟件。在一般情況下， 處理器可以指在一臺設(shè)備中的單獨(dú)或獨(dú)立的處理器，也可能是指可以被聯(lián)接在一起的一個 以上的處理器共享處理任務(wù)，當(dāng)然也可以使用其它的計算機(jī)結(jié)構(gòu)。
[0023] 下面是一個范例說明如何去根據(jù)樣本與極限時間對比來決定是否對每一個題目 進(jìn)行難度系數(shù)的調(diào)整，首先我們先解析一下我們的難度系數(shù)計算方式，d代表難度系數(shù)，A 代表對于這條題目答對的人數(shù)，T代表所有做過這個題目的人數(shù)，那么難度指標(biāo)的計算方式 如下：
[0024] d=l-A/T (1)
[0025] 其他難度指標(biāo)計算方式有可能被使用。難度指標(biāo)代表某一個題目針對有可能做這 個題目的所有學(xué)生來說，做錯該題目的可能性，1為最大，〇為最小。
[0026] 如之前所述，每道題目的極限時間或者叫參考時間是基于如下幾個因數(shù)：題目的 長度，科目，題目的類型，難度指標(biāo)等等。f是計算出來的極限時間，如果測試參與者的答題 時間少于f則不作為調(diào)整難度指標(biāo)的采樣樣本：

【權(quán)利要求】
1. 一種題目測試的方法，包括了： 通過處理器生成一個帶有難度指標(biāo)的題目； 同樣通過處理器獲取用戶輸入的答案； 通過處理器計算用戶答題的時間，并將這個時間與該題目的極限時間進(jìn)行比較，并決 定是否將這個答題樣本作為調(diào)整題目難度指標(biāo)的依據(jù)與采樣。
2. 根據(jù)權(quán)利要求1的方法，對比答題時間與題目極限時間之后，如果答題時間大于極 限時間的情況下，則將這個答題樣本加入到數(shù)據(jù)庫中用于調(diào)整該題目的難度指標(biāo)。
3. 根據(jù)權(quán)利要求2的方法，計算每道題目的極限時間是根據(jù)該道題目的字?jǐn)?shù)，長度，題 型，以及難度指標(biāo)。
4. 根據(jù)權(quán)利要求2的方法，調(diào)整難度指標(biāo)還依據(jù)測試參與者回答題目是否正確。
5. 根據(jù)權(quán)利要求1的方法，每一道題目的難度指標(biāo)的計算與調(diào)整依據(jù)答題總?cè)藬?shù)以及 答對的人數(shù)。
6. 根據(jù)權(quán)利要求1的方法，包括了顯示題目的正確答案，還有題目的解題思路解析。
7. 根據(jù)權(quán)利要求1的方法，包括了當(dāng)接收到輸入數(shù)據(jù)后，系統(tǒng)能生成一系列的題目包 括了難度指標(biāo)，題目的科目，類型等。而生成的這些題目是依據(jù)接收到的輸入指令。
8. -個測試系統(tǒng)包括了 ： 一個計算機(jī)包括了計算處理器與存儲設(shè)備，并且處理器被配置如下： 通過處理器生成一個帶有難度指標(biāo)的題目； 同樣通過處理器獲取用戶輸入的答案； 通過處理器計算用戶答題的時間，并將這個時間與該題目的極限時間進(jìn)行比較，并決 定是否將這個答題樣本作為調(diào)整題目難度指標(biāo)的依據(jù)與采樣。
9. 在權(quán)利要求8中的系統(tǒng)里，里面所描述的處理器被配置為可對比測試者的答題時間 與該題目的極限時間，如果大于極限時間，則作為調(diào)整該題目難度系數(shù)的樣本。
10. 權(quán)利要求9所述的系統(tǒng)中，題目的極限時間計算方法是基于該題目的特征，而特征 包括了題目的題型、長度與題目難度指標(biāo)。
11. 權(quán)利要求10所述的系統(tǒng)中，處理器對該題目的難度系數(shù)進(jìn)行調(diào)整，也基于該測試 參與者是否答對了該道題目。
12. 在權(quán)利要求8中的系統(tǒng)里，處理器會配置為根據(jù)測試參與者的總?cè)舜闻c答對的總 人次來進(jìn)行難度指標(biāo)的調(diào)整。
13. 在權(quán)利要求8中的系統(tǒng)里，處理器會配置為當(dāng)完成答題后，向測試參與者顯示題目 的正確答案與解題思路的解析。
14. 在權(quán)利要求8中的系統(tǒng)里，處理器會被設(shè)置為可接收由用戶輸入的題目設(shè)定，根據(jù) 這些設(shè)定而生成一系列的題目包括了科目，難度系數(shù)等。
15. 在權(quán)利要求1中的系統(tǒng)里，處理器可以存儲一系列的題目，每一道題目都包括了題 目的類型，長度，難度系數(shù)等。
16. -種測試設(shè)備，包括如下： 一臺計算機(jī)，包括了存儲設(shè)備與處理器；還有一組可以通過網(wǎng)絡(luò)連接到計算機(jī)的服務(wù) 器；其處理器的特征在于： 接收到來自輸入端對于所需題目的特性； 服務(wù)器端可以接收輸入端的一系列的題目特性描述； 接收測試參與者輸入對應(yīng)題目的答案； 對于一系列的題目，獲取每一個題目的完成時間，并且將這個完成時間傳輸?shù)椒?wù)器 中；服務(wù)器的特征是： 對應(yīng)測試中的一系列題目，可對比測試者完成每一個題目的時間與該題目的極限時 間；并且如果答題時間大于極限時間的情況下，對該道題目的難度指標(biāo)進(jìn)行調(diào)整，調(diào)整的依 據(jù)是總答題人次與總答對人次。
17. 對于權(quán)利要求16所述設(shè)備，能夠接收所有測試參與者對應(yīng)每一道題目的答案，以 及每一位測試參與者完成這條題目所用的時間。
18. 對于權(quán)利要求17所述設(shè)備，服務(wù)器可實現(xiàn)如果測試參與者答題時間大于該道題目 的極限時間，能夠以此為根據(jù)調(diào)整一系列題目中每道題目的難度指標(biāo)。
19. 對于權(quán)利要求16所述設(shè)備，每道題目的極限時間計算是基于該道題目的類型，長 度，難度指標(biāo)等。
20. 對于權(quán)利要求17所述設(shè)備，難度系數(shù)的計算是基于測試參與者的總數(shù)量與人次。
【文檔編號】G06F17/30GK104424346SQ201310684001
【公開日】2015年3月18日 申請日期:2013年12月13日 優(yōu)先權(quán)日:2013年8月28日
【發(fā)明者】M.C.M.李 申請人:UMe世界有限公司