在线工作手册：计算机辅助评估系统【外文翻译】.doc

1、毕业论文（设计）外文翻译EWORKBOOKACOMPUTERAIDEDASSESSMENTSYSTEMGENNAROCOSTAGLIOLA,FILOMENAFERRUCCI,VITTORIOFUCCELLA,ROCCOOLIVETODIPARTIMENTODIMATEMATICAEINFORMATICA,UNIVERSITDISALERNOVIAPONTEDONMELILLO,I84084FISCIANOSAGCOSTAGLIOLA,FFERRUCCI,VFUCCELLA,ROLIVETOUNISAITABSTRACTCOMPUTERAIDEDASSESSMENTCAATOOLSAREMORE

2、ANDMOREWIDELYADOPTEDINACADEMICENVIRONMENTSMIXEDTOOTHERASSESSMENTMEANSINTHISPAPER,WEPRESENTACAAWEBAPPLICATION,NAMEDEWORKBOOK,WHICHCANBEUSEDFOREVALUATINGLEARNERSKNOWLEDGEBYCREATINGTHETUTORANDTAKINGTHELEARNERONLINETESTSBASEDONMULTIPLECHOICE,MULTIPLERESPONSEANDTRUE/FALSEQUESTIONTYPESITSUSEISSUITABLEWITH

3、INTHEACADEMICENVIRONMENTINABLENDEDLEARNINGAPPROACH,BYPROVIDINGTUTORSWITHANADDITIONALASSESSMENTTOOL,ANDLEARNERSWITHADISTANCESELFASSESSMENTMEANSINTHEPAPER,THEMAINCHARACTERISTICSOFTHETOOLAREPRESENTEDTOGETHERWITHARATIONALEBEHINDTHEMANDANOUTLINEOFTHEARCHITECTURALDESIGNOFTHESYSTEM1INTRODUCTIONINBLENDEDLEA

4、RNINGTHEELECTRONICMEANSAREMIXEDWITHTHETRADITIONALDIDACTICS,INORDERTOTRAINANDTOASSESSTHELEARNERSLEARNINGMANAGEMENTSYSTEMSLMS,ENHANCEDWITHCOLLABORATIVEENVIRONMENTSUPPORT,ANDCOMPUTERAIDEDASSESSMENTCAATOOLSAREMOREANDMOREWIDELYADOPTEDINTHEACADEMYATTHEUNIVERSITYOFSALERNOSOMESYSTEMSANDPLATFORMSHAVEBEENTEST

5、EDTOSUPPORTBLENDEDLEARNINGEVENIFSOMEGOODEXISTINGSYSTEMSWITHLMSCAPABILITIES,LIKEOPENUSSOPENUSS,2005,CHEFCHEF,2005,ANDSAKAISAKAI,2005HAVEBEENUSED,NONEOFTHETESTEDTOOLSFORASSESSMENTSATISFIEDALLOFOURNEEDSWENEEDEDANADVANCEDASSESSMENTTOOLWHICHCOULDHAVEHELPEDTHELECTURERSTOSPEEDUPTHEONEROUSTASKOFASSESSINGAHU

6、GEMASSOFLEARNERSANDCOULDHAVEBEENEASILYINTEGRATEDWITHTHELMSSYSTEMSALREADYINUSEINOURDEPARTMENTASTATEOFTHEARTANALYSISUNDERTAKENATOURDEPARTMENT,WHICHINVOLVEDSEVERALLECTURERSANDSTUDENTS,ALLOWEDUSTOIDENTIFYTHEFOLLOWINGIMPORTANTREQUIREMENTSFORANEFFECTIVEENVIRONMENTFORDEVELOPINGANDUSINGASSESSMENTTESTSHIGHRE

7、USABILITYOFTHEAUTHOREDCONTENTDIDACTICSORGANIZEDINCOURSESANDCLASSESFLEXIBLEACCESSCONTROLSYSTEMTOTHETESTSQUALITYTRACKINGFORTHEAUTHOREDCONTENTRICHREPORTINGSECTIONAPROJECTFORACOMPREHENSIVEWEBBASEDASSESSMENTSYSTEM,NAMEDEWORKBOOK,WASTHENSTARTEDTHESYSTEMCANBEUSEDFOREVALUATINGALEARNERSKNOWLEDGEBYCREATINGTHE

8、TUTORANDTAKINGTHELEARNERONLINETESTSBASEDONMULTIPLECHOICE,MULTIPLERESPONSEANDTRUE/FALSEQUESTIONTYPESEVENTHOUGHEWORKBOOKALLOWSTHECREATIONOFONLINETESTSFORBOTHASSESSMENTANDSELFASSESSMENT,ITWASPLANNEDABOVEALLFORSUMMATIVEPURPOSESTHEQUESTIONSAREKEPTINAHIERARCHICALDATABASE,THATIS,ITISTREESTRUCTURED,INTHESAM

9、EWAYASTHEFILESYSTEMOFANOPERATINGSYSTEMINSUCHASTRUCTURE,THEFILESCANBETHOUGHTOFASQUESTIONS,WHETHERTHEDIRECTORIESCANBETHOUGHTOFASMACROAREAS,WHICHARECONTAINERSOFQUESTIONSUSUALLYDEALINGWITHTHESAMESUBJECTAMACROAREACANSTILLCONTAINOTHERMACROAREASTHETUTORSAREFREETOORGANIZETHETREEASTHEYWISH,EGKEEPINGTHEQUESTI

10、ONSOFTHESAMECOURSEINAMACROAREAANDFURTHERSPLITTINGITACCORDINGTOTHECHAPTERSTHEYCOVEREVERYITEMAMACROAREAORAQUESTIONHASANOWNER,WHICHISTHETUTORTHATAUTHOREDITTHETUTORSCANCHOOSEWHETHERTOSHARETHEIRQUESTIONSORNOT,ASSIGNINGAVALUETOTHEPERMISSIONSASSOCIATEDTOEACHITEMPERMISSIONSAREFORREADING,WRITINGANDUSINGTHEIT

11、EMSSOMEOTHERINFORMATIONABOUTTHEQUESTIONSISPRESENTINTHEDATABASE,SUCHASDIFFICULTY,QUALITY,LANGUAGE,KEYWORDS,NUMBEROFTIMESTHEQUESTIONWASSELECTEDFORATESTANDEXPECTEDTIMEFORALEARNERTOANSWERTHETESTSARECOMPOSEDOFONEORMORESECTIONSTHISSTRUCTUREFACILITATESTHESELECTIONOFTHEQUESTIONSFROMTHEDATABASE,BUTITISSTILLU

12、SEFULFORTHEASSESSMENT,WHEREITCANBEIMPORTANTTOESTABLISHIFONESECTIONISMOREIMPORTANTTHENANOTHERTODETERMINETHEFINALGRADEFORTHETESTTHEREARETWOKINDSOFSECTIONSSTATICANDDYNAMICTHEDIFFERENCEBETWEENTHEMISINTHEWAYTHEYALLOWQUESTIONSELECTIONFORBOTHTHESTATICANDTHEDYNAMICSECTIONS,AMACROAREAINTHEQUESTIONDATABASEMUS

13、TBESPECIFIEDFORASTATICSECTION,THEQUESTIONSARECHOSENDIRECTLYFROMTHESUBTREELOCATEDBYTHESPECIFIEDMACROAREAFORADYNAMICSECTION,SOMESELECTIONPARAMETERSMUSTBEFURTHERSPECIFIED,LEAVINGTHESYSTEMTOCHOOSETHEQUESTIONSRANDOMLYACROSSTHESUBTREELOCATEDBYTHESPECIFIEDMACROAREAWHENEVERALEARNERTAKESATESTDIDACTICSAREORGA

14、NIZEDINTOCOURSESANDCLASSESTHETUTORSRESPONSIBLEFORACOURSE,MANAGEITSCLASSANDCHOOSETHETESTSTHATMUSTBETAKENBYTHELEARNERSOFTHATCLASSTHEREARETWODIFFERENTLISTSOFTESTSWITHINTHECOURSEINTERFACETHEVALUABLEANDTHESELFASSESSMENTTESTLISTSEACHTESTINTHEFORMERLISTISUSEDTODETERMINETHELEARNERSEVALUATION,WHILETHELATTERL

15、ISTISJUSTAGUIDEFORTHELEARNERTOSELFTRAINANDASSESSPREREQUISITESANDAMAXIMUMNUMBEROFATTEMPTSCANBEDEFINEDONLYFORTHETESTSINTHEVALUABLELISTDIFFERENTASSESSMENTSTRATEGIESCANBEBOUNDTOATEST,WHENITISSELECTEDFORTHEINSERTIONINTHEVALUABLEORSELFASSESSMENTLISTOFACOURSETHECHOICEOFANASSESSMENTSTRATEGYAFFECTSTHEWAYINWH

16、ICHSOMEPARAMETERSCONCURTODETERMINETHEGRADEOFTHETESTTHEPARAMETERSARETHEFOLLOWINGTHEWEIGHTOFAQUESTIONINTHETEST,THENUMBEROFDISTRACTERSFORAQUESTIONONLYFORMULTIPLECHOICEANDTRUE/FALSE,THEWEIGHTOFTHEDISTRACTERSONLYFORMULTIPLERESPONSE,BONUSANDPENALTYFACTORSANASSESSMENTSTRATEGYISACONFIGURATION,THATIS,ANASSIG

17、NMENTOFVALUESFORTHEPARAMETERSABOVESOMECONFIGURATIONSAREPRELOADEDINTHESYSTEMANDAREREFERREDTOASPREDEFINEDASSESSMENTSTRATEGIESOTHERCONFIGURATIONSCANBEDEFINEDBYTHETUTORSANDSAVEDINHIS/HERRESERVEDAREAWEWILLREFERTOTHEMASCUSTOMIZEDASSESSMENTSTRATEGIESACOMPLETEHISTORYOFLEARNERSPERFORMANCEONTESTSOFTHEVALUABLE

18、LISTISAVAILABLETOTHETUTORANDTOTHELEARNERSTHEMSELVESEACHRECORDINTHEHISTORYCONTAINSTHEDATEANDTHETIMEWHENTHELEARNERHASJOINEDATEST,THEAMOUNTOFTIMENEEDEDTOFINISHTHETESTANDSOMEINFORMATIONABOUTASSESSMENTTESTSCOREANDSTATETHEDETAILOFTHEANSWERSTOEACHQUESTIONCANBESEENASWELLANDCANBEVIEWEDINAPRINTERFRIENDLYFORMA

19、TTHERESTOFTHEPAPERISORGANIZEDASFOLLOWSINSECTION2THEMAINFEATURESOFTHESYSTEMSAREDESCRIBEDINDETAILSECTION3ISDEVOTEDTOOUTLININGTHEARCHITECTUREOFEWORKBOOKANEXAMPLEOFSYSTEMUSECANBEFOUNDINSECTION4INSECTION5,ACOMPARISONISMADEWITHSOMEINTERESTINGSYSTEMSRELATEDTOOURSSOMEFINALREMARKSANDADESCRIPTIONOFFUTUREWORKC

20、ONCLUDETHEPAPER2THEMAINFEATURESOFEWORKBOOKINTHEFOLLOWINGSUBSECTIONSWEWILLOUTLINETHEMAINCHARACTERISTICSOFTHEEWORKBOOKSYSTEMITISWORTHNOTINGTHATEWORKBOOKWASINTENDEDTOBEUSEDBYALARGENUMBEROFUSERS,SOITHASATYPICALLMSDIDACTICSORGANIZATION,BASEDONCOURSESANDCLASSESACOURSEISAPLACEINWHICHTHETUTORSCANPUBLISHTEST

21、SANDTHELEARNERSCANTAKETHEMLEARNERSCANONLYVIEWTHETESTSPUBLISHEDINTHECOURSESINWHICHTHEYAREMEMBERSTHETUTORMANAGESTHECLASSANDCANACCEPTORDENYLEARNERSAFFILIATIONREQUESTSANDEXPELALEARNERFROMTHECOURSE21QUESTIONMANAGEMENTANIMPORTANTMATTERFORCAA,ANDMOREGENERALLYFORELEARNING,INORDERTOACCELERATETHETEACHINGANDTH

22、EASSESSMENTPROCESSES,ISTHEREUSABILITYOFTHEAUTHOREDCONTENTTHEONLINEMATERIALNEEDSAHUGEINITIALEFFORTTOBECREATED,WHILEITCANBEEASILYMODIFIEDANDREUSEDLATERONTHEREFOREITISVERYIMPORTANTTHATEXISTINGMATERIALCANBEEASILYFOUND,MODIFIEDANDSELECTEDBYATUTORWHOWANTSTOUSEITFORALESSONORATESTTHEREARETWOMAINWAYSTOBOOSTT

23、HEREUSEOFLEARNINGMATERIAL1GOODORGANIZATIONOFMATERIALKEPTINANELEARNINGPLATFORMORCAASYSTEM2INTEROPERABILITYAMONGSYSTEMSANDPLATFORMS,TOSHAREANDEXCHANGEMATERIALOURSYSTEMWASDESIGNEDTOHAVEAWELLORGANIZEDQUESTIONDATABASETOFACILITATETHETUTORINTHEQUESTIONMANAGEMENT,SHAREANDREUSETHEQUESTIONDATABASEOFEWORKBOOKH

24、ASAHIERARCHICALSTRUCTURE,SIMILARTOTHEDIRECTORYTREEOFANOPERATINGSYSTEMEACHITEMINOURDATABASEISADISCIPLINARYMACROAREAINTERNALNODEORAQUESTIONLEAFTHEMEMBERSHIPOFAQUESTIONTOAGIVENMACROAREAISDETERMINEDBYITSSUBJECTEACHMACROAREAISACONTAINEROFQUESTIONSTHATHOLDSITEMSDEALINGWITHASPECIFICSUBJECTITCANBEFURTHERSPL

25、ITINOTHERSUBMACROAREAS,WHICHHOLDQUESTIONSBELONGINGTOAMORESPECIFICMATTERTHEQUESTIONTYPESALLOWEDAREMULTIPLECHOICE,MULTIPLERESPONSEANDTRUE/FALSETHETUTORCANCHOOSEIFAQUESTIONSHOULDBEUSEDFORASSESSMENTONLY,FORSELFASSESSMENTONLYORFORBOTHOFTHEMANEFFORTFORTHEINTEROPERABILITYHASBEENMADESUPPORTINGTHEIMSQUESTION

26、TESTINTEROPERABILITYSPECIFICATIONIMSQTI,2005OURSYSTEMCANIMPORTANDEXPORTINFORMATIONREGARDINGQUESTIONSANDTESTSTHROUGHTHISWIDELYKNOWNANDADOPTEDXMLBASEDFORMAT211PERMISSIONSAUTHORSRIGHTPROTECTIONISANIMPORTANTMATTERTOOANELEARNINGSYSTEMSHOULDOFFERTHETUTORTHECHOICETOSHAREHISOWNMATERIALORNOTINEWORKBOOK,THEOW

27、NERTHETUTORWHOAUTHOREDTHEQUESTIONANDAPERMISSIONSETAREASSOCIATEDTOEACHITEMTHEOWNERESTABLISHESTHEVALUESFOREACHFIELDOFTHEPERMISSIONSETAPERMISSIONISABOOLEANVALUETHATINDICATESWHETHEROTHERUSERSBEYONDTHEOWNERCANPERFORMTHEACTIONASSOCIATEDTOTHATPERMISSIONFORAMACROAREA,THEVALUEFORTHEFOLLOWINGPERMISSIONSMUSTBE

28、SETREADPERMISSIONTHEPERMISSIONTOREADTHEPROPERTYANDTHECONTENTSOFTHISMACROAREAWRITEPERMISSIONTHEPERMISSIONTOOVERWRITETHEPROPERTYANDMANAGETHISMACROAREAADDASUBITEMTOIT,DELETEITUSEPERMISSIONTHEPERMISSIONTOSELECTAQUESTIONFROMTHISMACROAREAFORATESTFORAQUESTION,THEPERMISSIONSARETHEFOLLOWINGREADPERMISSIONTHEP

29、ERMISSIONTOREADTHEQUESTIONWRITEPERMISSIONTHEPERMISSIONTODELETEANDOVERWRITETHEQUESTIONUSEPERMISSIONTHEPERMISSIONTOSELECTTHISQUESTIONFORATESTPRESENTATIONITSDEFAULTVALUEISTHEVALUEOFUSEPERMISSIONOFTHEMACROAREAWHICHTHISQUESTIONBELONGSTOITSWORTHNOTINGTHATPERMISSIONSAREAGOODWAYTOPROTECTAUTHORSRIGHTANDTOAVO

30、IDTHATTHEMATERIALOWNEDBYATUTORISMODIFIEDORUSEDWITHOUTHIS/HERCONSENSUSOTHERSYSTEMSONLYGIVETHEPOSSIBILITYTOSHAREORNOTALLOFTHETUTORSQUESTIONSAPERMISSIONBASEDSYSTEMGIVESMOREFLEXIBILITYTOTHESYSTEM,ALLOWINGDIFFERENTGRADESOFITEMSHARING212QUESTIONMETADATAEACHQUESTIONINTHEDATABASEHASAMETADATASETASSOCIATEDTOI

31、TSOMEOFTHEPARAMETERSAREDECIDEDBYTHETUTORWHENHE/SHEINSTANTIATETHEMETADATAANDTHEYCANBEUPDATEDLATER,OTHERSAREINFERREDBYTHESYSTEMDURINGITSUSEINFERREDMETADATAAREUPDATEDWHENEVERALEARNERSUBMITSATESTMETADATAAREUSEDINQUESTIONSELECTIONINAWAYTHATWILLBECLEARINTHESEQUELTHEFOLLOWINGISALISTOFTHEMETADATAFIELDSLANGU

32、AGETHEHUMANLANGUAGEINWHICHTHEQUESTIONISEXPRESSEDKEYWORDSASETOFKEYWORDSTHATDESCRIBETHECONTENTOFTHEQUESTIONUSETHEAIMSTHEQUESTIONISFORITCANBESELFASSESSMENT,VALUABLEORBOTHTESTOCCURRENCEANINFERREDFIELD,THATISINCREASEDBYONEWHENEVERTHISQUESTIONISSCHEDULEDFORATESTAVERAGEANSWERTIMEANINFERREDFIELDITCANBEUSEDO

33、NOURSYSTEMBECAUSEITISABLETOTRACKTHETIMESPENTBYTHELEARNERONEACHQUESTIONDIFFICULTYTHISFIELDHASBOTHANINFERREDANDATUTORCHOSENVALUEITSAVALUEBETWEEN0AND1THATEXPRESSESAMEASUREOFTHEDIFFICULTYOFTHEQUESTION,INTENDEDASTHEPROPORTIONOFLEARNERSWHOGETTHEQUESTIONCORRECTTHETUTORCANGUESSTHISVALUEATTHEQUESTIONCREATION

34、TIMEANDCANUPDATEITDURINGTHEQUESTIONSLIFECYCLETHESYSTEMCALCULATESTHEINFERREDVALUEWITHASIMPLEFORMULAQUALITYTHISFIELDISANINFERREDONEITSVALUEISAMEASUREOFHOWWELLTHISQUESTIONDISCRIMINATESBETWEENLEARNERSAGOODQUESTIONSHOULDGIVEFULLMARKTOGOODLEARNERSANDPENALIZEBADONESSTARTINGFROMTHISINFORMATION,AGREATDEALOFC

35、RITERIACANBEADOPTEDASOLUTIONISPROPOSEDINLIRAETAL,1990ITIDENTIFIESAGOODQUESTIONASTHEONEWHICHTHEBETTER20OFLEARNERSANSWERSWELLANDTHEWORSE20OFLEARNERSANSWERSINCORRECTLYWEADOPTEDACOMMONSOLUTIONAPPLIEDINITEMANALYSIS,CALCULATINGQUALITYASTHEPEARSONCORRELATIONBETWEENTHESCOREACHIEVEDONTHEQUESTIONANDTHETOTALSC

36、OREACHIEVEDONTHETESTINWHICHTHEQUESTIONWASSCHEDULEDITSVALUEISGIVENBYTHEFOLLOWINGFORMULAWHERETHEFOLLOWINGRULESAREVALIDO1R1,OXISTHESERIESOFTHERESULTSGOTONTHEQUESTION,OYISTHESERIESOFRESULTSGOTONTHEWHOLETEST译文在线工作手册计算机辅助评估系统GENNAROCOSTAGLIOLA，FILOMENAFERRUCCI，VITTORIOFUCCELLA，ROCCOOLIVETODIPARTIMENTODIMA

37、TEMATICAEINFORMATICA，UNIVERSITDISALERNOVIAPONTEDONMELILLO，I84084FISCIANOSAGCOSTAGLIOLA，FFERRUCCI，VFUCCELLA，ROLIVETOUNISAIT摘要在学术环境中，计算机辅助评价工具CAA混合其它评价方法越来越多地得到采用。在本文中，我们提出了一个CAA应用程序，叫做在线工作手册，由导师创建，可用于评估学习者的知识，以及可以对（学习者）进行基于多项选择，多项回答和真或假问题类型的在线测试。它提供额外教师评价工具和远距离学生自我评价系统，它适用于使用混合教学方法的学术环境中。本文中讲述的该工具的主要

38、特点是提供了一个将理论抛诸脑后的系统的设计大纲。1简介为了达到培训和评估学习者的目标，常常采用混合式学习的电子手段和传统教学方法相结合的方法。学习管理系统（LMS）和计算机辅助评价（CAA）的工具越来越广泛地在各个学校里被采用。在SALERNO的一所大学里，对一些平台和系统进行了测试，以支持混合式学习。即使现在一些好的系统，就像OPENUSSOPENUSS，2005，CHEFCHEF，2005，ANDSAKAISAKAI，2005，没有被测试的工具无法完全满足我们所有的需要我们需要一个先进的评估工具，它可以帮助讲师快速的评估繁重的学习任务，而且可以非常简单的与LMS系统结合使用，这点已经在我们

39、部门开始实施了。在我们的一个部门对一些教师和学生进行常规分析的时候，我们确定了在下一个在有效的环境中的重要需求和需要评估测试内容有高度可重用性的授权内容。举办的课程和教学法的课程。灵活的访问控制系统的测试。对原创的质量跟踪。具体的报告。当一种全面的基于WEB的，叫做在线工作手册的评估系统项目开始时。该系统的评估首先通过（导师）创建，然后学生（学习者）根据自己所学的知识对网上的多个选择题，简答题，和判断题进行测试。在线工作手册允许线上创建测试，进行评估和自我评估，它的计划是包括以上所有目的。评估的问题都放在一个层次数据库里，也就是说，他是树状结构的，如同在一个操作系统的相同的文件夹里的。在这种结

40、构中，文件可以被看做是问题，以及不论目录是否为巨大的领域，这通常作为存储同一主题的问题容器。一个巨大的区域也可能包含其他宏观领域。导师可以按自己的意愿自由组织该树状结构，例如保存在宏观领域里的同样的课程可以根据这些课程所包括的章节来分开放置。每一个项目（一个宏观领域或者一个课题）都有一个所有者，即他们的创作导师。导师可以选择是否要分享他们的项目或不给予每个项目相关的权限。权限包括读，写和使用这些项目。存在数据库中的一些问题有关的其他信息，如难度，质量，语言，关键字，次数等问题，它们被挑选出来作为一个测试，然后估计一个评估时间让学习者回答。这些测试是由一个或多个部分组成的，这种结构有利于从数据可

41、以中选择问题，但是它仍然是用于评估，它可能非常重要，以确定另一个部分是否是更要的一节，然后再确定测试的最终结果。现在有两部分静态和动态的。它们之间的区别是他们的问题的选择方式。对于这两种静态和动态部分，在MACROAREA数据库中是已经确定的。对于静态部分，问题的选择是直接从指定的宏观区域的子树里指定的。对于动态部分，一些动态参数必须先确定，然后当学习者需要被提问时，用随机的方法指定宏观区域中的子树所选择的问题。教学的组成包括课程和班级导师负责一个课程，管理其班级和为该班级的学生选择测试。在测试过程中有两种不同的界面价值观和自我评估测试列表，每个测试列表前面部分用于确定学习者的评价，后面部分仅

42、仅是一个对于学习者自我培训和评估的指南列表。值得一提的是，对评估预先的准备和最大次数的尝试仅仅适用于价值观测试列表。不同的评估策略，当它被挑选出来插入到有价值的或自我评估列表的项目里，它就可以绑定到一个测试中。一个评估策略的选择受其中一些等级参数的影响。参数如下试题中的题目数量，干扰问题的数量和难度（仅适用于多种选择和真假选择），奖励和惩罚因素。一个评估策略是一个外形，像是一个值的参数赋值。某些配置是预先在系统中的，他们被称为预定义的评估策略。其他配置可以由导师定义并保存在导师的储存区。我们将用他们为客户定制评估策略。一个完整的学习者的性能测试结果对其导师和自身非常有用的。当学习者已经参加测试

43、，就会得出总计用了多少时间完成考试，还有关于评估（考试成绩和状态）的信息，每个历史记录都会包含上述日期和时间等数据。详细的回答出每个问题的答案可以被视为良好。本文的其余部分组织如下。在第2部分对系统的主要特点进行了详细介绍。第3节是专门概述了在线手册的架构。在第4部分有一个系统使用的例子。在第5部分，对我们用的一些有趣的系统作了一些比较。最后是最终的结论和对未来工作介绍并以它们来结束本文。2在线工作手册的主要特点在下面的小节中，我们将要阐述在线工作手册系统的主要特点。在线工作手册是给大量用户使用的，因此它的过程具有典型的LMS教学组织方法。导师可以在其中发布测试，学习者可以在其中得到测试。学生

44、只能查看自己团队的，已经发布的测试。导师管理自己的团队，比如可以接受或者拒绝学生的要求和开除团队中的学生。21管理问题为了加快教学和评估过程，使授权的内容可重用性变高，使得CAA在线学习变的更加重要和普遍了。当要求线上的资源能够被轻松修改和重用的时候，就需要重新建立一个系统，这将会付出巨大的成本。因此，使用现有的资源非常重要的，现在的资源很容易得到，然后由导师修改和选择谁需要一个教程或者测试。现在主要有两种途径来提高学习的材料再利用（1）保存在一个在线学习平台或CAA系统里的良好组织的材料。（2）系统和平台间的互用性，可以共享交流材料。我们的系统有一个组织良好的试题库，以便导师进行问题管理，共

45、享和重用在线工作手册有一个层次结构，类似操作系统的目录树。我们的数据库中每个项目都是一个内部节点或者一个叶。一个项目有没有资格存放在宏观领域中取决于它的主题每个宏观区域都是一个容器，像保存特殊的主题一样用于保存一个项目。它可以在宏观区域的分领域进一步的分离，这样可以保持问题属于一个更加特殊的项目。问题的类别允许有多个选择，多个响应和真假。导师可以选择问题仅仅用于评估活动，或者用于自我评估，或者即用于评估活动又用于自我评估。一种可以互用的成果已经取得了成功，它支持IMSQUESTION和共享测试系统IMSQTI，2005我们的系统可以通过众所周知的基于以XML为基础的格式的方法导入和导出问题和测

46、试的的相关信息。211权限原创者的权利保护是一个重要问题。在线学习系统提供导师是否愿意分享自己的资源。在在线工作手册中，拥有者（即作者）和权限设置关系到每个项目。拥有者对各个价值不同项目区域设置不同的权限。权限是一个布尔值，允许是否被其他用户使用该资源。对于宏观区域，以下权限必须设置阅读权限读取本宏观区域性能和内容的权限。修改权限修改和管理这个宏观区域（如添加一个分项目或删除项目）的权限。使用权限从宏观区域里选择一个用于测试问题的权限。对于一个问题，权限如下阅读权限读取问题的权限。修改权限权限删除和覆盖的问题。使用权限选择一个问题进行测试。它的默认值是MACROAREA使用许可的情况下，该问题

47、属于的权限。值得一提的是，权限是一个很好的来保护作者的权利的方法，可以避免作者拥有的资源被修改或者没经过作者的允许时被使用。其他系统只会给出可能共享或者不属于导师的所有问题。因此，可以看出一个权限系统提供了更多的灵活的方法到系统中，允许项目分权限等级被使用。212元数据的问题数据库中的每个问题都有一个与之相关的元数据集。有些参数是由导师决定的，当他或她实例化元数据时，它们就得以被更新，其他信息都是在系统使用期间更新的。无论何时，当一个学生提交了一个测试，元数据就会更新。元数据是是用于问题的选择的，这将在接下来说明。以下是列表中的元数据字段语言即是人类语言。关键字关键字是用来描述问题的内容概况的

48、。用途设置问题的目的。它可以自我评估，评估价值或两者兼有之。测试事件为了测试而作出的对问题的安排。平均应答时间它可以用在我们的系统上，因为它能够记录每一个问题上花费的学习时间。难度这部分既有预测的，也有导师选择的值。这是一个介于0和1之间的价值，这个值表示问题困难度的大小，这个值受学习者答题时的正确率影响。导师可以在创建这个问题的时候猜测这个值的大小，而且可以在这个问题的生命周期期间更新它。最后该系统用简单的公式得出这个准确的值。质量质量是描述一个问题能否正确地评估学生。一个好的问题，应该可以区分出好的学生和差的学生。因此，有很多标准可以被采纳。一个解决方案被提出来了（LIRAETAL，1990）它定义了一个好的问题应该是20学生回答的很好，20的学生回答错误。我们采取一种常见的方案用于解决项目分析，该计算质量的方案就是皮尔森提出的解决相关性问题和为达到测试目的的一种方案。它的值是由下列公式计算上述值必须满足以下条件1R1，X是从问题中得到的一系列结果Y是整个测试过程中得到的一系列结果