智慧型线上测验

1、1,智慧型線上測驗與評量的發展與行銷策略,國立台南大學 數位學習科技系 黃國禎 2005/3/17,部分資料來源：Forrester Research，資策會ACI整理，2003年11月,2,網路應用環境的發展,資料來源：資策會MIC,政府 教育 學術 商業 家庭,服務 社交/通訊/學習/醫療/保全/金融/傳播/娛樂/商業,基礎網路 （廣播/衛星直播/行動通訊/有線電視/電話網路）,Wireless Cable xDSL Network .,Wireless Cable xDSL Network .,3,Internet 是發展最快的市場,資料來源：Morgan Stanley,4,全球B2C

2、市場穩定成長,資料來源：Forrester Research，資策會ACI整理，2003年11月,2002-2006 CAGR=43%,單位：十億美元,2003年全球B2C市場規模達美元$2,037億元，至2006年則可成長至$5,618億元 2002年至2003年B2C市場規模成長52.4%，2003年至2004年則成長46%，全球 20022006年B2C市場將以43%年複合成長率速度成長,2002-2006全球B2C電子商務市場規模,52.4%,46%,5,全球各區域B2C成長狀況,依據Forrester Research報告顯示，2002至2006年B2C市場規模年成長最高者為 拉丁美

3、洲(93%)，東歐(80%)次之，第三名則為亞太地區(67%) 2003年亞太地區B2C規模佔全球比重的21.4%，預期2006年將提升為35.8%,133.6,203.7,297.4,417.6,516.8,2002-2006年全球各區域B2C交易值成長趨勢,單位：十億美元,6,我國線上購物市場規模,2003年我國網路購物市場規模達220.9億元，較2001年成長40% 2003年我國零售業營業額約32,463億元(預估)，網路購物佔整體零售業比重由2002年的0.5%成長至2003年的0.68%,資料來源：經濟部商業司 電子商務環境整備及B2C推動計畫，資策會ACI，2003年11月,20

4、02-2007 CAGR=41%,40%,60.1%,單位：新台幣億元,7,由實體進入 電子商店 63.1%,Dot-Com 36.9%,有開設 實體商店 35.5%,未開設 實體商店 64.5%,Dot-Com開設實體商店狀況,2003年我國電子商店經營模式分析,Dot-Com公司35.5%跨足實體通路，同時近38%Dot-Com業者有開實體商店的計畫 由實體進入電子商店的業者65%本身即為實體零售業者，其中72%業者電子商店營運成本較自營實體商店低，其營運成本約為實體商店的一半 整體電子商店中43.2%業者僅販賣單一類型商品,資料來源：經濟部商業司 電子商務環境整備及B2C推動計畫，資策會

5、ACI，2003年11月,8,增加消費者信賴是純電子商店開設實體商店之主因,純電子商店開設實體商店之理由,純電子商店開設實體商店主要理由為增加消費者信賴度(29.5%)，其次是提供 取貨據點(19.9%)、提供維修服務據點(11.6%),資料來源：經濟部商業司 電子商務環境整備及B2C推動計畫，資策會ACI，2003年11月,9,為增加銷售通路實體業者紛開設電子商店,由實體進入電子商店之理由,實體業者開設電子商店主要理由為增加銷售通路(33.4%)，其次是延伸實體品牌知名度至網路市場(23.9%)、擴展上網族群市場(20.7%),資料來源：經濟部商業司 電子商務環境整備及B2C推動計畫，資策會

6、ACI，2003年11月,10,電子商店訂價策略,依經營模式區分,近四成七由實體轉電子商店之業者訂價與實體通路相同 Dot-com公司訂價以低於市價一成佔的比例最高(48.9%),資料來源：經濟部商業司 電子商務環境整備及B2C推動計畫，資策會ACI，2003年11月,11,接受付款方式比較分析,便利商店付款佔付款方式的比例最大 線上刷卡部分今年有下降的情況,資料來源：經濟部商業司 電子商務環境整備及B2C推動計畫，資策會ACI，2003年11月,12,電子商店營運狀況,2003上半年營收狀況,成長分佈狀況,近六成八電子商店業者上半年營收較2002年同期成長 2003年上半年營收較2002年同

7、期成長的電子商店中18.3%成長高達1倍 以上,資料來源：經濟部商業司 電子商務環境整備及B2C推動計畫，資策會ACI，2003年11月,13,獲利狀況,28.3%電子商店已達獲利，三成四業者將於1年內達到獲利 實體轉電子商店業者獲利狀況較Dot-Com公司為佳,已獲利 28.3%,尚未損益平衡 53.1%,損益平衡 18.6%,經營模式,已獲利比例,Dot-Com,24.4%,實體轉電子商店,30.6%,依經營模式區分,整體狀況,資料來源：經濟部商業司 電子商務環境整備及B2C推動計畫，資策會ACI，2003年11月,14,整體環境問題,消費者對於安全機制之疑慮、使用者購買習慣及對個人隱私的

8、顧慮是目前阻礙電子商務推動的三大因素 原2002年顯示的頻寬不足及法令不健全等問題，在今年隨著寬頻使用者的增加及相關法令的修正，其比例明顯下降,資料來源：經濟部商業司 電子商務環境整備及B2C推動計畫，資策會ACI，2003年11月,15,經營問題,網站知名度不易拓展是電子商店業者經營最大的困難 依據本次調查，65%電子商店業者認為經營電子商店的困難度及複雜度高於實體商店,資料來源：經濟部商業司 電子商務環境整備及B2C推動計畫，資策會ACI，2003年11月,16,B2C EC之主要營收來源,B2C EC營收主要來自網路連線，內容收費，網路廣告網路零售及其他服務等營收。,E-learning

9、,17,數位學習的發展現況,行政院在九十年NICI(國家資訊通信發展方案)計畫中，將數位學習納入網路社會化的一環。 國科會通過數位學習國家型科技計畫的構想，預計五年內投入四十億元進行此項跨部會計畫 全民數位學習 縮減數位落差 行動學習載具與輔具多功能電子書包 數位學習網路科學園區 前瞻數位學習技術研發 數位學習之學習與認知基礎研究 政策引導與人才培育,18,將在數位學習的研究由應用層次(Alessi, S.M. & Trollip, S.R. 1991)提昇到功能層次 應用層次 實施測驗：利用電腦作為考試媒介 建構測驗：試題的組合及題庫的共享 功能層次 被動(Chou, C. 1996)：記錄

10、學習過程，統計、保存、報告學習評量之結果 主動(Kumar, D.D., Helgeson, S.L. & White, A.L. 1994)：分析學習狀態、引導學生學習、偵查學習迷思，並預防學生犯錯,人工智慧扮演的角色,19,智慧型網路測驗與評量系統,適性化 學習評量結果,符合SCORM 及QTI標準,測驗資料庫,適性化評量系統,學生,學習歷程 資料庫,個人化 學習障礙診斷系統,個人化 學習導引系統,個人化學習 障礙診斷結果,個人化 學習導引,學習及測驗系統,20,網路學習行為分析 藉由模糊專家系統來推論出此學習者的學習狀態，並給予適當的幫助 學習效率 (Efficiency of Lear

11、ning) 學習意願 (Willingness) 耐心度 (Patience) 專心度 (Concentration) 閒置 (Idleness) 理解度 (Comprehension) 聊天 (Chat),21,學習意願分析,學生用心學習的意願 分析依據：有效登入時間/登入時間,模糊推理法則 If willingness is low Then insert INT(T0.5) corresponding willingness frames. If willingness is average Then insert INT(T0.25) corresponding willingness

12、 frames If willingness is high Then keep the current status.,22,耐心度分析,學生瀏覽一個畫面的持續度 分析依據：畫面學習時間/預估學習時間,模糊推理法則 If patience is low Then record this status and warn the student. If patience is average Then keep the current status. If patience is high Then keep the current status.,23,專心度分析,學生集中精神於瀏覽教材的程度

13、 分析依據：回應時間,模糊推理法則 If concentration is low Then insert a corresponding concentration frame. If concentration is high Then keep the current status. If concentration is noresponse Then keep the current status.,24,聊天狀態分析,學生利用線上討論區來閒聊而不是討論課程 分析依據：學習相關比率,模糊推理法則 If chat is high Then record this status and

14、warn the student. If chat is average Then keep the current status. If chat is low Then keep the current status,25,Gwo-Jen Hwang (1998), “A tutoring strategy supporting system for distance learning on computer networks”, IEEE Transactions on Education, Vol. 41, No. 4, pp. 343. (SCI & EI),26,多專家線上聯合出題

15、機制 重複性分析 一致性分析 完整性分析 多目標最佳化配題機制,測驗與評量系統,27,系統實作,28,重複性檢查結果,系統實作,29,多目標最佳化配題機制,從大量試題中，選取符合出題方向和條件的試題，進行配置，組成最佳鑑別度試卷 指定測驗時間範圍的試題配置問題模型(Dedicated Range of Assessment Time Problem-DRAT) 符合期望測驗時間最高界限和最低界限的多目標配題機制。 固定題數的試題配置問題模型(Fixed Number of Test Items Problem FNTI) 符合固定試卷試題數量的多目標配題機制。,30,Fuzzy Art and

16、 Dynamic Programming,Gwo-Jen Hwang (2003), “A Test Sheet Generating Algorithm for Multiple Assessment Requirements”, IEEE Transactions on Education, Vol. 46, No. 3, pp. 329-337. (SCI and EI),(1) Fuzzy Art: Classify test items into groups,(2) Dynamic Programming: Find optimal test item composition,31

17、,Heuristic Algorithms,FTF (Feasible Time First) Algorithm Find a solution to meet range of assessment time Replace test items to find feasible solutions and to maximize average discrimination degree FNTF (Feasible Number of Test Item First) Algorithm Find a solution to meet the number of test items

18、Replace test items to find feasible solutions and to maximize average discrimination degree,Gwo-Jen Hwang, Tsung-Liang Lin, Bertrand M.T. Lin (2004), “An Effective Approach for Test-Sheet Composition from Large-Scale Item Banks”, accepted by Computers & Education. (SSCI, SCI, EI),32,Genetic Algorith

19、m(基因演算法),源自於John Holland在1975 年出版的著作Adaptation in Nature and Artificial Systems 仿效自然界生物進化過程 透過基因的選擇(selection)交換(crossover)及突變(mutation)產生更好的下一代 選擇(selection)過程 較高合適值(fitness value)就有較大機會獲得保留 較低合適值的解答，可能會遭到淘汰 較不易陷入local optimal,33,CLFG實驗結果及分析,l = 30,34,CLFG與最佳解的實驗數據圖表,l = 30,Gwo-Jen Hwang et al. (20

20、04), “On the Development of a Computer-Assisted Testing System with Genetic Test Sheet-Generating Approach”, accepted by IEEE Transactions on Systems, Man, and Cybernetics: Part C.,35,學習診斷與導引機制,概念影響關係圖的數學課程範例,36,Conceptual effect table (CET)概念影響關係表,e.g. C3 C4,37,Test item relationship table (TIRT)試題概念關係表,O: Not relevant 1: Very strongly relevant,38,Student answer sheet table (AST)學生答題狀況表,O: The student has correctly answered the test item 1: The student failed to correctly answer the test item,39,建立補救學習路徑,C1,C3,C6,C1,C3,C7,C1,C4,C8,C10,C2,C4,C8,C10,0.16,0.6,0.66,0.16,0.6,1,0.16,0.16,0,0,0,0.1