THE DEVELOPMENT OF QUALITATIVE FACTOR ONTOLOGY FOR A SEMANTIC SEARCH SYSTEM IN DEVELOPING INFORMATION TECHNOLOGY HANDS-ON EXAMINATION PROBLEM
Article Sidebar
Published:
May 4, 2018
Main Article Content
Abstract
This research has two objectives: to develop qualitative factor ontology and to apply the ontology for implementing a semantic search system in developing information technology hands-on examination problems. We used Delphi technique to gather opinions on qualitative factors from experts. The factors were grouped based on the quality criteria of discrimination, difficulty, validity, reliability and objectivity for the development of ontology by using Hozo program and the development of a semantic search system based on the developed ontology base in the form of web application with Ontology Application Management (OAM) Framework. We evaluated the effectiveness of the process with two methods: (1) the suitability evaluation of the ontology’s structure by experts; and (2) the effectiveness evaluation of searching in terms of precision, recall, and F-measure. The results showed that the proposed ontology had the suitability at the good level with the mean of 3.90 and standard deviation of 0.40, and had the excellent level of searching effectiveness with the precision value equal to 1.00, the recall value equal to 1.00, and the F-measure equal to 1.00.
Article Details
Section
บทความวิจัย
References
ทนุวงศ์ จักษุพา และเทพฤทธิ์ บัณฑิตวัฒนาวงศ์. 2558. “ออนโทโลจีปัจจัยคุณภาพสำหรับออกข้อสอบภาคปฏิบัติสาขาไอที.” รายงานสืบเนื่องการประชุมวิชาการระดับชาติ
มหาวิทลัยศรีปทุม ครั้งที่10 วันที่ 22 ธันวาคม 2558: 1581-1589.
ทิวัตถ์ มณีโชติ. 2549. การวัดและประเมินผลการเรียนรู้. กรุงเทพฯ: สำนักพิมพ์ศูนย์ส่งเสริมวิชาการ.
นฤพนธ์ พนาวงศ์ และ จักรกฤษ เสน่ห์. 2554. "การพัฒนาระบบสืบค้นข้อมูลออนโทโลจีท่องเที่ยว." ในรายงานการประชุมวิชาการระดับนานาชาติ กลุ่มวิทยาศาสตร์และเทคโนโลยี นเรศวรวิจัย 2554 ครั้งที่ 7 29 - 30 กรกฎาคม 2554: 195-204.
ศักดิ์ชัย บาลศิริ. 2543. “การเปรียบเทียบผลของการให้ข้อมูลกลับคืนในเทคนิคเดลฟายระ หว่างการให้ข้อมูลกลับคืนด้วยค่าสถิติที่แตกต่างกัน.” วิทยานิพนธ์ปริญญามหาบัณฑิต สาขาครุศาสตร์ คณะครุศาสตร์ จุฬาลงกรณ์มหาวิทยาลัย.
เศรษฐกิจดิจิทัล นโยบายเศรษฐกิจใหม่. 2558. เอกสารวิชาการ. สำนักวิชาการ สำนักงานเลขาธิการสภาผู้แทนราษฎร. ISSN 2287-0520.
สถาบันคุณวุฒิวิชาชีพ. 2558. “ระบบคุณวุฒิ วิชาชีพ.” คู่มือระบบคุณวุฒิวิชาชีพ. สืบค้น เมื่อเมื่อวันที่ 2 ต.ค 2558.
ส.วาสนา ประวาลพฤกษ์. 2558. "การวัดฏิบัติงาน." วารสารวัดผลการศึกษา. สืบค้นเมื่อวันที่ 15 พ.ย 2558.
สมกิจ กิจพูนวงศ์. 2556. "การวิเคราะห์คุณภาพแบบทดสอบด้วยโปรแก4รม JEMS." วารสารวัดผลการศึกษา สำนักทดสอบทางการศึกษาและจิตวิทยา มหาวิทยาลัศรีนครินทรวิโรฒ, ปีที่ 30 ฉบับที่ 87: 20-31.
อิสรา ชื่นตา และคณะ. 2557. “การค้นคืนสารสนเทศการท่องเที่ยวในภาคตะวันออกเฉียงเหนือของประ เทศไทยโดยใช้ออนโทโลยี.” วารสารเทคโนโลยีสารสนเทศ มหาวิทยาลัยเทคโนโลยีพระจอมเกล้า พระนครเหนือ ปีที่10 ฉบับที่2: 7-14.
Brank, J., Grobelnik, M., and Mladenic, D. 2005. “A Survey of Ontology Evaluation Techniques.” Proc. of 8th Int. multi-conf. Information Society: 166-169.
Faatz, A. and Steinmetz, R. 2004. “Precision and Recall for Ontolog Enrichment.” In Proc. of ECAI-2004 Workshop on Ontology Learning and Population, Valencia, Spain, Aug. 2004. Retrieve August 25, 2016.
Foster, K., D'Souza, D., Hamilton, M., and Harland, J. 2015. "Repository of Wisdom: Automated Support for Composing Programming Exams." In Proc. 17th Australasian ComputingEducation Conference (ACE 2015), Sydney, Australia: 129-136.
Gruber, T. 2007. "Ontology." Retrieve August 25, 2016.
Gushchanskiy Dmitry. 2013. “Ontology Structure and Processing in the Test Generation System." 9th International Conference on Computer Science and Information Technologies (CSIT 2013), Yerevan, Armenia, 23 - 27 September, 2013: 203-211.
Jonquet, C., LePendu, P., Falconer, S., Coulet, A., Noy, N.F., Musen, M.A., Shah, N.H. 2011. “NCBO Resource Index: Ontology-based search and mining of biomedical resources.” Web Semantics: Science, Services and Agents on the World Wide Web. 9, 4: 316–324.
Linstone, H. A., and Turoff, M. 1975. "The Delphi method: Techniques and applications." Reading Massachusetts, Addison-Wesley Publishing Company.
Macmillan, T. 1971. "The Delphi Technique." Annual Meeting of the California Junior Colleges Associations Committee on Research and Development, Monterey, May 3-5, California, US.
Madhu, G., Govardhan, A., and Rajinikanth, T.V. 2011. “Intelligent Semantic Web Search Engines: A Brief Survey.” International journal of Web & Semantic Technology (IJWesT). 2, 1: 34-42.
Marut Buranarach and Pornpimon Palingoon. 2007. “Development of an Ontology-based Health Information System using Integrated Ontology Management Framework.” Proceedings of the 2007 International Conference on Semantic Web & Web Services, Las Vegas, Nevada, USA: 85-90.
Marut Buranarat et al. 2015. “OAM: An Ontology Application Management Framework for Simplifying Ontology Based Semantic Web Application Development.” International Journal of Software Engineering and Knowledge Engineering , World Scientific Publishing Company: 115-145.
Nattapong Kaewboonma, Kultida Tuamsuk, and Wanida Kanarkard. 2014. “Ontology development for drought management information.” International Journal of Metadata, Semantics and Ontologies archive. 9, 4: 324-332.
Noy, N.F., McGuinness, DL. 2001. “Ontology Development 101: A Guide to Creating Your First Ontology.” Stanford Medical Informatics Technical Report
SMI-2001-0880.
Pfeiffer, J. 1968. New look at education.Poughkeepsie, NY, Odyssey Press.
Rowe, G., Wright, G. 1999. “The Delphi technique as a forecasting tool: issues and analysis.” International Journal of Forecasting. 15, 4: 351-464.
Sakesan Sivilai, Chakkrit Snae, and Michael Brückner. 2012. “Ontology-Driven Personalized Food and Nutrition Planning System for the Elderly.” The 2nd
International Conference in Business Management and Information Services, Bangkok. 19-20 january 2012. Pitsanlok Thailand.
Skutsch, M., and Hall, D. 1973. "Delphi: Potential uses in education planning." Doctoral dissertation. An international study of curricular organizers for the study of technology, Virginia Polytechnic Institute and State University, Blacksburg, Virginia.
Soldatova, L, and Mizoguchi, R. 2003. "Testing of Understanding by Use of an Ontology Methodology." ISIR, Osaka University, The Joint Workshop of Cognition and Learning Through Media-Communication for Advanced e-Learning, Berlin, Germany: 202-205.
Wachana Tungkwampian, AnuchaiTheerarungchaisri, and MarutBuranarach. 2015. “Development of Thai herbal medicine knowledge base using ontology technique.” The Thai Journal of Pharmaceutical Sciences 39(3), July-September: 102- 109.
มหาวิทลัยศรีปทุม ครั้งที่10 วันที่ 22 ธันวาคม 2558: 1581-1589.
ทิวัตถ์ มณีโชติ. 2549. การวัดและประเมินผลการเรียนรู้. กรุงเทพฯ: สำนักพิมพ์ศูนย์ส่งเสริมวิชาการ.
นฤพนธ์ พนาวงศ์ และ จักรกฤษ เสน่ห์. 2554. "การพัฒนาระบบสืบค้นข้อมูลออนโทโลจีท่องเที่ยว." ในรายงานการประชุมวิชาการระดับนานาชาติ กลุ่มวิทยาศาสตร์และเทคโนโลยี นเรศวรวิจัย 2554 ครั้งที่ 7 29 - 30 กรกฎาคม 2554: 195-204.
ศักดิ์ชัย บาลศิริ. 2543. “การเปรียบเทียบผลของการให้ข้อมูลกลับคืนในเทคนิคเดลฟายระ หว่างการให้ข้อมูลกลับคืนด้วยค่าสถิติที่แตกต่างกัน.” วิทยานิพนธ์ปริญญามหาบัณฑิต สาขาครุศาสตร์ คณะครุศาสตร์ จุฬาลงกรณ์มหาวิทยาลัย.
เศรษฐกิจดิจิทัล นโยบายเศรษฐกิจใหม่. 2558. เอกสารวิชาการ. สำนักวิชาการ สำนักงานเลขาธิการสภาผู้แทนราษฎร. ISSN 2287-0520.
สถาบันคุณวุฒิวิชาชีพ. 2558. “ระบบคุณวุฒิ วิชาชีพ.” คู่มือระบบคุณวุฒิวิชาชีพ. สืบค้น เมื่อเมื่อวันที่ 2 ต.ค 2558.
ส.วาสนา ประวาลพฤกษ์. 2558. "การวัดฏิบัติงาน." วารสารวัดผลการศึกษา. สืบค้นเมื่อวันที่ 15 พ.ย 2558.
สมกิจ กิจพูนวงศ์. 2556. "การวิเคราะห์คุณภาพแบบทดสอบด้วยโปรแก4รม JEMS." วารสารวัดผลการศึกษา สำนักทดสอบทางการศึกษาและจิตวิทยา มหาวิทยาลัศรีนครินทรวิโรฒ, ปีที่ 30 ฉบับที่ 87: 20-31.
อิสรา ชื่นตา และคณะ. 2557. “การค้นคืนสารสนเทศการท่องเที่ยวในภาคตะวันออกเฉียงเหนือของประ เทศไทยโดยใช้ออนโทโลยี.” วารสารเทคโนโลยีสารสนเทศ มหาวิทยาลัยเทคโนโลยีพระจอมเกล้า พระนครเหนือ ปีที่10 ฉบับที่2: 7-14.
Brank, J., Grobelnik, M., and Mladenic, D. 2005. “A Survey of Ontology Evaluation Techniques.” Proc. of 8th Int. multi-conf. Information Society: 166-169.
Faatz, A. and Steinmetz, R. 2004. “Precision and Recall for Ontolog Enrichment.” In Proc. of ECAI-2004 Workshop on Ontology Learning and Population, Valencia, Spain, Aug. 2004. Retrieve August 25, 2016.
Foster, K., D'Souza, D., Hamilton, M., and Harland, J. 2015. "Repository of Wisdom: Automated Support for Composing Programming Exams." In Proc. 17th Australasian ComputingEducation Conference (ACE 2015), Sydney, Australia: 129-136.
Gruber, T. 2007. "Ontology." Retrieve August 25, 2016.
Gushchanskiy Dmitry. 2013. “Ontology Structure and Processing in the Test Generation System." 9th International Conference on Computer Science and Information Technologies (CSIT 2013), Yerevan, Armenia, 23 - 27 September, 2013: 203-211.
Jonquet, C., LePendu, P., Falconer, S., Coulet, A., Noy, N.F., Musen, M.A., Shah, N.H. 2011. “NCBO Resource Index: Ontology-based search and mining of biomedical resources.” Web Semantics: Science, Services and Agents on the World Wide Web. 9, 4: 316–324.
Linstone, H. A., and Turoff, M. 1975. "The Delphi method: Techniques and applications." Reading Massachusetts, Addison-Wesley Publishing Company.
Macmillan, T. 1971. "The Delphi Technique." Annual Meeting of the California Junior Colleges Associations Committee on Research and Development, Monterey, May 3-5, California, US.
Madhu, G., Govardhan, A., and Rajinikanth, T.V. 2011. “Intelligent Semantic Web Search Engines: A Brief Survey.” International journal of Web & Semantic Technology (IJWesT). 2, 1: 34-42.
Marut Buranarach and Pornpimon Palingoon. 2007. “Development of an Ontology-based Health Information System using Integrated Ontology Management Framework.” Proceedings of the 2007 International Conference on Semantic Web & Web Services, Las Vegas, Nevada, USA: 85-90.
Marut Buranarat et al. 2015. “OAM: An Ontology Application Management Framework for Simplifying Ontology Based Semantic Web Application Development.” International Journal of Software Engineering and Knowledge Engineering , World Scientific Publishing Company: 115-145.
Nattapong Kaewboonma, Kultida Tuamsuk, and Wanida Kanarkard. 2014. “Ontology development for drought management information.” International Journal of Metadata, Semantics and Ontologies archive. 9, 4: 324-332.
Noy, N.F., McGuinness, DL. 2001. “Ontology Development 101: A Guide to Creating Your First Ontology.” Stanford Medical Informatics Technical Report
SMI-2001-0880.
Pfeiffer, J. 1968. New look at education.Poughkeepsie, NY, Odyssey Press.
Rowe, G., Wright, G. 1999. “The Delphi technique as a forecasting tool: issues and analysis.” International Journal of Forecasting. 15, 4: 351-464.
Sakesan Sivilai, Chakkrit Snae, and Michael Brückner. 2012. “Ontology-Driven Personalized Food and Nutrition Planning System for the Elderly.” The 2nd
International Conference in Business Management and Information Services, Bangkok. 19-20 january 2012. Pitsanlok Thailand.
Skutsch, M., and Hall, D. 1973. "Delphi: Potential uses in education planning." Doctoral dissertation. An international study of curricular organizers for the study of technology, Virginia Polytechnic Institute and State University, Blacksburg, Virginia.
Soldatova, L, and Mizoguchi, R. 2003. "Testing of Understanding by Use of an Ontology Methodology." ISIR, Osaka University, The Joint Workshop of Cognition and Learning Through Media-Communication for Advanced e-Learning, Berlin, Germany: 202-205.
Wachana Tungkwampian, AnuchaiTheerarungchaisri, and MarutBuranarach. 2015. “Development of Thai herbal medicine knowledge base using ontology technique.” The Thai Journal of Pharmaceutical Sciences 39(3), July-September: 102- 109.