[go: up one dir, main page]
More Web Proxy on the site http://driver.im/

KR20220031816A - Automatic setting questions for examination - Google Patents

Automatic setting questions for examination Download PDF

Info

Publication number
KR20220031816A
KR20220031816A KR1020200113035A KR20200113035A KR20220031816A KR 20220031816 A KR20220031816 A KR 20220031816A KR 1020200113035 A KR1020200113035 A KR 1020200113035A KR 20200113035 A KR20200113035 A KR 20200113035A KR 20220031816 A KR20220031816 A KR 20220031816A
Authority
KR
South Korea
Prior art keywords
test
questions
question
taker
classification step
Prior art date
Application number
KR1020200113035A
Other languages
Korean (ko)
Other versions
KR102640034B1 (en
Inventor
이지연
고국원
Original Assignee
선문대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 선문대학교 산학협력단 filed Critical 선문대학교 산학협력단
Priority to KR1020200113035A priority Critical patent/KR102640034B1/en
Publication of KR20220031816A publication Critical patent/KR20220031816A/en
Application granted granted Critical
Publication of KR102640034B1 publication Critical patent/KR102640034B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G06Q50/20—Education
    • G06Q50/205—Education administration or guidance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/30—Information retrieval; Database structures therefor; File system structures therefor of unstructured textual data
    • G06F16/33—Querying
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/30—Information retrieval; Database structures therefor; File system structures therefor of unstructured textual data
    • G06F16/35—Clustering; Classification

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Tourism & Hospitality (AREA)
  • Databases & Information Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Educational Administration (AREA)
  • Educational Technology (AREA)
  • Strategic Management (AREA)
  • Primary Health Care (AREA)
  • General Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Human Resources & Organizations (AREA)
  • Computational Linguistics (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Economics (AREA)
  • Electrically Operated Instructional Devices (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

The present invention relates to an automatic test question setting method which comprises: a step of accessing a server that automatically sets test questions to allow a test taker to take a test; a recording step of scoring and storing the test questions set by a test question setting person and a test result of the test taker; and a classification step of classifying data about the test result prepared in the recording step. By reflecting classified questions to actual test questions or by reflecting them as practice questions to provide an automatic test question setting method, the test question setting person reduces a burden about test question setting and the test taker receives a chance of testing his abilities and making up for deficiencies in units.

Description

시험 문제 자동 출제 방법{Automatic setting questions for examination}Automatic setting questions for examination

본 발명은 시험 문제 자동 출제 방법에 관한 것으로서, 보다 구체적으로는 각 응시자에게 비대면으로 시험 문제를 제공하는 문제은행 방식의 시험 문제 자동 출제 방법에 관한 것이다.The present invention relates to an automatic test question questioning method, and more particularly, to a question bank automatic test question questioning method in which non-face-to-face test questions are provided to each test taker.

최근에는, 컴퓨터, 전자, 통신 기술이 비약적으로 발전함에 따라 컴퓨터 및 통신 기술을 이용한 온라인 평가 시험이 새로운 평가 방법으로 각광받고 있다. 온라인 평가 시험은 공간의 제약을 없애고 결과 처리도 용이하여 점차 그 활용 범위가 확대되고 있다. 또한, 원격 강의 서비스가 널리 활용되면서 원격 강의와 더불어 온라인 평가 시험도 그 적용 영역이 더욱 넓어지고 있다.Recently, as computer, electronic, and communication technologies have rapidly developed, an online evaluation test using computer and communication technologies has been in the spotlight as a new evaluation method. The online evaluation test eliminates space restrictions and facilitates the processing of results, so its application range is gradually expanding. In addition, as the distance lecture service is widely used, the field of application of online evaluation tests along with distance lectures is expanding.

이와 같은 온라인 평가 시험은 문제은행 방식으로 출제될 수 있다. 문제은행은 많은 문제를 한 곳에 모아 데이터베이스를 구축해 놓고, 데이터베이스에서 문제를 출제하기 때문에 자동으로 출제가 가능하다. 또한, 문제은행을 이용한 출제 방식은 신속하게 문제를 출제할 수 있고 난이도 조절이 용이할 뿐 아니라 효율적으로 평가 시험의 출제가 가능하기 때문에 널리 사용되고 있다. 특히, 최근에는 온라인 평가 문제를 이용하여 셀프테스트를 수행하는 경우도 있어, 문제은행 방식의 온라인 평가 문제는 더욱 널리 사용되고 있다.This online evaluation test can be given in the form of a question bank. The question bank collects many questions in one place, builds a database, and asks questions from the database, so questions can be answered automatically. In addition, the question-taking method using the question bank is widely used because it allows quick questions, easy adjustment of difficulty, and efficient assessment of test questions. In particular, recently, there are cases where self-tests are performed using online evaluation problems, and the online evaluation problem of the question bank method is more widely used.

대한민국 등록 특허 제10-0675942호Republic of Korea Patent No. 10-0675942

시험은 응시자의 학습 능력 또는 자격 검증을 위하여 시행되는 제도로서 응시자의 실력을 평가하는 것이 주목적이다. 기존의 시험 문제 출제는 응시자별로 시험 선택지를 다르게 배열하는 수준이였고, 응시자의 수험 능력이 진보할 수 있도록 대안을 제시해주지 못하였다. The main purpose of the test is to evaluate the ability of the test taker as a system implemented to verify the test taker's learning ability or qualifications. Existing test questions were at the level of arranging test options differently for each test taker, and could not suggest alternatives to advance test takers' test ability.

본 발명은 문제은행 데이터 베이스에 기반한 시험 문제와 응시자 개개인에 맞춰 반복된 학습을 제공하고자 한다. 이에 더해 출제자의 시험 출제에 대한 수고를 덜 수 있도록 데이터 베이스를 기반으로 하여 자동 시험 문제 출제 방법을 제시할 수 있다. The present invention intends to provide repeated learning tailored to each test taker and test questions based on the question bank database. In addition, it is possible to suggest an automatic test question preparation method based on the database so that the test takers can reduce their effort.

본 발명은 시험 문제를 자동으로 출제하는 서버에 접속해서 응시자가 상기 시험에 응시하는 단계; 출제자가 출제한 시험 문제와 응시자의 시험 결과를 채점하여 저장하는 기록 단계; 상기 기록 단계에서 마련된 시험 결과에 대한 데이터를 분류하는 분류 단계; 를 포함하고, The present invention includes the steps of: a test taker taking the test by accessing a server that automatically submits test questions; A recording step of scoring and storing the test questions asked by the test taker and the test results of the test taker; a classification step of classifying data on the test results prepared in the recording step; including,

상기 분류된 문제를 실전 시험 문제에 반영하거나 또는 연습 문제로 반영하여 출제하는 시험 문제 자동 출제 방법을 제공할 수 있다.It is possible to provide an automatic test question questioning method in which the classified questions are reflected in actual test questions or reflected as practice questions.

본 발명은 시험 문제를 과목 및 단원별 세분화할 수 있고, 이를 응시자의 수험 역량을 평가하기 위하여 제공할 수 있다. The present invention can subdivide test questions by subject and unit, and provide them to evaluate the test taker's test competency.

또한, 다수의 응시자가 참여한 시험 문제의 정답률에 따라 분류하는 제1 분류 단계와, 시험 출제자 의도의 난이도에 따라 분류하는 제2 분류 단계를 통해 시험 문제를 출제하여 응시자의 학습 능력 평가시 보다 공정한 시험이 이루어질 수 있다. In addition, a more fair test when examining test takers' learning ability by asking test questions through the first classification stage, which classifies the test questions according to the percentage of correct answers, and the second classification stage, which classifies the test questions according to the difficulty of the test taker's intention This can be done.

또한, 연습 시험시, 연습 시험 문항별 풀이 제한 시간이 주어질 수 있고, 응시자 개인은 각 문항별 제한 시간을 초과하지 않고 잔여 시간에 따라 가산점을 제공해줄 수 있으므로, 연습 시험을 응시하는 응시자는 보다 독려된 상태로 연습 시험에 임할 수 있고, 그에 따라 본인의 학습 능력이 향상될 수 있으며, 실제 시험시 정답률을 높일 수 있다. In addition, during the practice test, a time limit for solving each practice test question can be given, and individual test takers can provide additional points according to the remaining time without exceeding the time limit for each question, so candidates taking the practice test are more encouraged You can take the practice test in the state of being tested, and accordingly, your learning ability can be improved, and the percentage of correct answers during the actual test can be increased.

또한, 본 발명은 비대면 상태인 온라인 방식으로 시험을 시행할 수 있기 때문에, 최근 코로나 바이러스의 유행에 대응하여 코로나 바이러스 전염을 예방할 수 있다.In addition, since the present invention can conduct the test in an online manner in a non-face-to-face state, it is possible to prevent corona virus transmission in response to the recent corona virus epidemic.

도1 은 본 발명의 자동 시험 문제 출제 방법을 구현하기 위한 구성도이다.
도2 는 응시자의 문제 풀이 과정에 관한 개략도이다.1 is a block diagram for implementing the automatic test question questioning method of the present invention.
2 is a schematic diagram of a problem solving process of a test taker.

본 발명은 시험 문제 자동 출제 방법에 관한 것으로서 시험 문제를 자동으로 출제하는 서버(100)에 접속해서 응시자가 시험에 응시하는 단계, 출제자가 출제한 시험 문제와 응시자의 시험 결과를 채점하여 저장하는 기록 단계(120), 기록 단계(120)에서 마련된 시험 결과에 대한 데이터를 분류하는 분류 단계(130)를 포함하여 분류된 문제를 실전 시험 문제에 반영하거나 또는 연습 문제로 반영하여 시험 문제가 자동 출제 되는 방법이 마련될 수 있다.The present invention relates to an automatic test question questioning method, the step of accessing the server 100 for automatically taking the test question and the test taker taking the test, and a record of scoring and storing the test question and the test result of the test taker Including the classification step 130 of classifying the data for the test results prepared in the step 120, the recording step 120, the classified questions are reflected in the actual test questions or are reflected as practice questions so that the test questions are automatically presented A method may be provided.

응시 단계에서 응시자는 단말기(300)를 통해 서버(100)에 접속할 수 있다. 서버(100)에는 응시자의 신분을 확인하는 로그인 단계(110)가 마련될 수 있다. 단말기(300)는 예를 들어 스마트폰, 타블렛 또는 PC와 같은 네트워크 접속이 가능한 기계 중 하나일 수 있다. In the staring step, the test taker may access the server 100 through the terminal 300 . The server 100 may be provided with a log-in step 110 for confirming the identity of the test taker. The terminal 300 may be, for example, one of a network-connectable machine such as a smart phone, a tablet, or a PC.

단말기(300)에는 서버(100)에 접속하여 응시자에게 문제를 전달하고 응시자가 제출하는 답안을 서버(100)에 전송하는 어플리케이션(310)이 설치될 수 있다. In the terminal 300 , an application 310 that accesses the server 100 to deliver a question to the test taker and transmits an answer submitted by the test taker to the server 100 may be installed.

문제의 난이도에 따라 문항을 분류할 수 있다. 또한 응시자 개인마다 체감하는 난이도는 각 문항별로 다르게 나뉠 수 있다. 응시자 대다수가 공통적으로 어려움을 느끼는 단원을 분류할 필요가 있다. 출제자에게 응시자 시험 결과 정보를 제공하여 출체자가 이를 참고하여 시험 문제의 난이도를 조절할 수 있다. 또한 응시자 시험 결과 정보를 교수 또는 강사 등의 교직자에게 제공할 수 있고, 정보를 제공받은 교직자가 이를 참고하여 다수의 응시자들이 어려워 하는 단원을 케어 하는 등 커리큘럼을 구성할 때 활용할 수 있다. 따라서 이를 위한 분류 단계(130)는 다음과 같을 수 있다. Questions can be classified according to the difficulty of the problem. Also, the difficulty experienced by each test taker may be divided differently for each question. It is necessary to classify the units in which the majority of test takers have common difficulties. By providing test taker test result information to the test taker, the test taker can adjust the difficulty of the test question by referring to it. In addition, information on test taker test results can be provided to teachers, such as professors or instructors, and can be used when constructing a curriculum, such as taking care of units that many test takers find difficult by referring to the information. Therefore, the classification step 130 for this may be as follows.

분류 단계(130)는 기록 단계(120)에서 응시자의 시험 결과를 분석하여 단원별 정답률에 따라 문항을 분류하는 제1 분류 단계(131), 출제자 의도의 난이도에 따라 분류되는 제2 분류 단계(132)를 포함하고, 제1 분류 단계(131) 또는 제2 분류 단계에서 시험 문제를 추출하거나, 제1 분류 단계(131) 및 제2 분류 단계(132)를 매칭시켜서 시험 문제를 추출할 수 있다.In the classification step 130, the first classification step 131 of analyzing the test result of the test taker in the recording step 120 and classifying the questions according to the correct answer rate for each unit, the second classification step 132 of classifying the questions according to the difficulty of the examinee's intention and extracting the test questions in the first classification step 131 or the second classification step, or extracting the test questions by matching the first classification step 131 and the second classification step 132 .

제1 분류 단계(131)는 응시자가 연습 시험 과정을 반복하여 누적된 데이터를 기반으로 마련될 수 있다. 제2 분류 단계(132)는 출제자의 의도가 기준이 되는 분류 단계로서 출제자의 주관에 따라 분류될 수 있다.The first classification step 131 may be prepared based on data accumulated by the test taker repeating the practice test process. The second classification step 132 is a classification step in which the intention of the questioner is the criterion, and may be classified according to the subjectivity of the questioner.

출제자는 시험 문제를 제1 분류 단계(131)에서 마련된 문항만으로 구성되도록 할 수 있으며, 또는 제2 분류 단계(132)에서 마련된 문항만으로 출제되도록 할 수도 있다. 이에 더해 제1 분류 단계(131) 및 제2 분류 단계(132)에서 일정 문항을 선별하여 추출되도록 할 수도 있다. 출제자는 시험 문제의 난이도 조절을 위해서 제1 분류 단계(131) 및 제2 분류 단계(132)에서 마련되는 문항의 난이도 기준을 마련하여 이를 서버(100)에 반영할 수 있다. 이를 위해, 출제 단계(140)에서 다수의 응시자를 대상으로 응시자 모두에게 공통된 문항을 제공하여 형평성의 문제가 발생하지 않는 제1 출제 단계(141)가 마련될 수 있다. The test taker may have the test questions consist of only the questions prepared in the first classification step 131 or only the questions prepared in the second classification step 132 . In addition, certain items may be selected and extracted in the first classification step 131 and the second classification step 132 . In order to adjust the difficulty level of the test question, the test taker may prepare the difficulty standard of the questions prepared in the first classification step 131 and the second classification step 132 and reflect this on the server 100 . To this end, the first question-taking step 141 in which a problem of equity does not occur by providing common questions to all test takers for a plurality of test takers in the question-taking step 140 may be prepared.

제1 출제 단계(141) 외에 응시자에게 연습 문제 풀이를 할 수 있는 기회를 제공하고 결과를 분석하여 난이도 조절 등에 활용하며 응시자 각 개인에게 연습 시험 문제를 제공하는 제2 출제 단계(142)가 마련될 수 있다.In addition to the first question step 141, a second question step 142 will be prepared in which the test taker is provided with an opportunity to solve the practice questions, the results are analyzed and used to adjust the difficulty, etc., and the practice test questions are provided to each test taker. can

또한 제1 출제 단계(141) 또는 제2 출제 단계(142)에 더해 보다 세분화되는 석차가 마련될 필요가 있을 수 있다. In addition, it may be necessary to provide a more subdivided ranking in addition to the first question-taking step 141 or the second question-taking step 142 .

많은 연습 과정을 통해 답안을 제한 시간 이내에 추론하는 것이 제한 시간을 모두 소비하는 응시자 보다 학업 성취 역량에 있어 보다 우위에 있음을 평가하는 잣대가 될 수 있다. 이를 반영하여 제2 출제 단계(142)에서 각 연습 시험 문항별 배점과 풀이 제한 시간을 두고 제한 시간을 초과하지 않고 잔여 시간에 따라 문항을 풀어서 정답을 맞추는 응시자에게 가산점을 제공하는 제3 출제 단계(143)가 마련될 수 있다. 응시자는 문항별 제한 시간을 모두 소비하지 않고 문제를 해결하는 것이 고득점에 바람직할 수 있다.Inferring answers within the time limit through many practice courses can be a criterion for evaluating that the test takers who spend all of the time have an advantage in academic achievement. Reflecting this, in the second questioning step 142, in the third questioning step ( 143) can be provided. It may be desirable for test takers to solve problems without consuming all of the time limit for each question to achieve a high score.

응시자는 단말기(300)를 통해서 서버(100)에 접속 및 시험에 응시할 수 있다. 단말기(300)는 예를 들어 스마트폰, 타블렛 또는 PC 등의 네트워크를 활용할 수 있는 장치일 수 있다. 단말기(300)에는 서버(100) 접속, 시험 접수, 시험 응시 및 결과 확인을 할 수 있는 어플리케이션(310)이 마련될 수 있다. The test taker can access the server 100 through the terminal 300 and take the test. The terminal 300 may be, for example, a device capable of utilizing a network such as a smart phone, a tablet, or a PC. The terminal 300 may be provided with an application 310 capable of accessing the server 100 , taking a test, taking a test, and confirming the result.

응시자는 단말기(300)로 시험에 응시할 수 있으므로 장소에 구속되지 않고 시험에 응시할 수 있는 장점이 있다. 다만, 장소에 구속되지 않고 시험에 응시할 수 있는 만큼 부정행위에 대한 염려는 더욱 높을 수밖에 없다. 따라서 이를 방지할 수단이 필요할 수 있다. 단말기(300)에는 응시자의 부정행위를 방지 또는 적발할 수 있는 검수 과정으로서 제1 검수 단계(320)가 마련될 수 있다. 제1 검수 단계(320)는 어플리케이션(310)에 내재되는 기능으로 마련될 수 있다.Since the test taker can take the test through the terminal 300 , there is an advantage in that the test taker can take the test without being constrained by a location. However, since you can take the test without being constrained by a location, concerns about cheating are bound to be higher. Therefore, a means to prevent this may be required. In the terminal 300 , a first inspection step 320 may be provided as an inspection process capable of preventing or detecting misconduct of the test taker. The first inspection step 320 may be provided as a function inherent in the application 310 .

제1 검수 단계(320)는 응시기기 예를 들어 스마트폰을 활용할 경우 스마트폰 카메라, 마이크 또는 화면 녹화 등을 활용하여 응시자의 행동을 관찰하고 기록할 수 있다. 다만 PC의 경우 카메라가 설치되어 있지 않은 것이 일반적이므로 본 발명의 시험 방법을 통해서 시험에 응시하기 위해서는 카메라가 구비된 PC로 시험에 응시하는 것이 바람직할 수 있다.The first inspection step 320 may observe and record the behavior of the test taker by using a smartphone camera, microphone, or screen recording, etc., when using a gaze device, for example, a smartphone. However, in the case of a PC, since a camera is generally not installed, it may be preferable to take the test with a PC equipped with a camera in order to take the test through the test method of the present invention.

응시자가 스마트폰을 활용하여 시험에 응시할 경우, 부정행위를 방지하기 위한 검수로서 제1 검수 단계(320)는 카메라를 구동하여 응시자의 행동을 기록할 수 있다. 또한 화면 녹화 및 내재된 마이크로 주변 소음을 녹음할 수 있고 이를 서버(100)에 제공할 수 있다. When a test taker takes an exam using a smart phone, the first inspection step 320 may record the behavior of the test taker by driving a camera as an inspection to prevent cheating. In addition, it is possible to record the screen recording and ambient noise with the built-in microphone and provide it to the server 100 .

단말기(300)는 응시자의 행동들을 기록하여 서버(100)에 전송할 수 있고, 서버(100)는 부정행위의 여부에 관하여 판단할 수 있도록 데이터를 제공할 수 있다. 제1 검수 단계(320)는 카메라로 응시자의 시선방향을 추적할 수 있다. 제1 검수 단계(320)는 응시자가 시험 응시 중 화면 외의 다른 곳을 일정 시간 이상 응시하는지 여부를 판단할 수 있다. 제1 검수 단계(320)는 부정행위에 주의하라는 메세지를 화면에 표시하여 응시자의 주의를 환기시키는 역할을 할 수 있다.The terminal 300 may record the test taker's actions and transmit it to the server 100 , and the server 100 may provide data so that it can be determined whether or not there is an act of cheating. The first inspection step 320 may track the gaze direction of the examinee with a camera. The first inspection step 320 may determine whether the test taker stares at a location other than the screen for a predetermined time or longer while taking the test. The first inspection step 320 may serve to draw the attention of the test taker by displaying a message to beware of cheating on the screen.

카메라를 활용한 검수 외에 제1 검수 단계(320)는 마이크를 활용하여 응시자 주변 소음을 감지할 수 있고 응시자의 음성 또는 타인의 음성을 감지할 수 있다. 제1 검수 단계(320)는 감지된 음성을 서버(100)에 전송할 수 있다. 추후 출제자 또는 감독관은 전송받은 음성 기록을 확인할 수 있으며 이를 부정행위 여부에 대한 판단의 근거로 활용할 수 있다.In addition to the inspection using a camera, the first inspection step 320 may use a microphone to detect ambient noise of the test taker and may detect the test taker's voice or the voice of another person. The first inspection step 320 may transmit the sensed voice to the server 100 . In the future, the test taker or supervisor can check the transmitted voice record and use it as a basis for judging whether or not there is cheating.

서버(100)에는 응시자의 부정행위 여부를 판단할 수 있는 근거로서 제2 검수 단계(200)가 마련될 수 있다. 제2 검수 단계(200)에는 제1 검수 단계(320)로부터 전송받은 화면기록 또는 녹음등의 기록등이 저장될 수 있다. 제2 검수 단계(200)에는 제1 검수 단계(320)에서 실행된 동일한 검수 과정이 진행될 수 있다. 예를 들어 카메라 기록을 검수하여 응시자의 시선이 응시화면 외의 곳을 일정시간 이상 응시하는지 여부, 녹음 기록을 통해 주변 소음에서 응시자가 타인과 대화를 하는지 또는 타인의 음성이 일정 빈도 이상으로 개입되는지 여부를 검수할 수 있다. The server 100 may be provided with a second inspection step 200 as a basis for determining whether the test taker has cheated. In the second inspection step 200 , a screen record or a record such as a recording received from the first inspection step 320 may be stored. The same inspection process performed in the first inspection step 320 may be performed in the second inspection step 200 . For example, whether the test taker's eyes stare at a place other than the gaze screen for more than a certain period of time by examining the camera record, whether the test taker is talking with others in the surrounding noise through the recording record, or whether other people's voices are intervened with more than a certain frequency can be inspected.

제2 검수 단계(200)는 일정 시간 이상 화면 외 응시 또는 일정 빈도 이상의 타인의 목소리 개입이 확인되면 이를 출제자 또는 감독관이 확인할 수 있도록 리스트를 생성할 수 있다. 따라서 출제자 또는 감독관은 이를 확인하여 응시자의 부정행위 여부를 판단하는 근거 자료로 사용할 수 있다. The second inspection step 200 may generate a list so that the examiner or the supervisor can check this when staring outside the screen for a certain period of time or more or the intervention of another person's voice over a certain frequency is confirmed. Therefore, the test taker or the supervisor can check this and use it as the basis for judging whether the test taker is cheating.

상기의 부정행위 방지를 위한 방법 외에 문제 은행을 활용한 부정행위 방지 방법이 마련될 수 있다. 수학 문제의 경우 상수값이 변경된다 하여도 풀이 과정이 동일하기에 답안을 도출하는데 차이가 없을 수 있고 이를 이용하여 응시자의 수학 문제 상수 값을 다르게 구성하여 응시자별 답안이 다르게 마련될 수 있다. 이 외에 객관식 문항의 경우 보기의 순서를 응시자마다 다르게 문항을 구성할 수 있다. In addition to the above method for preventing fraud, a method for preventing cheating using a problem bank may be provided. In the case of a math problem, even if the constant value is changed, there may be no difference in deriving an answer because the solution process is the same. In addition, in the case of multiple-choice questions, the questions can be configured in a different order for each test taker.

자동 시험 문제를 이용하기 위한 첫 단계로서 응시자는 개별 아이디를 사용하여 서버(100)에 접속할 수 있다. 서버(100)에는 문제은행 방식의 기록 단계(120)가 마련될 수 있다. 출제자는 과목별 또는 단원별로 시험 문제를 출제하여 서버(100)에 시험 문제를 데이터 베이스화 할 수 있다. 서버에는 응시자의 수험 기록 및 데이터 베이스를 기반으로 하는 기록 단계가 마련될 수 있다. 응시자는 서버(100)에 접속하여 기록 단계(120)에 저장된 문제를 풀어볼 수 있다.As a first step for using the automatic test questions, the test taker can access the server 100 using an individual ID. The server 100 may be provided with a recording step 120 of a question bank method. The test taker may make a database of test questions on the server 100 by submitting test questions for each subject or unit. The server may be provided with a recording stage based on the test taker's exam records and database. The test taker can access the server 100 and solve the problems stored in the recording step 120 .

서버(100)는 응시자의 풀이 과정 및 답안을 수집할 수 있고 응시자가 틀리는 문항의 단원을 분석할 수 있고, 응시자의 취약한 단원을 분석하여 개별적으로 제공할 수 있다. 또한 이를 기록 단계(120)에 기록하여 응시자 맞춤 문제은행을 구축할 수 있다. The server 100 may collect the candidate's solution process and answer, analyze the unit of the question that the candidate makes wrong, and analyze the candidate's weak unit and provide it individually. In addition, by recording this in the recording step 120, it is possible to build a question bank tailored to the test taker.

100...서버 110...로그인 단계
120...기록 단계 130...분류 단계
131...제1 분류 단계 132...제2 분류 단계
140...출제 단계 141...제1 출제 단계
142...제2 출제 단계 143...제3 출제 단계
200...제2 검수 단계 300...단말기
310...어플리케이션 320...제1 검수 단계100...Server 110...Login Steps
120...recording stage 130...sorting stage
131...first sorting step 132...second sorting step
140...Question Step 141...Question 1 Step
142...Second question step 143...Third question step
200...Second inspection stage 300...Terminal
310...Application 320...First inspection step

Claims (3)

시험 문제를 자동으로 출제하는 서버에 접속해서 응시자가 상기 시험에 응시하는 단계;
출제자가 출제한 시험 문제와 응시자의 시험 결과를 채점하여 저장하는 기록 단계;
상기 기록 단계에서 마련된 시험 결과에 대한 데이터를 분류하는 분류 단계;
를 포함하고,
상기 분류된 문제를 실전 시험 문제에 반영하거나 또는 연습 문제로 반영하여 출제하는 시험 문제 자동 출제 방법.
accessing a server that automatically submits test questions and allowing the test taker to take the test;
A recording step of scoring and storing the test questions asked by the test taker and the test results of the test taker;
a classification step of classifying data on the test results prepared in the recording step;
including,
An automatic test question questioning method that reflects the classified questions in the actual test questions or reflects them as practice questions.
 제1 항에 있어서,
상기 분류 단계는 상기 기록 단계에서 상기 응시자의 시험 결과를 분석하여 단원별 정답률에 따라 문항을 분류하는 제1 분류 단계,
출제자 의도의 난이도에 따라 분류되는 제2 분류 단계를 포함하고,
상기 제1 분류 단계 또는 상기 제2 분류 단계에서 시험 문제를 추출하거나, 제1 분류 단계 및 제2 분류 단계를 매칭시켜서 시험 문제를 추출하여 출제하는 시험 문제 자동 출제 방법.
According to claim 1,
The classification step is a first classification step of analyzing the test result of the test taker in the recording step and classifying the questions according to the percentage of correct answers for each unit;
Including a second classification step classified according to the difficulty of the author's intention,
An automatic test question questioning method for extracting test questions from the first classification step or the second classification step, or extracting test questions by matching the first classification step and the second classification step.
 제1 항에 있어서,
상기 출제 단계는 다수의 응시자를 대상으로 상기 응시자 모두에게 공통된 문항이 제공되는 제1 출제 단계,
상기 응시자 각 개인에게 연습 시험 문제를 제공하는 제2 출제 단계,
상기 제2 출제 단계에서,
각 연습 시험 문항별 배점과 풀이 제한 시간을 두고 제한 시간을 초과하지 않고 잔여 시간에 따라 문항을 풀어서 정답을 맞추는 응시자에게 가산점을 제공하는 제3 출제 단계를 포함하는 시험 문제 자동 출제 방법.According to claim 1,
The question questioning step is a first question questioning step in which common questions are provided to all of the test takers for a plurality of test takers;
a second question-taking step of providing practice test questions to each individual of the test takers;
In the second questioning step,
An automatic test question questioning method comprising a third question-taking step in which points are allocated for each practice test question and the solving time is limited, and additional points are provided to test takers who answer the questions correctly by solving the questions according to the remaining time without exceeding the time limit.
KR1020200113035A 2020-09-04 2020-09-04 Automatic setting questions for examination KR102640034B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020200113035A KR102640034B1 (en) 2020-09-04 2020-09-04 Automatic setting questions for examination

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020200113035A KR102640034B1 (en) 2020-09-04 2020-09-04 Automatic setting questions for examination

Publications (2)

Publication Number Publication Date
KR20220031816A true KR20220031816A (en) 2022-03-14
KR102640034B1 KR102640034B1 (en) 2024-02-23

Family

ID=80824008

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020200113035A KR102640034B1 (en) 2020-09-04 2020-09-04 Automatic setting questions for examination

Country Status (1)

Country Link
KR (1) KR102640034B1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102528508B1 (en) * 2022-08-10 2023-05-04 주식회사 아이스크림미디어 Participation-type educational service provision system with changeable worksheet generation function

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100675942B1 (en) 2006-11-07 2007-02-06 주식회사 유웨이중앙교육 System of presenting and automatically scoring test problem having varied item order and method thereof
KR100978091B1 (en) * 2010-01-07 2010-08-25 주식회사 유비온 Management system for online test assessment and method thereof
KR20180050968A (en) * 2016-11-07 2018-05-16 주식회사 조인트리 on-line test management method
KR20200091537A (en) * 2019-01-22 2020-07-31 (주)캠버스 An online examination service system based on difficulty of questions

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100675942B1 (en) 2006-11-07 2007-02-06 주식회사 유웨이중앙교육 System of presenting and automatically scoring test problem having varied item order and method thereof
KR100978091B1 (en) * 2010-01-07 2010-08-25 주식회사 유비온 Management system for online test assessment and method thereof
KR20180050968A (en) * 2016-11-07 2018-05-16 주식회사 조인트리 on-line test management method
KR20200091537A (en) * 2019-01-22 2020-07-31 (주)캠버스 An online examination service system based on difficulty of questions

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102528508B1 (en) * 2022-08-10 2023-05-04 주식회사 아이스크림미디어 Participation-type educational service provision system with changeable worksheet generation function

Also Published As

Publication number Publication date
KR102640034B1 (en) 2024-02-23

Similar Documents

Publication Publication Date Title
Ellis Perceived teacher confirmation. The development and validation of an instrument and two studies of the relationship to cognitive and affective learning
JP3731868B2 (en) Learning system
KR102239667B1 (en) An online examination service system based on difficulty of questions
語言訓練測驗中心 LTTC-GEPT
Ollennu et al. The Impact of Item Position in Multiple-Choice Test on Student Performance at the Basic Education Certificate Examination (BECE) Level.
Calcagni et al. Clinical judgment development and assessment in clinical nursing education
KR20020023519A (en) Testing and evaluation program of the problem bank type and keeping same testing difficulty to examinee in spite of different test problem for the internet
KR20190066395A (en) The System for Providing and Evaluating an Examination Using Single Output Device for Examination Question and Examinee’s Terminal
Scott et al. Next generation technology-enhanced assessment: Global perspectives on occupational and workplace testing
McKenney et al. Defining success for students with autism spectrum disorder: Social academic behavior in secondary general education settings
KR20220031816A (en) Automatic setting questions for examination
KR20020047072A (en) Modified multiple-choice testing system using computer and the method of same
Machts et al. Categorization of simulated diagnostic situations and the salience of diagnostic information
Pate et al. A descriptive interpretive analysis of students’ oral verbalization during the use of Think–Aloud Pair Problem Solving while troubleshooting
CN113920396B (en) Method, system and equipment for quantitatively evaluating visual cognitive ability of special post personnel
US20240304307A1 (en) Psychological test system and method using open psychological scale expert platform
CN111612659A (en) Automatic scoring system and method for online financial accounting examination
Bostian Placement of International English Language Learners: How Different Is It?.
Docan-Morgan Training law enforcement officers to detect deception: A critique of previous research and framework for the future.
Lovett Practical Psychometrics: A Guide for Test Users
CN114037358A (en) Academic situation analysis method and system based on college interactive classroom activity data
Was et al. Improving Metacognition in a College Classroom: Does Enough Practice Work?.
Ashby-King et al. A Critical Systematic Review of Rubric Research in the Public Speaking Classroom
RU2579725C1 (en) Automated system for evaluating and training professionally important qualities of engineers
KR20220028973A (en) Devices and methods for providing customized information on studying abroad and providing educational content based on big data

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
AMND Amendment
E90F Notification of reason for final refusal
AMND Amendment
E601 Decision to refuse application
E801 Decision on dismissal of amendment
X091 Application refused [patent]
AMND Amendment
X701 Decision to grant (after re-examination)
GRNT Written decision to grant