WO2019187601A1 - 薬剤判定装置、及び境界凹部の検出方法 - Google Patents
薬剤判定装置、及び境界凹部の検出方法 Download PDFInfo
- Publication number
- WO2019187601A1 WO2019187601A1 PCT/JP2019/002942 JP2019002942W WO2019187601A1 WO 2019187601 A1 WO2019187601 A1 WO 2019187601A1 JP 2019002942 W JP2019002942 W JP 2019002942W WO 2019187601 A1 WO2019187601 A1 WO 2019187601A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- image
- unit
- packaging bag
- medicine
- photographing
- Prior art date
Links
- 239000003814 drug Substances 0.000 title claims abstract description 259
- 238000000034 method Methods 0.000 title claims abstract description 115
- 229940079593 drug Drugs 0.000 title claims description 106
- 238000004806 packaging method and process Methods 0.000 claims abstract description 286
- 238000001514 detection method Methods 0.000 claims abstract description 85
- 238000003384 imaging method Methods 0.000 claims abstract description 45
- 230000008569 process Effects 0.000 claims description 55
- 238000012545 processing Methods 0.000 claims description 38
- 239000002131 composite material Substances 0.000 claims description 26
- 230000008602 contraction Effects 0.000 claims description 19
- 230000001678 irradiating effect Effects 0.000 claims description 16
- 230000035699 permeability Effects 0.000 claims 1
- 238000011144 upstream manufacturing Methods 0.000 description 28
- 238000000605 extraction Methods 0.000 description 22
- 238000010586 diagram Methods 0.000 description 16
- 239000003795 chemical substances by application Substances 0.000 description 13
- 238000007689 inspection Methods 0.000 description 13
- 238000007781 pre-processing Methods 0.000 description 13
- 239000000126 substance Substances 0.000 description 9
- 238000000149 argon plasma sintering Methods 0.000 description 5
- 238000005286 illumination Methods 0.000 description 5
- 230000005540 biological transmission Effects 0.000 description 4
- 238000005401 electroluminescence Methods 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 230000010365 information processing Effects 0.000 description 3
- 239000004698 Polyethylene Substances 0.000 description 2
- 230000015572 biosynthetic process Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 239000011521 glass Substances 0.000 description 2
- 230000007246 mechanism Effects 0.000 description 2
- -1 polyethylene Polymers 0.000 description 2
- 229920000573 polyethylene Polymers 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 238000012546 transfer Methods 0.000 description 2
- 229920000298 Cellophane Polymers 0.000 description 1
- 239000002775 capsule Substances 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 239000000470 constituent Substances 0.000 description 1
- 238000007599 discharging Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 238000007429 general method Methods 0.000 description 1
- 229910052736 halogen Inorganic materials 0.000 description 1
- 150000002367 halogens Chemical class 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- QSHDDOUJBYECFT-UHFFFAOYSA-N mercury Chemical compound [Hg] QSHDDOUJBYECFT-UHFFFAOYSA-N 0.000 description 1
- 229910052753 mercury Inorganic materials 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 238000003825 pressing Methods 0.000 description 1
- 238000007789 sealing Methods 0.000 description 1
- 230000011218 segmentation Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000002194 synthesizing effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0004—Industrial image inspection
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61J—CONTAINERS SPECIALLY ADAPTED FOR MEDICAL OR PHARMACEUTICAL PURPOSES; DEVICES OR METHODS SPECIALLY ADAPTED FOR BRINGING PHARMACEUTICAL PRODUCTS INTO PARTICULAR PHYSICAL OR ADMINISTERING FORMS; DEVICES FOR ADMINISTERING FOOD OR MEDICINES ORALLY; BABY COMFORTERS; DEVICES FOR RECEIVING SPITTLE
- A61J7/00—Devices for administering medicines orally, e.g. spoons; Pill counting devices; Arrangements for time indication or reminder for taking medicine
- A61J7/0076—Medicament distribution means
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B65—CONVEYING; PACKING; STORING; HANDLING THIN OR FILAMENTARY MATERIAL
- B65B—MACHINES, APPARATUS OR DEVICES FOR, OR METHODS OF, PACKAGING ARTICLES OR MATERIALS; UNPACKING
- B65B57/00—Automatic control, checking, warning, or safety devices
- B65B57/10—Automatic control, checking, warning, or safety devices responsive to absence, presence, abnormal feed, or misplacement of articles or materials to be packaged
- B65B57/14—Automatic control, checking, warning, or safety devices responsive to absence, presence, abnormal feed, or misplacement of articles or materials to be packaged and operating to control, or stop, the feed of articles or material to be packaged
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/84—Systems specially adapted for particular applications
- G01N21/88—Investigating the presence of flaws or contamination
- G01N21/95—Investigating the presence of flaws or contamination characterised by the material or shape of the object to be examined
- G01N21/9508—Capsules; Tablets
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/04—Manufacturing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/50—Depth or shape recovery
- G06T7/55—Depth or shape recovery from multiple images
- G06T7/586—Depth or shape recovery from multiple images from multiple light sources, e.g. photometric stereo
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/97—Determining parameters from multiple pictures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/10—Image acquisition
- G06V10/12—Details of acquisition arrangements; Constructional details thereof
- G06V10/14—Optical characteristics of the device performing the acquisition or on the illumination arrangements
- G06V10/141—Control of illumination
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B65—CONVEYING; PACKING; STORING; HANDLING THIN OR FILAMENTARY MATERIAL
- B65B—MACHINES, APPARATUS OR DEVICES FOR, OR METHODS OF, PACKAGING ARTICLES OR MATERIALS; UNPACKING
- B65B9/00—Enclosing successive articles, or quantities of material, e.g. liquids or semiliquids, in flat, folded, or tubular webs of flexible sheet material; Subdividing filled flexible tubes to form packages
- B65B9/06—Enclosing successive articles, or quantities of material, in a longitudinally-folded web, or in a web folded into a tube about the articles or quantities of material placed upon it
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B65—CONVEYING; PACKING; STORING; HANDLING THIN OR FILAMENTARY MATERIAL
- B65B—MACHINES, APPARATUS OR DEVICES FOR, OR METHODS OF, PACKAGING ARTICLES OR MATERIALS; UNPACKING
- B65B9/00—Enclosing successive articles, or quantities of material, e.g. liquids or semiliquids, in flat, folded, or tubular webs of flexible sheet material; Subdividing filled flexible tubes to form packages
- B65B9/06—Enclosing successive articles, or quantities of material, in a longitudinally-folded web, or in a web folded into a tube about the articles or quantities of material placed upon it
- B65B9/08—Enclosing successive articles, or quantities of material, in a longitudinally-folded web, or in a web folded into a tube about the articles or quantities of material placed upon it in a web folded and sealed transversely to form pockets which are subsequently filled and then closed by sealing
- B65B9/087—Enclosing successive articles, or quantities of material, in a longitudinally-folded web, or in a web folded into a tube about the articles or quantities of material placed upon it in a web folded and sealed transversely to form pockets which are subsequently filled and then closed by sealing the web advancing continuously
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10028—Range image; Depth image; 3D point clouds
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10141—Special mode during image acquisition
- G06T2207/10152—Varying illumination
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H20/00—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance
- G16H20/10—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance relating to drugs or medications, e.g. for ensuring correct administration to patients
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H20/00—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance
- G16H20/10—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance relating to drugs or medications, e.g. for ensuring correct administration to patients
- G16H20/13—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance relating to drugs or medications, e.g. for ensuring correct administration to patients delivered from dispensers
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H40/00—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
- G16H40/20—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the management or administration of healthcare resources or facilities, e.g. managing hospital staff or surgery rooms
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02P—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
- Y02P90/00—Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
- Y02P90/30—Computing systems specially adapted for manufacturing
Definitions
- the present invention relates to a drug determination device and a method for detecting a boundary recess, and in particular, a drug for detecting a boundary recess formed at a boundary position between packaging bags in a belt-like packaging bag continuous body in which a plurality of packaging bags for wrapping drugs are arranged.
- the present invention relates to a determination device and a method for detecting a boundary recess.
- a machine or the like automatically determines (inspects) whether a medicine is correctly packaged in a packaging bag such as a wrapping paper as instructed by a prescription.
- a medicine determination device for example, an image of a medicine wrapped in a packaging bag is taken within the device. Then, it is determined whether the type and number of medicines shown in the photographed image match the type and number of medicines indicated on the prescription.
- a packaging bag continuous body By the way, there may be a case where a plurality of packaging bags each containing a medicine are connected in a strip shape to form a continuous body (hereinafter referred to as a packaging bag continuous body).
- a wrapping bag continuum is introduced into the apparatus, and the determination as to the suitability of the medicine is made for each wrapping bag for the medicine wrapped in each packaging bag of the wrapping bag continuum.
- the end position of the packaging bag it is necessary to demarcate the area for one packaging bag from the captured image, and for that purpose, the end position of the packaging bag, in other words, It is important to detect the boundary position between the packaging bags in the continuous packaging bag.
- a boundary recess such as a cut line is usually formed at a boundary position between the packaging bags.
- the boundary recess is relatively small and easily crushed, the boundary recess in the image is not clear, and it is difficult to improve the detection accuracy and accuracy.
- a method for identifying the end position of the packaging bag without detecting the boundary recess itself has been developed (see, for example, Patent Documents 1 to 4).
- Patent Document 1 transfers a wrapping paper (corresponding to a wrapping bag continuous body) that is a series of wrappings (corresponding to a packaging bag) formed by heat-sealing, and advances the shooting range on the transfer path.
- the package is photographed using a lighting device and a photographing device arranged opposite to each other on both sides, and the number of agents in the package is automatically confirmed by extracting the agent image area from the photographed image and counting the agent images therein.
- the present invention relates to a tablet counting inspection device (corresponding to a medicine determination device).
- the illumination device includes a scattering surface illumination unit, and the surface of the captured image data taken without placing anything in the imaging range.
- a background image forming unit that generates a distinguishable background image from the illumination unit is provided, and the agent image region is defined based on the perspective image of the background image forming unit that appears in the heat seal unit of the package.
- the agent image region is defined based on the perspective image of the background image forming unit that appears in the heat seal unit of the package.
- Patent Document 2 is a drug inspection system (corresponding to a drug determination device) that performs drug inspection for each sachet (corresponding to a packaging bag) of a continuous sachet (corresponding to a packaging bag continuum). It is about. According to the technique described in Patent Document 2 (particularly, see Claim 7 and Paragraphs 0043 and 0044 of Patent Document 2), a boundary recess such as a cut line does not appear clearly in a photographed image. )) Is selected from the captured images.
- the default value of the length of the sachet to be inspected is acquired, and based on the captured image of the continuous sachet bag, the sachet to be inspected and its upstream side and downstream side Boundary candidates assumed as boundaries between adjacent sachets are derived as upstream boundary candidates and downstream boundary candidates, and position information about the upstream boundary candidates and downstream boundary candidates is acquired. Then, for each of the upstream boundary candidate and the downstream boundary candidate combination candidate, the calculation based on the acquired position information is performed, and the candidate value of the length of the sachet to be inspected is derived and derived.
- candidate values select a value that approximates the default value of the length of the sachet to be inspected, and select the combination of the upstream boundary candidate and the downstream boundary candidate that constitute the selected candidate value. It is defined as a boundary position located upstream and downstream of a certain sachet.
- each packaging bag (corresponding to a packaging bag) in the packaging bag continuous body extends in the width direction of the packaging bag continuous body. It is sealed at the vertical seal part and the horizontal seal part extending in the longitudinal direction of the continuous sachet, and the boundary between the vertical seal parts of adjacent sachets is formed in the continuous sachet
- the present invention relates to a drug inspection device (corresponding to a drug determination device) that performs drug inspection for each sachet.
- the boundary position from which the position of the boundary in the continuous packaging bag can be derived.
- the boundary position deriving unit detects a contour line (vertical edge) extending in the vertical direction within the photographed image area of the packaging bag, selects a vertical edge longer than a predetermined length, and selects a plurality of selected Among the vertical edges, the area where the vertical edges are within a predetermined interval set based on the width of the vertical seal is recognized as an edge area, and the center of the recognized edge area is defined between the vertical seal parts. Recognize as a boundary position.
- Patent Documents 1 to 4 detect the boundary recess itself such as a cut line.
- the technique described in Patent Document 1 uses the property that the scattering property at the time of light transmission in the wrapping paper is different between the heat-sealed part and the non-sealed part, and the background image on the illumination side is applied to the wrapping edge part.
- the wrapping edge is detected and specified by only floating. Therefore, the technique described in Patent Document 1 can be applied only to a wrapping paper having different light scattering properties between the heat-sealed portion and the non-sealed portion, and a wrapping paper having no such property ( It is difficult to apply to a continuous packaging bag.
- the technique described in Patent Document 2 derives a candidate value for the length of a sachet to be inspected for each combination candidate of an upstream boundary candidate and a downstream boundary candidate, and Of these, the one that approximates the default length of the sachet to be inspected is selected, and the combination of the upstream boundary candidate and the downstream boundary candidate that constitute the selected candidate value is the sachet to be inspected.
- the boundary positions are located upstream and downstream of the bag. That is, in order to use the technique described in Patent Document 2, a predetermined value of the length of the sachet to be inspected is necessary, and cannot be used when the predetermined value is unknown.
- the length of the sachet to be inspected among the combination candidates of the upstream boundary candidate and the downstream boundary candidate There may be a plurality of derived values that approximate the default value. In such a case, it is difficult to determine the boundary position from among the boundary candidates.
- the present invention has been made in view of the above circumstances, and a drug determination device capable of appropriately detecting the position of a boundary recess provided at a boundary between packaging bags in a continuous packaging bag, and the boundary recess It is an object of the present invention to provide a detection method of
- the drug determination device of the present invention is a detection unit that detects a boundary recess formed at a boundary position between packaging bags in a strip-shaped packaging bag continuous body in which a plurality of packaging bags wrapping drugs are arranged. And an image photographing unit for photographing the image of the surface of the photographing target part a plurality of times while changing the photographing conditions in a state where light is irradiated toward the surface of the photographing target part where at least the boundary concave portion is located in the continuous packaging bag The detection unit detects a boundary concave portion in a portion to be imaged based on a plurality of images taken by the image shooting unit while changing the shooting conditions.
- the image capturing unit when the image capturing unit captures an image, the image capturing unit includes a light irradiating unit that irradiates light toward the surface of the imaging target portion, and the light irradiating units emit light in opposite directions in the longitudinal direction of the packaging bag continuous body.
- a first light emitting unit and a second light emitting unit that emit light, and irradiates light from an oblique direction toward the surface of the portion to be imaged, and the image photographing unit is located between the first light emitting unit and the second light emitting unit in the longitudinal direction.
- the light irradiating unit changes the light emitting unit used for irradiating light among the first light emitting unit and the second light emitting unit when changing the photographing conditions. It is preferable.
- “irradiate light from the oblique direction toward the surface of the object to be imaged” means an oblique direction that is inclined with respect to the front direction when the image capturing direction of the object to be imaged is the front direction. In other words, the light is irradiated toward the surface of the portion to be imaged.
- the image photographing unit photographs the first image of the surface of the photographing target portion while the light irradiating unit irradiates light toward the surface of the photographing target portion using the first light emitting unit, and While the irradiating unit irradiates light toward the surface of the photographing target portion using the second light emitting unit, the second image of the surface of the photographing target portion is photographed, and the detecting unit includes the first image and the second image. It is preferable to detect the boundary concave portion in the portion to be imaged using.
- the light emission of the second light emitting unit stops and the light irradiation unit uses the second light emitting unit. It is preferable that the light emission of the first light emitting unit stops while irradiating light toward the surface of the photographing target portion.
- the detection unit is further away from the second light emitting unit in the second image and in the portion of the first image in which the region on the side farther from the first light emitting unit is reflected. It is preferable to create a composite image by synthesizing the portion in which the region on the side of the image is reflected, and detect a boundary recess in the photographing target portion based on the composite image.
- the image photographing unit includes a first camera and a second camera that photograph the photographing target portion from opposite directions in the thickness direction of the packaging bag continuous body, and the first camera is one of the photographing target portions in the thickness direction.
- the second camera captures an image of the surface
- the second camera captures an image of the other surface of the object to be photographed that is located on the opposite side of the one surface in the thickness direction
- the detection unit includes the image captured by the first camera. It is preferable to detect the boundary concave portion in the portion to be photographed based on the image photographed by the second camera.
- the detection unit identifies a boundary recess candidate that appears in an image captured by the first camera, and identifies a boundary recess candidate that appears in an image captured by the second camera, and then the first camera captures the image. It is preferable to detect a boundary recess candidate that appears in common in both the captured image and the image captured by the second camera as a boundary recess in the capturing target portion.
- the medicine is packaged in the packaging bag in the continuous packaging bag
- the image photographing unit includes an end portion of the packaging bag in which the medicine is packaged, and a photographing target portion where at least a boundary concave portion adjacent to the end portion is located. It is preferable to shoot the image of the surface a plurality of times under different shooting conditions.
- the packaging bag is light transmissive
- the image photographing unit has at least a portion covering the medicine and an end portion of the packaging bag in which the medicine is packaged, and a boundary recess adjacent to the end portion.
- the image of the surface of the object to be imaged is imaged a plurality of times while changing the imaging conditions, and a removal process for removing the image of the drug in the image is performed for each of the plurality of images captured by changing the imaging conditions. It is preferable to have a removal process execution unit to be executed.
- the removal processing execution unit removes the image after contraction / expansion obtained by contracting and expanding the pixel group constituting the image captured by the image capturing unit from at least one image before contraction / expansion. Thus, it is preferable to execute a removal process for removing the image of the medicine in the image.
- boundary recess is preferably a cut line constituted by a broken line-shaped linear groove formed from one end of the packaging bag continuous body to the other end in the widthwise direction of the packaging bag continuous body.
- the boundary recess detection method of the present invention includes a boundary recess formed at a boundary position between packaging bags in a belt-like packaging bag continuous body in which a plurality of packaging bags for wrapping medicine are arranged.
- a method for detecting a boundary concave portion for detecting an image of a surface of an imaging target portion in a state where at least a surface of the imaging target portion where the boundary concave portion is located is irradiated in a packaging bag continuum. And a step of detecting a boundary concave portion in a portion to be imaged based on a plurality of images shot under different shooting conditions.
- the medicine determination device and the boundary recess detection method of the present invention it is possible to appropriately detect the position of the boundary recess provided at the boundary between the packaging bags in the packaging bag continuous body. As a result, when determining the suitability of the medicine wrapped in the packaging bag, it is possible to accurately determine the imaging range of the packaging bag continuum accurately.
- medical agent determination apparatus which concerns on one Embodiment of this invention has (the 2). It is a block diagram which shows the structure of the processing apparatus which the chemical
- drug means a solid drug, and specifically corresponds to tablets and capsules.
- FIG. 1 is a diagram showing a flow of a medicine prescription work.
- prescription condition input device 50 the pharmacist inputs prescription conditions described in the prescription into a computer (hereinafter, prescription condition input device 50).
- prescription conditions are conditions set in order to prescribe a medicine to a patient.
- the contents of the prescription conditions to be input are, for example, the patient's name, age, the type of medicine to be prescribed, the prescription quantity for each type, and the like.
- prescription quantities for one dose is the same amount.
- prescription conditions are not limited to this, and a medicine for a single dose may be prescribed.
- the kind and prescription quantity of the medicine for one dose may differ each time.
- the pharmacist picks the types of medicines according to the prescription conditions from the medicine shelf 55 by the quantity corresponding to the prescription conditions based on the prescription conditions.
- the picking operation is not limited to the manual operation by the pharmacist but may be automatically performed by a known automatic picking device based on the prescription conditions input to the prescription condition input device 50.
- any drug picked in this embodiment has identification information formed on the surface thereof.
- “Identification information” refers to letters, numbers, symbols, and the like for identifying the type of drug (drug type), and is formed by stamping or printing. In the present embodiment, it is assumed that identification information is formed on the surface of the medicine by stamping (recess processing). However, the medicine to be picked is not limited to the above embodiment, and the medicine to be picked may not include identification information, and the identification information may be printed. A formed drug may be included.
- the packaging bag 1 is a known sachet and has light transmission properties. Examples of the material for the packaging bag 1 include a laminated film of cellophane and polyethylene, a polyethylene film, and the like.
- the plurality of packaging bags 1 in which the medicines are packaged constitute a belt-shaped packaging bag continuous body 3 that is continuously arranged as shown in FIG. 2 at the end of the automatic packaging operation.
- the patient separates one bag of the packaging bag 1 from the continuous packaging bag 3 and takes the medicine wrapped in the separated packaging bag 1.
- FIG. 2 is a view showing the continuous packaging bag 3.
- the packaging bag continuum 3 will be described.
- the picked medicine is packaged in the packaging bag 1 (excluding an empty bag 1A described later) in the packaging bag continuum 3.
- a cut line 3 y serving as a boundary recess is formed at the boundary position between the packaging bags 3 in the packaging bag continuous body 3.
- the cut line 3y is configured by a broken line-like straight groove, and is formed from one end of the packaging bag continuous body 3 to the other end in the lateral width direction of the packaging bag continuous body 3.
- the boundary concave portion may be formed with a cut in a triangular shape, a rectangular shape, a semi-elliptical shape, or the like formed at the lateral width direction end of the packaging bag continuous body 3.
- the packaging bag 1 located at one end of the packaging bag continuous body 3 is an empty bag 1A as shown in FIG.
- the empty bag 1 ⁇ / b> A is common to the packaging bag 1 in a state where the medicine is wrapped, except that the medicine is not contained therein.
- the empty bag 1A it may be provided in places other than the edge of the packaging bag continuous body 3, and the empty bag 1A does not need to be contained in the packaging bag continuous body 3.
- the medicine determination device 10 is a content in which the kind and number of medicines (strictly, the number of each kind) wrapped in each packaging bag 1 in the packaging bag continuous body 3 are instructed by a prescription. It is determined whether it is true.
- pre-packaged drugs that have been determined to be correct (according to the contents of the prescription) by the dispensing inspection work are performed for the patient (prescription destination).
- the pharmacist removes the empty bag 1A located at one end of the packaging bag continuum 3 and hands the remaining packaging bag continuum 3 to the patient.
- the medicine determination device 10 is used for dispensing inspection, and whether or not the kind and number of the medicines (strictly, the number of each kind) wrapped in the packaging bag 1 by the automatic packaging operation is a regular kind and number. Determine.
- the regular type and number are the number of drugs specified by prescription (in other words, input as prescription conditions) and the number of each type. It is the number by type.
- the medicine wrapped (packed) in each packaging bag 1 excluding the empty bag 1A in the packaging bag continuous body 3 corresponds to the medicine to be determined.
- the medicine determination apparatus 10 includes an apparatus main body 11 having a function of taking an image of a medicine to be determined (specifically, a medicine wrapped in each packaging bag 1), and the apparatus main body 11. And a processing device 12 having a function of performing dispensing inspection based on the photographed image.
- the apparatus main body 11 includes a housing 13 illustrated in FIG. 1, and includes a transport unit 14, an arrangement unit 15, an image capturing unit 16, and a light irradiation unit 17 illustrated in FIG. 3 in the housing 13.
- FIG. 3 is a schematic diagram showing the internal structure of the apparatus main body 11.
- the casing 13 of the apparatus main body 11 includes an introduction portion 13a for introducing the packaging bag continuous body 3 into the apparatus main body 11, and the packaging bag continuous body 3 introduced into the apparatus main body 11. 11 and a discharge unit (not shown) for discharging outside.
- the conveyance unit 14 includes a conveyance path 18 formed inside the apparatus main body 11, and conveys the packaging bag continuous body 3 along the conveyance path 18.
- the packaging bag continuous body 3 introduced into the apparatus main body 11 from the introduction part 13a moves toward the downstream side of the conveyance path 18 by the conveyance operation of the conveyance part 14, and eventually passes through the discharge part and passes through the discharge part. Is discharged outside.
- the “downstream side” means a side closer to the discharge part in the transport direction
- the upstream side means a side opposite to the downstream side, that is, a side closer to the introduction part 13a in the transport direction.
- the conveyance path 18 is a horizontal path
- the conveyance unit 14 is configured so that the longitudinal direction of the packaging bag continuous body 3 is along the conveyance path 18 (that is, the conveyance direction) and the packaging bag.
- the continuous body 3 is conveyed in a state where the thickness direction is along the vertical direction (vertical direction).
- the transport unit 14 includes an upstream drive unit 14U and a downstream drive unit 14D.
- the upstream drive unit 14 ⁇ / b> U is arranged on the upstream side of the arrangement unit 15, and the downstream drive unit 14 ⁇ / b> D is arranged on the downstream side of the arrangement unit 15.
- Each of the upstream drive unit 14U and the downstream drive unit 14D includes a pair of upper and lower nip rollers 14a and 14b and a motor (not shown) that rotationally drives one of the pair of upper and lower nip rollers 14a and 14b.
- the pair of upper and lower nip rollers 14a and 14b are arranged with a gap enough to allow the continuous packaging bag 3 to pass therethrough, and rotate with the packaging bag continuous 3 sandwiched between the rollers. Thereby, the packaging bag continuous body 3 is conveyed in a state where a slight tension is applied.
- the above motor is configured to rotate intermittently.
- the conveyance part 14 performs conveyance operation intermittently.
- the packaging bag continuous body 3 moves by a predetermined amount along the transport direction.
- the conveyance part 14 of this embodiment can convey to both the upstream and downstream of a conveyance direction by switching the rotation direction of said motor.
- the direction of conveyance is set by the control unit 21 of the processing device 12.
- conveyance mechanism namely, roller conveyor
- the conveyance mechanism namely, roller conveyor
- other conveyance mechanisms are used.
- a belt conveyor that conveys the continuous packaging bag 3 by rotating the belt while the continuous packaging bag 3 is placed on the upper surface of the endless belt may be used.
- the image capturing unit 16 captures images of the packaging bag 1 placed in the placement unit 15 and the medicine wrapped in the packaging bag 1 (that is, the medicine to be determined). As shown in FIG. 3, the image capturing unit 16 includes two upper and lower cameras as a plurality of cameras. In these two cameras, a portion (that is, the photographing target portion 3x) arranged in the arrangement portion 15 in the packaging bag continuous body 3 from opposite directions in the thickness direction of the packaging bag continuous body 3 (that is, the vertical direction). Take a picture.
- the upper camera (hereinafter referred to as the first camera 16 a) of the upper and lower two cameras is disposed at a position immediately above the placement unit 15, and the thickness direction of the packaging bag continuous body 3.
- An image of one surface of the imaging target portion 3x in FIG. 1, more specifically, an image of the upper surface of the packaging bag 1 arranged in the arrangement unit 15 is taken from above.
- the lower camera (hereinafter referred to as the second camera 16b) is arranged at a position directly below the arrangement portion 15, and is taken by one surface in the thickness direction of the packaging bag continuous body 3 (that is, taken by the first camera 16a).
- An image of the other surface of the photographing target portion 3x located on the opposite side of the surface to be photographed, more specifically, an image of the lower surface of the packaging bag 1 placed in the placement portion 15 is taken from below.
- the image of the packaging bag 1 (excluding the empty bag 1A) taken by the first camera 16a and the second camera 16b includes a drug image.
- the “medicine image” means an image of the drug photographed through the packaging bag 1.
- the apparatus main body 11 is configured such that the conveyance operation by the conveyance unit 14 is intermittently performed, and the image photographing unit 16 is a packaging bag arranged in the arrangement unit 15 during the conveyance operation. 1 and an image of the medicine wrapped in the packaging bag 1 is taken. And every time the packaging bag 1 arrange
- the imaging range (angle of view) of the lower camera 16b is a rectangular area, and is an area that is exposed on the inner side of the placement portion 15 in the lower surface of the packaging bag 1 placed in the placement portion 15. And a part (strictly speaking, end portions) of the lower surface of the packaging bag 1 located on both sides of the packaging bag 1 are set in a range that can be photographed.
- a portion of the packaging bag continuum 3 that is within the imaging range of the second camera 16b corresponds to the imaging target portion 3x, and at least the cut line 3y between the packaging bags 1 is located in that portion. .
- the image capturing unit 16 may be any unit having a function of acquiring image data of a subject, and examples thereof include a CCD (Charge-Coupled Device) image sensor or a CMOS (Complementary Metal Oxide Semiconductor) image sensor. However, it is not limited to these.
- the image capturing unit 16 is configured by two cameras. However, the number of cameras is not particularly limited, and may be only one, or Three or more may be sufficient.
- the camera is installed at a position sandwiching the placement unit 15 up and down. However, with respect to the installation position of the camera, the packaging bag 1 placed in the placement unit 15 and the packaging bag 1 Any position can be set as long as it is a position where an image of the medicine wrapped in can be taken well.
- the light irradiation unit 17 applies to the packaging bag 1 disposed in the placement unit 15 and the medicine wrapped in the packaging bag 1 (that is, the medicine to be determined). It irradiates light.
- the light irradiation part 17 irradiates light toward the part (namely, surface of the imaging
- the light irradiation unit 17 has a plurality of light emitting units, and in the present embodiment, has four light emitting units 17a, 17b, 17c and 17d.
- FIG. 5 is a schematic diagram when a plurality of light emitting units included in the light irradiation unit 17 are viewed from above.
- the four light emitting units 17a, 17b, 17c, and 17d are light sources used when the light irradiation unit 17 irradiates light, and are arranged on each of the four sides of the arrangement unit 15 as shown in FIG.
- the light irradiation part 17 irradiates light in a mutually different direction using the four light emission parts 17a, 17b, 17c, and 17d (a several light emission part).
- the two light emitting portions 17a and 17b are arranged at positions opposite to each other when viewed from the arrangement portion 15 in the transport direction (that is, the longitudinal direction of the packaging bag continuous body 3), and are opposite to each other. Emits light in the direction. That is, one light-emitting part 17a (hereinafter referred to as the first light-emitting part 17a) emits light from the upstream side in the transport direction toward the arrangement part 15 on the downstream side in the transport direction.
- the other light emitting unit 17b (hereinafter referred to as the second light emitting unit 17b) emits light from the downstream side in the transport direction toward the arrangement unit 15 on the upstream side in the transport direction.
- the remaining two light emitting units 17c and 17d are arranged at positions opposite to each other when viewed from the arrangement unit 15 in the direction crossing the transport direction (hereinafter, the crossing direction). And emit light in opposite directions. That is, one light-emitting part 17c (hereinafter referred to as the third light-emitting part 17c) emits light from one side toward the arrangement part 15 on the other side in the crossing direction.
- the other light emitting portion 17d (hereinafter referred to as the fourth light emitting portion 17d) emits light from the other side toward the arrangement portion 15 on the one side in the crossing direction.
- “one side in the crossing direction” means, for example, a side close to one end in the crossing direction of the placement portion 15, and “the other side in the crossing direction” is close to the other end side in the crossing direction of the placement portion 15. Means side.
- the light irradiation unit 17 uses a part or all of the four light emitting units 17a, 17b, 17c, and 17d to the packaging bag 1 arranged in the arrangement unit 15 and the medicine wrapped in the packaging bag 1. Irradiate with light. At this time, as can be seen from FIG. 6, the light irradiation unit 17 emits light from the oblique direction toward the surface of the photographing target portion 3 x. When light is applied to the surface of the medicine from an oblique direction, the contour of identification information formed on the surface of the medicine (particularly, the edge portion at the light irradiation destination in the contour) can be emphasized. Because it can.
- FIG. 6 is a view showing a state in which light is applied to the packaging bag 1, and is a schematic view showing the packaging bag 1, the image photographing unit 16, and the light irradiation unit 17 from the side.
- the light irradiation unit 17 irradiates light using one of the four light emitting units 17a, 17b, 17c, and 17d. At this time, the other light emitting units are stopped and do not emit light. For example, while the light irradiating unit 17 irradiates light toward the surface of the shooting target portion 3x using the first light emitting unit 17a, the second light emitting unit 17b, the third light emitting unit 17c, and the fourth light emitting unit 17d. Each light emission is stopped.
- the light emitting unit 17 irradiates light toward the surface of the photographing target portion 3x using the second light emitting unit 17b, the first light emitting unit 17a, the third light emitting unit 17c, and the fourth light emitting unit 17d. Each light emission is stopped.
- the image capturing unit 16 captures an image of the medicine wrapped in the packaging bag 1 disposed in the disposing unit 15 once.
- the light irradiation unit 17 switches the light emitting unit used immediately before to another light emitting unit among the light emitting units 17a, 17b, 17c, and 17d, and uses the light emitting unit 17a, 17b, 17c, or 17d after switching. Irradiate with light.
- the image capturing unit 16 captures again an image of the medicine wrapped in the packaging bag 1 disposed in the placement unit 15.
- an image of the surface of the photographing target portion 3x is obtained by photographing conditions.
- the imaging conditions correspond to a camera used by the image capturing unit 16 at the time of image capturing, a light emitting unit used by the light irradiation unit 17 at the time of light irradiation, and the like.
- the light irradiating unit 17 irradiates light among the first light emitting unit 17a, the second light emitting unit 17b, the third light emitting unit 17c, and the fourth light emitting unit 17d when changing the shooting conditions. Change the light-emitting part used for. Further, when changing the shooting conditions, the image shooting unit 16 changes the camera used for shooting an image among the first camera 16a and the second camera 16b. Then, as a result of the image photographing unit 16 changing the photographing condition (by photographing condition) and photographing the image of the photographing target portion 3x, a total of eight sheets (number of cameras ⁇ number of cameras) are obtained for each packaging bag 1 in the packaging bag continuous body 3. The number of images of the light emitting units) is taken.
- the first light emitting portion 17 a is positioned upstream of the arrangement portion 15 in the transport direction (in other words, the longitudinal direction of the packaging bag continuous body 3), and the first The two light emitting portions 17b are located on the downstream side of the arrangement portion 15.
- the first camera 16 a is arranged at a position directly above the arrangement unit 15, and the second camera 16 b is arranged at a position directly below the arrangement unit 15. Due to such a positional relationship, the image capturing unit 16 has the image of the surface of the capturing target portion 3x in a state where the capturing target portion 3x is located between the first light emitting unit 17a and the second light emitting unit 17b in the transport direction. Will be shooting.
- the imaging target portion 3x includes the end portion of the packaging bag 1 (strictly speaking, the packaging bag 1 in which a medicine other than the empty bag 1A is packaged) disposed in the placement unit 15, and The cut line 3y adjacent to the end is located. More specifically, the imaging target portion 3x includes a portion of the packaging bag 1 disposed in the placement portion 15 that covers the medicine, both end portions in the transport direction, and a cut line 3y adjacent to each end portion. Is at least the part where it is located. Then, the image capturing unit 16 captures the surface image of the capturing target portion 3x a plurality of times while changing the capturing conditions.
- the image of the surface of the photographing target portion 3x photographed by the image photographing unit 16 will be described.
- the image includes a packaging bag 1 arranged in the arranging unit 15, and the packaging bag.
- Each of the cut lines 3y located on both sides of 1 and the medicine f in a state of being wrapped in the packaging bag 1 are shown.
- 7A and 7B are examples of images captured by the image capturing unit 16.
- the image shown in FIG. 7A and the image shown in FIG. 7B are images taken under different shooting conditions.
- the image shown in FIG. 7A is the surface of the imaging target portion 3x captured by the image capturing unit 16 while the light irradiation unit 17 is irradiating light toward the surface of the imaging target portion 3x using the first light emitting unit 17a.
- this image is referred to as a “first image”.
- the image capturing unit 3x captured by the image capturing unit 16 while the light irradiation unit 17 irradiates light toward the surface of the image capturing target portion 3x using the second light emitting unit 17b.
- the light emitting units 17a, 17b, 17c, and 17d used by the light irradiation unit 17 for light irradiation a known light source can be used, and any of a point light source, a line light source, and a surface light source may be used. . Specifically, for example, those due to electroluminescence such as LEDs (Light Emitting Diode), semiconductor lasers (LD: Laser Diode), and organic EL (Electro-Luminescence), those due to radiant heat such as halogen light bulbs and incandescent light bulbs, Those using discharge light emission such as mercury lamps and fluorescent lamps, and combinations of these light sources and light guide members such as light guide plates or optical fibers can be used.
- electroluminescence such as LEDs (Light Emitting Diode), semiconductor lasers (LD: Laser Diode), and organic EL (Electro-Luminescence)
- those due to radiant heat such as halogen light bulbs and incandescent light bulbs
- Those using discharge light emission such as mercury lamps
- the light irradiation unit 17 includes the four light emitting units 17a, 17b, 17c, and 17d.
- the number of the light emitting units is not particularly limited, and two or more light emitting units are provided. Just do it.
- the processing device 12 executes a series of information processing when performing the dispensing inspection.
- the processing device 12 is configured by a personal computer (PC) externally attached to the device main body 11.
- PC personal computer
- the present invention is not limited to this, and the processing device 12 may be configured by a computer built in the device main body 11.
- FIG. 8 is a block diagram showing the configuration of the processing device 12. These units are realized by cooperation of hardware devices such as a CPU (Central Processing Unit) and a memory (not shown) included in the processing device 12 and an information processing program stored in the processing device 12. This information processing program may be obtained by reading from a recording medium such as a CD-ROM (Compact Disc Read Only Memory) in which the program is stored, or may be obtained by downloading from a predetermined site via a network. Also good.
- a recording medium such as a CD-ROM (Compact Disc Read Only Memory) in which the program is stored, or may be obtained by downloading from a predetermined site via a network. Also good.
- CD-ROM Compact Disc Read Only Memory
- each functional unit of the processing device 12 (specifically, the control unit 21, prescription condition information acquisition unit 22, image acquisition unit 23, preprocessing unit 24, determination unit 25, detection unit 27, and removal)
- the processing execution unit 28 is configured by a single personal computer, but is not limited thereto, and a part of the functional units described above is configured by a single personal computer, and the rest
- the functional unit may be configured by another personal computer.
- the control unit 21 is electrically connected to each part of the apparatus main body 11 (specifically, the transport unit 14, the image photographing unit 16, and the light irradiation unit 17) via a drive control circuit 11a mounted on the apparatus main body 11. And controls each part of the device. More specifically, the control unit 21 controls the transport amount, the transport direction, the transport operation timing, and the like in one transport operation with respect to the transport operation of the transport unit 14. Further, the control unit 21 controls the camera used in the two cameras 16 a and 16 b included in the image capturing unit 16, the timing of image capturing, and the like regarding the capturing operation of the image capturing unit 16.
- the prescription condition information acquisition unit 22 is communicably connected to the prescription condition input device 50, and acquires prescription condition information by communicating with the prescription condition input device 50.
- the prescription condition information is information indicating prescription conditions, and specifically, electronic data indicating the prescription conditions input to the prescription condition input device 50 by the pharmacist.
- the prescription condition information is automatically sent from the prescription condition input device 50 to the prescription condition information acquisition unit 22 to acquire the prescription condition information.
- the unit 22 receives the above prescription condition information.
- An information transmission request is sent from the prescription condition information acquisition unit 22, and when the prescription condition input device 50 receives this request, the prescription condition input device 50 transmits the prescription condition information. May be. More specifically, character string information for specifying prescription conditions or two-dimensional barcode information is first introduced into the main body 11 of the packaging bag continuum 3 (in the packaging bag continuum 3, first.
- the prescription condition information acquisition unit 22 reads the print information when the packaging bag continuous body 3 is introduced into the apparatus main body 11.
- the prescription condition information acquisition unit 22 prescribes prescription conditions indicating the prescription conditions relating to the medicine packaged in each packaging bag 1 in the continuous packaging bag 3 introduced into the apparatus main body 11 based on the read print information. Information is requested from the prescription condition input device 50.
- the prescription condition input device 50 that has received this request analyzes the request, specifies prescription condition information related to the request, and transmits the specified prescription condition information to the processing device 12.
- the image acquisition unit 23 is connected to the image capturing unit 16 (strictly speaking, the first camera 16a and the second camera 16b), and acquires an image captured by the image capturing unit 16 via a network.
- the image acquired by the image acquisition unit 23 is image data.
- the JPEG Joint Photographic Experts Group
- the GIF Graphics Interchange Format
- the PNG Portable Network F GraphicsF
- BMP bitmapmimage
- the image acquisition unit 23 acquires an image from the image capturing unit 16 every time the image capturing unit 16 captures an image. More specifically, in the present embodiment, as described above, for one packaging bag 1 in which the medicine is packaged, the image is changed a plurality of times (specifically, eight times) with different shooting conditions (for each shooting condition). Taken. Therefore, the image acquisition unit 23 acquires a plurality of images (that is, eight images for each imaging condition) by changing the imaging conditions for each packaging bag 1 and the medicine wrapped in the packaging bag 1. .
- the image capturing unit 16 changes the shooting conditions and captures a new image. Accordingly, the image acquisition unit 23 is newly captured. A plurality of images with different shooting conditions are acquired.
- the pre-processing unit 24 performs pre-processing on the image acquired by the image acquisition unit 23 from the image capturing unit 16 (that is, image data of the determination target medicine).
- the preprocessing is processing for emphasizing identification information formed on the surface of the medicine shown in the image acquired by the image acquisition unit 23.
- the image is changed a plurality of times (specifically, four times) by changing the light irradiation direction.
- the illuminance unevenness of the light occurs on the surface of the medicine shown in the image.
- Such illuminance unevenness of light has an effect when detecting and specifying identification information formed on the surface of the medicine.
- the illuminance unevenness of light varies depending on the light irradiation direction.
- the pre-processing unit 24 executes pre-processing, uses the images taken for each light irradiation direction, and emphasizes the identification information on the surface of the medicine, so that the outline (edge) of the identification information in each image is displayed. Inside, the part that stands out in relation to the direction of light irradiation is synthesized.
- the preprocessing unit 24 applies the illuminance-difference stereo method to the images photographed according to the light irradiation directions, and takes the identification information captured in common in each image while considering the light irradiation direction in each image. Perform image composition to make it stand out.
- the image subjected to the above preprocessing is an image in which the illuminance unevenness of the light that changes according to the light irradiation direction is eliminated as much as possible, and the identification information formed on the surface of the medicine in the image is emphasized. .
- the determination unit 25 specifies the number and type of medicines (that is, medicines to be determined) wrapped in the packaging bag 1 arranged in the arrangement unit 15 from the prescription condition information acquired by the prescription condition information acquisition unit 22. It is determined whether the quantity and type of the medicine match.
- FIG. 9 is a diagram showing a rough flow of the determination flow by the determination unit 25.
- a step of specifying an area in which a medicine to be determined is shown from an image on which preprocessing has been performed is performed (S001).
- S001 the preprocessed image
- the region in which the medicine is shown in the preprocessed image will be referred to as a “medicine presence region”.
- the drug presence region specifying step S001 a known edge extraction process and segmentation process are performed on the preprocessed image to specify the outline of the drug in the image. And the area
- the medicine existence area is specified by the number of medicines.
- the determination unit 25 extracts a pixel group corresponding to the medicine presence area from the pixel group constituting the preprocessed image (S002). As shown in FIG. 10, the extracted pixel group forms a rectangle (rectangular region to which a symbol X in FIG. 10 is attached) surrounding the drug presence region. Hereinafter, the extracted pixel group is referred to as “drug extraction image X”. When a plurality of drug presence areas are specified in the drug presence area specifying step S001, the drug extraction image X is specified for each drug presence area.
- FIG. 10 is an explanatory diagram of the medicine extraction image X. Note that the pixel size shown in FIG. 10 (the size per pixel for the image) is drawn larger than the actual pixel size for the sake of illustration.
- the size and position of the medicine extraction image X are specified.
- the size of the medicine extraction image X is the area of a rectangular pixel group forming the medicine extraction image X, and corresponds to the product of the lengths d1 and d2 of the two sides shown in FIG.
- the position of the medicine extraction image X is a coordinate position when the reference position is the origin and the transport direction and the crossing direction are the coordinate axis directions. Specifically, the position of the rectangular pixel group forming the medicine extraction image X is It is the position of the intersection of the diagonal lines, and corresponds to the coordinates of the point P shown in FIG.
- the position (arrangement position) can be specified.
- the reference position as the origin is set at the center position of the shooting range of the image shooting unit 16 (strictly, the first camera 16a and the second camera 16b), but is not limited thereto. However, it may be set at an arbitrary position.
- the determination unit 25 After performing the pixel group extraction step S002, the determination unit 25 identifies the type of drug to be prescribed from the prescription condition information acquired using the prescription condition information acquisition unit 22, and stores the master image of the specified type of drug in the database.
- a step of reading from the DB is performed (S003). In this step S003, when there are a plurality of types of medicines to be prescribed, that is, when a plurality of kinds of medicines are packaged in the packaging bag 1, a master image is read for each type.
- the master image is an image of a medicine registered in correspondence with the kind of medicine, and is an image registered in advance for the kind of medicine specified from the prescription condition information.
- the master image is an image of a medicine photographed in a state wrapped in the packaging bag 1.
- the types of drugs that have been determined by the determination unit 25 in the past among the captured images (strictly speaking, the drug extraction image X) in which the image capturing unit 16 has captured the type of drugs in the past.
- the captured image obtained when the determination result that the prescription condition is met is registered as the master image.
- the database DB is obtained by registering a master image of each medicine and a kind of medicine in association with each other.
- FIG. 11 is an explanatory diagram of a database DB in which master images are registered.
- the drug name, the identification information formed on the surface of the drug, the planar size and thickness as the size of the drug are registered in association with the type of the drug.
- the information registered in the database DB is not limited to the above information, and information other than the above information may be registered.
- the database DB is provided in the external database server 70, and the determination unit 25 communicates with the database server 70 to access the database DB.
- the present invention is not limited to this, and the database DB may be provided in the processing device 12, that is, stored in a storage medium in the processing device 12.
- the determination unit 25 After reading the master image from the database DB, the determination unit 25 uses the read master image and the determination target drug image captured by the image capturing unit 16 (specifically, the drug extraction image X). It is determined whether the type of the target drug matches the type of drug shown in the master image (that is, the type of drug specified from the acquired prescription condition information) (S004). More specifically, in the determination step S004, template matching between the master image and the medicine extraction image X is performed, and the medicine shown in the master image and the medicine shown in the medicine extraction image X (that is, the medicine to be judged) are determined. Evaluate the similarity between them.
- a known geometric hashing method or LLHA (Locally Likely Arrangement Hashing) method can be used. If the similarity is equal to or higher than the reference value, the determination unit 25 determines that the type of medicine shown in the medicine extraction image X matches the type of medicine shown in the master image.
- the determination unit 25 determines, for each drug type, the number of images (hereinafter referred to as drug type match numbers) that are determined to match the drug type captured in the master image among the images captured in the drug extraction image X. Count. Then, the determination unit 25 determines whether or not the number of drug type matches counted for each type is the same as the number of prescriptions for each type specified from the prescription condition information.
- the determination by the determination unit 25 is performed according to the procedure described above. And when the packaging bag 1 arrange
- the step S003 for reading an image from the database DB may be omitted.
- the determination is made on the medicines wrapped in each packaging bag 1 (strictly, the packaging bag 1 other than the empty bag 1A) in the packaging bag continuous body 3, It is possible to confirm (inspect) whether the medicine is correctly packaged in the packaging bag 1 as instructed by the prescription.
- the detection unit 27 detects a cut line 3y (boundary recess) formed at a boundary position between the packaging bags 1 in the continuous packaging bag 3 introduced into the housing 13.
- the detection of the cut line 3y by the detection unit 27 is performed in order to demarcate the imaging range in the continuous packaging bag 3 when the determination unit 25 determines the suitability of the medicine wrapped in the packaging bag 1.
- each packaging bag 1 in the packaging bag continuous body 3 is displaced from the normal position.
- An image may be taken in the In such a case, the photographed image becomes an image straddling the cut line 3y, and there is a possibility that the medicines packaged in each of the two adjacent packaging bags 1 are shown together in one image.
- the detection part 27 detects the cut line 3y in the packaging bag continuous body 3 before the determination by the determination part 25 is performed.
- the detection part 27 is based on the image from which the imaging conditions which the image acquisition part 23 acquired differed (in other words, the image from which the imaging conditions which the image imaging part 16 image
- the removal process execution unit 28 performs a removal process for removing an image of the drug in the image used when the detection unit 27 detects the cut line 3y.
- the detection unit 27 detects the cut line 3y in the imaging target portion 3x based on the image that has been subjected to the removal process by the removal process execution unit 28 (that is, the image from which the medicine image has been removed). The details of the removal process will be described later together with the procedure for detecting the cut line 3y.
- Cut Line Detection Method the detection method of the cut line 3y in this embodiment is demonstrated.
- the detection method of the cut line 3y corresponds to the detection method of the boundary recessed part of this invention.
- the portion of the surface of the packaging bag 1 that is located near the tear line 3 y is more than the portion where the tear line 3 y is formed in the packaging bag continuous body 3. It is raised. For this reason, as shown in FIG. 6, a part of the light irradiated by the light irradiation unit 17 toward the photographing target portion 3x is raised in the vicinity of the cut line 3y on the surface of the packaging bag 1 (FIG. 6). Reflected at (indicated by the symbol Rf1). The reflected light is photographed by the image photographing unit 16. As a result, in the captured image, as shown in FIGS. 7A and 7B, a line with higher brightness than the surroundings appears in the vicinity of the cut line 3y. This line (hereinafter, false cut line 3r) may be erroneously detected as the cut line 3y.
- the cut line 3y in the photographing target portion 3x in the packaging bag continuous body 3 is detected using images with different photographing conditions photographed by the image photographing unit 16. And according to the detection method of this embodiment, it becomes possible to avoid the false detection of the false cut line 3r, and to detect the cut line 3y correctly.
- a procedure for detecting the cut line 3y will be described with reference to FIG. 6 and FIGS.
- FIG. 12 is a diagram illustrating a flow of a process in which the detection unit 27 detects the cut line 3y (hereinafter, cut line detection process).
- FIG. 13 is an example of a composite image to be described later.
- FIG. 14 is an explanatory diagram (image) of the flow of image contraction / expansion processing.
- FIG. 15 is an example of an image that has been subjected to the removal process by the removal process execution unit 28.
- FIG. 16 is a diagram illustrating a correspondence relationship between the distance from the edge position of the image and the total gradation value in the image subjected to the removal process. The horizontal axis in FIG.
- 16 represents the distance from the end position of the image in the transport direction (specifically, the end position closer to the upstream side in the transport direction) in units of pixels, and the vertical axis represents the same. The sum of the gradation values (darkness) of the pixels at the distance is shown.
- the detection unit 27 detects the cut line 3y in the shooting target portion 3x by using the first image and the second image described above among the images with different shooting conditions shot by the image shooting unit 16. To do. More specifically, the detection unit 27 uses, as the first image, the image photographing unit 16 while the light irradiation unit 17 emits light toward the surface of the photographing target portion 3x using the first light emitting unit 17a. An image of the surface of the photographing target portion 3x photographed using the first camera 16a is used. In addition, as the second image, the detection unit 27 uses the second light emitting unit 17b to irradiate the light toward the surface of the shooting target portion 3x, and the image shooting unit 16 uses the first camera. An image of the surface of the photographing target portion 3x photographed using 16a is used.
- the detection unit 27 selects a certain region from each of the first image and the second image (S051). More specifically, the detection unit 27 bisects the first image in a direction corresponding to the transport direction (that is, the lateral direction of the image), and selects a portion closer to the downstream side in the transport direction in the first image. . In the first image, a portion closer to the downstream side in the transport direction corresponds to a portion in which an area on the side farther from the first light emitting unit 17a is shown in the photographing target portion 3x.
- the detection unit 27 bisects the second image in the lateral direction of the image, and selects a portion closer to the upstream side in the transport direction in the second image.
- the portion closer to the upstream side in the transport direction is a portion in which an area on the side farther from the second light emitting portion 17b in the photographing target portion 3x is shown.
- the detection unit 27 selects a portion of each of the first image and the second image that is further away from the light emitting unit 17a or 17b used by the light irradiation unit 17 at the time of image capturing. This is because the false cut line 3r is difficult to be expressed. More specifically, the light irradiation unit 17 in a state in which one packaging bag 1 arranged in the arrangement unit 15 and the cut lines 3y provided on both sides of the packaging bag 1 are included in the photographing target portion 3x. Irradiates light toward the imaging target portion 3x. In this case, as shown in FIG.
- the detection unit 27 uses the portions of the first image and the second image that are further away from the light emitting unit 17a or 17b used by the light irradiation unit 17 at the time of image capturing. A cut line 3y in the target portion 3x is detected.
- the detection unit 27 combines the portions selected in the previous step S051 of each of the first image and the second image to create a combined image (S052).
- This composite image is composed of a downstream half in the transport direction in the first image and an upstream half in the transport direction in the second image. Therefore, the false cut line 3r does not appear in the composite image for the above-described reason, and the medicine wrapped in the packaging bag 1 and the cut line 3y are mainly shown as shown in FIG. Then, the detection unit 27 detects the cut line 3y in the photographing target portion 3x based on the composite image.
- the removal process execution unit 28 performs a removal process on the composite image (S053).
- the removal process is performed by applying a contraction / expansion technique as an image processing technique. That is, the removal processing execution unit 28 removes the image after contraction / expansion obtained by contracting and expanding the pixel group constituting the composite image along at least one direction from the image before contraction / expansion.
- a removal process for removing the drug image in the composite image is executed.
- the image captured by the image capturing unit 16 instead of a composite image, the image captured by the image capturing unit 16 (strictly speaking, the captured image is converted from an RGB (Red Green Blue) image to grayscale. (Converted into images).
- RGB Red Green Blue
- the image in the upper part of FIG. 14 shows an image before contraction and expansion.
- the pixel group constituting this image is contracted along the direction corresponding to the conveyance direction (that is, the horizontal direction of the image), as in the image in the middle of FIG.
- An image (post-contraction image) in which lines extending in the corresponding direction (that is, the vertical direction of the image) disappear is obtained.
- shrinking means that when each pixel in the image is binarized in black and white, if any of the pixels around the target pixel is black, the target pixel is set to black and reduced by one pixel. means.
- the term “expand” means that when each pixel in the image is binarized in black and white, if any of the pixels around the target pixel is white, the target pixel is set to white and expanded by one pixel. Means.
- the contraction and the expansion are performed along the direction corresponding to the transport direction (that is, the horizontal direction of the image).
- the present invention is not limited to this, and the direction corresponding to the intersecting direction (that is, The image may be contracted and expanded along the vertical direction of the image, and may be contracted and expanded not only in one direction but also in a plurality of directions.
- the drug image in the image before contraction / expansion is removed.
- a composite image showing only the cut line 3y is obtained as shown in FIG.
- the composite image shown in FIG. 15 is an image obtained by expanding the pixel group constituting the composite image after the removal process along the horizontal direction of the image.
- the detection unit 27 detects the cut line 3y in the imaging target portion 3x based on the composite image after the removal process (that is, the composite image from which the medicine image is removed) (S054).
- the composite image after the removal process that is, the composite image from which the medicine image is removed
- the detection unit 27 detects the cut line 3y in the imaging target portion 3x based on the composite image after the removal process (that is, the composite image from which the medicine image is removed) (S054).
- the detection unit 27 detects the cut line 3y in the imaging target portion 3x based on the composite image after the removal process (that is, the composite image from which the medicine image is removed) (S054).
- the relationship between the position of each pixel constituting the composite image after the removal process and the gradation value (darkness) is specified, and the cut line 3y is detected. The method of detecting 3y is mentioned.
- the detection unit 27 converts a plurality of pixels at the same distance from the end position of the composite image among pixels constituting the composite image after the removal process into one pixel row (vertical image). Column along the direction). Then, the detection unit 27 sums the gradation values of the respective pixels in the pixel row by the number of pixels in the pixel row. When this total value (hereinafter referred to as total gradation value) is obtained by the number of pixel columns existing in the composite image after the removal process, the position of the pixel column and the total gradation value as shown in FIG. Correspondence is identified.
- the detection unit 27 identifies a pixel column having a total gradation value higher than that of the surrounding pixel columns and the total gradation value exceeding the threshold value based on the identified correspondence. For example, in the case shown in FIG. 16, the pixel row whose distance from the end position of the composite image is the distance indicated by the arrow in the figure is specified. Then, the detection unit 27 detects a portion corresponding to the specified pixel row in the photographing target portion 3x as the cut line 3y. The detection unit 27 detects two cut lines 3y in the shooting target portion 3x from an image (strictly speaking, a composite image) of one shooting target portion 3x.
- the detection unit 27 calculates an interval (a distance indicated by a symbol w in FIG. 16) between the detected two cut lines 3y and transmits the calculation result to the control unit 21.
- the control unit 21 controls the transport unit 14 based on the calculation result of the interval between the cut lines 3 y sent from the detection unit 27. More specifically, the control unit 21 sets the transport amount in one transport operation to an amount corresponding to the calculation result of the interval between the cut lines 3y.
- FIG. 17 is a diagram illustrating a modification example of the procedure for detecting the cut line 3y.
- the detection unit 27 includes images captured by the image capturing unit 16 using the first camera 16a among the images captured by the image capturing unit 16 and having different capturing conditions (hereinafter, upper surface image Js). Then, using the image captured by the image capturing unit 16 with the second camera 16b (hereinafter referred to as the lower surface image Jb), the cut line 3y in the capturing target portion 3x is detected.
- the top image Js and the bottom image Jb used by the detection unit 27 are both images taken while the light irradiation unit 17 is irradiating light from the same light emitting unit 17a, 17b, 17c, or 17d. .
- the top image Js and the bottom image Jb include the medicine f and the cut line 3y, and the false image is cut off at the end closer to the light emitting unit that emits light at the time of image shooting.
- Line 3r is expressed. Comparing the top image Js and the bottom image Jb, as shown in FIG. 17, the cut line 3y is shown at the same position between the top image Js and the bottom image Jb, whereas the false cut line 3r is They are in different positions. This is because the location where the irradiation light from the light irradiation part 17 reflects is different between the upper surface and the lower surface of the packaging bag 1.
- the removal process execution unit 28 performs a removal process on the upper surface image Js and the lower surface image Jb by the same procedure as described above. That is, in the removal process, the removal process execution unit 28 sets the pixel group constituting each of the upper surface image Js and the lower surface image Jb captured by the image capturing unit 16 in a direction corresponding to the transport direction (that is, the horizontal direction of the image). Shrink and expand along. Thereafter, the removal processing execution unit 28 removes the image after contraction and expansion obtained by contracting and expanding each image from the image before contraction and expansion. Thereby, an image obtained by removing the image of the medicine f from each of the upper surface image Js and the lower surface image Jb, that is, the upper image NJs after the removal process and the lower image NJb after the removal process are acquired.
- the detection unit 27 After performing the removal process, the detection unit 27 identifies candidates for the cut line 3y in the image captured by the first camera 16a (strictly, the upper surface image NJs after the removal process), and the second camera 16b A candidate for the cut line 3y shown in the photographed image (strictly speaking, the bottom image NJb after the removal process) is specified.
- the candidates for the cut line 3y are vertical lines that appear in each of the upper surface image NJs after the removal process and the lower surface image NJb after the removal process, and specifically, the cut line 3y itself and the false cut line 3r. is there.
- the detection unit 27 captures the image captured by the first camera 16a (strictly, the upper surface image NJs after the removal process) and the image captured by the second camera 16b (strictly, the lower surface image NJb after the removal process).
- the candidate of the cut line 3y that is shown in common in both of the above is specified.
- the detecting unit 27 detects the identified candidate for the cut line 3y as the cut line 3y in the photographing target portion 3x.
- the detection unit 27 identifies a vertical line that is common to the upper image NJs after removal processing and the lower image NJb after removal processing, and generates an integrated image Ji that reflects the identification result.
- the integrated image Ji is an image in which only a vertical line that is common to the upper image NJs after the removal process and the lower image NJb after the removal process is shown.
- the vertical line in the integrated image Ji is a cut line 3y as shown in FIG. Therefore, the detection unit 27 detects the vertical line shown in the integrated image Ji as the cut line 3y in the photographing target portion 3x.
- the correspondence relationship between the position of each pixel column in the image and the total gradation value in each pixel column see FIG. 16) can be used.
- FIG. 18 is a diagram illustrating a basic operation flow of the medicine determination device 10.
- the prescription condition information acquisition unit 22 of the processing device 12 communicates with the prescription condition input device 50 and acquires prescription condition information indicating the input prescription conditions ( S011).
- the packaging machine 60 when the automatic packaging operation is performed by the packaging machine 60 in accordance with the input prescription conditions (in other words, prescription conditions indicated by the prescription condition information acquired by the prescription condition information acquisition unit 22), the packaging that wraps the medicine A continuous belt-like packaging bag 3 in which the bags 1 are connected is created.
- the packaging bag continuous body 3 is introduced into the apparatus main body 11 by the introduction portion 13a formed in the housing 13 of the apparatus main body 11 (S012).
- the transport operation by the transport unit 14 is intermittently repeated (S013).
- the continuous packaging bag 3 is transported by a predetermined amount downstream in the transport direction.
- one packaging bag 1 in the packaging bag continuous body 3 is eventually disposed in the placement portion 15.
- the packaging bag 1 arrange
- the light irradiation unit 17 applies light to the medicine wrapped in the packaging bag 1 disposed in the placement unit 15. Is irradiated (S014).
- the image capturing unit 16 uses each of the first camera 16a and the second camera 16b to capture an image (that is, a determination target drug) wrapped in the packaging bag 1 disposed in the placement unit 15. (S015).
- the light irradiation unit 17 irradiates light from one of the four light emitting units 17a, 17b, 17c or 17d arranged around the arrangement unit 15.
- the light emitting units are sequentially switched (S016 and S017), and light is irradiated again from the light emitting units 17a, 17b, 17c, or 17d after switching. That is, the light irradiation unit 17 sequentially switches the light irradiation direction and irradiates light from each direction.
- the image capturing unit 16 captures an image of the determination target medicine for each light irradiation direction. As a result, a total of eight images (number of cameras ⁇ number of light irradiation directions) of the medicines wrapped in the packaging bag 1 arranged in the arrangement unit 15 are taken.
- the light irradiation step S014, the image photographing step S015, and the light emission unit switching step S017 described above are repeatedly performed every time the packaging bag 1 arranged in the arrangement unit 15 is switched with the transport operation.
- the captured image is transmitted to the image acquisition unit 23 of the processing device 12 as needed (S018). Thereafter, preprocessing is performed on the image acquired by the image acquisition unit 23 by the preprocessing unit 24 of the processing device 12 (S019). As a result, a preprocessed image in which the edge of the identification information formed on the surface of the medicine is emphasized is generated.
- the determination unit 25 of the processing device 12 specifies prescription conditions relating to the drug (that is, the drug to be determined) shown in the preprocessed image (S020). Specifically, from the prescription condition information acquired in S011, prescription conditions set for the medicine packaged in each packaging bag 1 in the packaging bag continuum 3 (specifically, the kind and kind of medicine are classified by type). Number).
- the detection unit 27 of the processing device 12 uses images with different shooting conditions acquired by the image acquisition unit 23 (in other words, images of the shooting target portion 3x shot by the image shooting unit 16 while changing the shooting conditions).
- a cut line detection step is performed (S021). Specifically, the detection unit 27 detects two cut lines 3y in the photographing target portion 3x by the above-described procedure. Here, when two cut lines 3y are detected, one packaging bag 1 in the packaging bag continuum 3 is correctly arranged in the placement unit 15.
- the detection part 27 performs a tear line detection process again. Then, the conveyance operation for position adjustment by the conveyance unit 14 and the cut line detection process are repeated until the detection unit 27 detects the two cut lines 3y in the photographing target portion 3x.
- the detecting unit 27 calculates an interval between the cut lines 3y and transmits the calculation result to the control unit 21.
- the control unit 21 controls the transport unit 14 to transport the packaging bag continuous body 3 by the transport amount corresponding to the calculated value of the interval between the cut lines 3y in the transport operation of the transport unit 14 performed thereafter.
- the determination unit 25 determines that the medicine packaged in each packaging bag 1 in the packaging bag continuous body 3 is correctly in accordance with the prescription conditions by the above-described determination flow procedure. It is determined whether it is packaged (S022). In the determination flow, the determination unit 25 accesses the database DB of the database server 70, and reads a master image corresponding to the prescription conditions (specifically, the type of medicine) specified in the previous step S020. And the determination part 25 determines whether the kind and number of the medicine wrapped in the packaging bag 1 arrange
- the series of steps S013 to S022 from the conveying operation to the determination flow described above are arranged in the arrangement unit 15 until the determination for the medicine in each packaging bag 1 in the packaging bag continuous body 3 is completed. This is repeated every time the packaging bag 1 is switched (S023).
- the cut line detection step S021 is repeatedly performed every time the packaging bag 1 placed in the placement unit 15 is switched. However, the cut line detection step S021 is performed only for the first time. Thereafter, the implementation may be omitted.
- the determination unit 25 performs the above determination on the medicines packaged in each packaging bag 1 in the continuous packaging bag 3 as a determination target, and when all determinations are completed, character information indicating the result (determination result) is displayed. It is displayed on the display (S024).
- the determination result displayed on a display it should just be able to grasp clearly whether it is a determination result with respect to the medicine wrapped in which packaging bag 1 in the packaging bag continuous body 3, and the determination result is displayed by switching for each packaging bag 1.
- the determination results of the respective packaging bags 1 in the continuous packaging bag 3 may be displayed together while being associated with the position or order of the packaging bags 1.
- the packaging bag continuous body 3 reaches
- the packaging bag 1) is discharged out of the housing 13, the basic operation of the medicine determination device 10 is completed.
- the image capturing unit 16 changes the shooting conditions and performs shooting.
- the cut line 3y in the shooting target portion 3x is detected using the image of the shooting target portion 3x.
- the formation position of the cut line 3y in the packaging bag continuous body 3 can be detected appropriately.
- determination (inspection) of drug suitability is individually performed for each packaging bag 1 of the packaging bag continuous body 3, it is possible to accurately define the imaging region in the packaging bag continuous body 3.
- the drug determination device and the boundary recess detection method of the present invention have an advantageous effect over the techniques described in Patent Documents 1 to 4.
- the cut line 3y is relatively small and easily crushed. Therefore, the cut line 3y in the image is not clear and is difficult to detect. Further, in the case of detecting an image near the cut line 3y by irradiating light toward the formation position of the cut line 3y in the packaging bag continuous body 3, as described above, the vicinity of the cut line 3y is detected. There is a possibility that the false cut line 3r appears and this false cut line 3r is mistaken for the cut line 3y. For this reason, the techniques described in Patent Documents 1 to 4 do not detect the cutting line 3y itself, but indirectly detect the cutting line 3y by detecting a portion near the cutting line 3y or a candidate for the cutting line 3y. To detect.
- the background image on the illumination side is obtained by utilizing the property that the scattering property at the time of light transmission in the wrapping paper is different between the heat seal part and the non-seal part.
- the wrapping edge is detected by raising only the wrapping edge.
- a combination in which the derived value of the length of the sachet to be inspected approximates a predetermined value is to be inspected. It is regarded as a boundary position located on the upstream side and the downstream side of the packaging bag.
- an edge region is recognized from the interval between vertical edges longer than a predetermined length, and the center portion of the edge region is set as a boundary position between the vertical seal portions.
- the image of the imaging target portion 3x where the cut line 3y is located in the packaging bag continuum 3 is imaged a plurality of times while changing the imaging conditions.
- the image of the imaging target portion 3x where the cut line 3y is located in the packaging bag continuum 3 is imaged a plurality of times while changing the imaging conditions.
- the boundary position is specified on the assumption that the boundary position of the packet is present at the center position of the edge region. For example, the position is deviated from the center portion of the edge region.
- a cut line or the like it is difficult to accurately specify the position of the cut line or the like.
- the cut line 3y itself is detected, so that the cut line 3y can be detected more accurately.
- the drug determination device 10 used for determining the suitability of the drug packaged in the packaging bag 1 when the pharmacist prescribes the drug to the patient has been described as an example.
- the use of the drug determination device 10 is not limited to the above-mentioned use, and when the patient is brought into the packaging bag 1 when the patient is admitted to the facility such as a hospital, The drug determination apparatus 10 may be used by a staff for the purpose of grasping the type and quantity of the medicine to be brought (strictly, the quantity for each type).
Landscapes
- Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Public Health (AREA)
- Primary Health Care (AREA)
- Quality & Reliability (AREA)
- Chemical & Material Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Multimedia (AREA)
- Business, Economics & Management (AREA)
- Mechanical Engineering (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Epidemiology (AREA)
- Medicinal Chemistry (AREA)
- Animal Behavior & Ethology (AREA)
- Veterinary Medicine (AREA)
- Medical Informatics (AREA)
- Human Resources & Organizations (AREA)
- Economics (AREA)
- Manufacturing & Machinery (AREA)
- Marketing (AREA)
- Strategic Management (AREA)
- Tourism & Hospitality (AREA)
- General Business, Economics & Management (AREA)
- Analytical Chemistry (AREA)
- Biochemistry (AREA)
- Immunology (AREA)
- Pathology (AREA)
- Medical Preparation Storing Or Oral Administration Devices (AREA)
Abstract
包装袋連続体において包装袋間の境界に設けられた境界凹部の位置を適切に検出することが可能な薬剤判定装置、及び境界凹部の検出方法を提供する。薬剤を包む包装袋が複数並んだ帯状の包装袋連続体において包装袋間の境界位置に形成された境界凹部を検出する際に、包装袋連続体中、少なくとも境界凹部が位置する撮影対象部分の表面に向けて光を照射した状態で、撮影対象部分の表面の画像を、撮影条件を変えて複数回撮影し、撮影条件別に撮影した画像に基づき、撮影対象部分中の前記境界凹部を検出する。
Description
本発明は、薬剤判定装置及び境界凹部の検出方法に係り、特に、薬剤を包む包装袋が複数並んだ帯状の包装袋連続体において包装袋間の境界位置に形成された境界凹部を検出する薬剤判定装置及び境界凹部の検出方法に関する。
分包紙等の包装袋に薬剤が処方箋の指示通りに正しく分包されているかを、機械等によって自動的に判定(鑑査)することは、既に知られている。このような自動鑑査装置(以下、薬剤判定装置と言う。)では、例えば、装置内で、包装袋に包まれた薬剤の画像を撮影する。そして、撮影画像に写った薬剤の種類及び個数が、処方箋にて指示された薬剤の種類及び個数と一致するかを判定する。
ところで、薬剤が分包された包装袋が帯状に複数連なって連続体(以下、包装袋連続体)を構成している場合がある。上述した薬剤判定装置の中には、包装袋連続体を装置内に導入し、包装袋連続体の各包装袋に包まれている薬剤を対象として、薬剤の適否についての判定を包装袋毎に行うものがある。包装袋連続体の各包装袋に対して個別に判定を行う場合には、撮影した画像から包装袋一つ分の領域を画定する必要があり、そのためには、包装袋の端位置、換言すると、包装袋連続体における包装袋間の境界位置を検出することが重要となる。包装袋間の境界位置には、通常、切り取り線等の境界凹部が形成されている。ただし、境界凹部は、比較的小さく潰れ易いため、画像における境界凹部が明瞭でなく、その検出確度及び精度の向上が難しい。このような状況の下で、近年、境界凹部そのものを検出しないで包装袋の端位置を特定する方法が開発されている(例えば、特許文献1~4参照)。
特許文献1に記載の技術は、ヒートシールにて形成された包み(包装袋に該当)を連ねた分包紙(包装袋連続体に該当)を順送りに移送し、その移送路上の撮影範囲の両側に離れて対向配置された照明装置及び撮影装置を用いて包みを撮影し、その撮影画像から剤像領域を抽出してその中の剤像を計数することにより包み内の剤数を自動確認する錠剤計数監査装置(薬剤判定装置に該当)に関するものである。特許文献1に記載の技術(特に、特許文献1の請求項1参照)によれば、照明装置が散乱性の面照明部を具備し、撮影範囲に何も置かないで撮った撮影データにおいて面照明部から区別可能な背景画像を生じる背景像形成手段が設けられており、包みのヒートシール部に発現する背景像形成手段の透視像に基づいて剤像領域を画定する。つまり、光散乱性の分包紙の包みを裏側から照明して表側から撮ることにより、包み中の錠剤の色及び刻印等の影響を排した陰画像が得られる。ここで、分包紙のうち、ヒートシール部以外の部分(非シール部)は磨りガラス状であるのに対し、ヒートシール部は光散乱性を喪失し透明ガラスのようになっている。このようなヒートシール部と非シール部との透光時の散乱性の相違に基づいて、照明側の背景像を包み端部にだけハッキリ浮かび上がらせることにより、包み端部を検出及び特定することが可能となる。
特許文献2に記載の技術は、分包袋連続体(包装袋連続体に該当)の各分包袋(包装袋に該当)毎に薬剤の鑑査を行う薬剤鑑査システム(薬剤判定装置に該当)に関するものである。特許文献2に記載の技術(特に、特許文献2の請求項7及び段落0043、0044参照)によれば、切り取り線等の境界凹部が撮影画像に鮮明に現れないため、分包袋(包装袋に該当)の境界の候補を撮影画像の中から選択する。具体的には、鑑査対象である分包袋の長さの既定値を取得し、分包袋連続体の撮影画像に基づき、鑑査対象である分包袋と、その上流側及び下流側にて隣接する分包袋との境界として想定される境界候補を上流側境界候補及び下流側境界候補として導出し、上流側境界候補及び下流側境界候補についての位置情報を取得する。そして、上流側境界候補及び下流側境界候補の組み合わせ候補のそれぞれについて、取得された位置情報に基づく演算を実施し、鑑査対象である分包袋の長さの候補値を導出し、導出された候補値のうち、鑑査対象である分包袋の長さの既定値に近似したものを選定し、選定された候補値を構成する上流側境界候補及び下流側境界候補の組合せを、鑑査対象である分包袋の上流側及び下流側に位置する境界位置として定める。
特許文献3及び特許文献4に記載の技術は、分包袋連続体(包装袋連続体に該当)中の各分包袋(包装袋に該当)が、分包袋連続体の幅方向に延びる縦シール部と、分包袋連続体の長手方向に延びる横シール部において封止されたものであり、分包袋連続体が、隣接する分包袋の縦シール部同士の間に境界が形成されたものであり、分包袋毎に薬剤の鑑査を行う薬剤監査装置(薬剤判定装置に該当)に関するものである。特許文献3及び特許文献4に記載の技術(特に、特許文献3の請求項32及び特許文献4の請求項31参照)によれば、分包袋連続体における境界の位置を導出可能な境界位置導出手段を備え、境界位置導出手段が、分包袋の撮影画像領域内において縦方向に延びる輪郭線(縦エッジ)を検出し、所定の長さよりも長い縦エッジを選定し、選定された複数の縦エッジのうち、縦エッジ同士の間隔が縦シールの幅を基準として設定される所定の間隔以内に収まる領域をエッジ領域として認識し、認識されたエッジ領域の中央部を縦シール部同士の境界位置として認識する。
しかしながら、特許文献1~4に記載の技術は、いずれも切り取り線等の境界凹部そのものを検出するものではない。特に、特許文献1に記載の技術は、分包紙において透光時の散乱性がヒートシール部と非シール部との間で異なる性質を利用して、照明側の背景像を包み端部にだけ浮かび上がらせることで包み端部を検出及び特定するものである。したがって、特許文献1に記載の技術は、ヒートシール部と非シール部との間で光の散乱性が異なる分包紙に限って適用可能であり、そのような性質を有しない分包紙(包装袋連続体)には適用が困難である。
また、特許文献2に記載の技術は、上流側境界候補及び下流側境界候補の組み合わせ候補のそれぞれについて、鑑査対象である分包袋の長さの候補値を導出し、導出された候補値のうち、鑑査対象である分包袋の長さの既定値に近似したものを選定し、選定された候補値を構成する上流側境界候補及び下流側境界候補の組合せを、鑑査対象である分包袋の上流側及び下流側に位置する境界位置とする。つまり、特許文献2に記載の技術を利用するには、鑑査対象である分包袋の長さの既定値が必要であり、その既定値が未知である場合には利用できない。また、上流側境界候補が複数存在したり、下流側境界候補が複数存在したりする場合には、上流側境界候補及び下流側境界候補の組み合わせ候補のうち、鑑査対象である分包袋の長さの導出値が既定値に近似したものも複数存在する場合がある。かかる場合には、境界候補の中から境界位置を決めることが困難となる。
また、特許文献3及び4に記載の技術は、所定の長さよりも長い縦エッジ同士の間隔からエッジ領域を認識し、そのエッジ領域の中央部を縦シール部同士の境界位置とする。したがって、特許文献3及び4に記載の技術は、エッジ領域の中央位置に包みの境界位置が存在するという前提の下で利用されるものであり、例えば、エッジ領域の中央部から外れた位置に境界凹部が設けられている場合には、正確に境界凹部の位置を特定し難くなる。
本発明は、上記の事情に鑑みてなされたものであり、包装袋連続体において包装袋間の境界に設けられた境界凹部の位置を適切に検出することが可能な薬剤判定装置、及び境界凹部の検出方法を提供することを目的とする。
上記の目的を達成するために、本発明の薬剤判定装置は、薬剤を包む包装袋が複数並んだ帯状の包装袋連続体において包装袋間の境界位置に形成された境界凹部を検出する検出部と、包装袋連続体中、少なくとも境界凹部が位置する撮影対象部分の表面に向けて光を照射した状態で、撮影対象部分の表面の画像を、撮影条件を変えて複数回撮影する画像撮影部と、を有し、検出部は、画像撮影部が撮影条件を変えて撮影した複数の画像に基づき、撮影対象部分中の境界凹部を検出することを特徴とする。
また、画像撮影部が画像を撮影する際に、撮影対象部分の表面に向けて光を照射する光照射部を有し、光照射部は、包装袋連続体の長手方向において互いに反対向きに光を発する第一発光部及び第二発光部を有し、撮影対象部分の表面に向けて斜め方向から光を照射し、画像撮影部は、長手方向において第一発光部及び第二発光部の間に撮影対象部分が位置している状態で画像を撮影し、光照射部は、撮影条件を変えるにあたり、第一発光部及び第二発光部のうち、光を照射する際に用いる発光部を変えることが好ましい。なお、ここでいう「撮影対象部分の表面に向けて斜め方向から光を照射」とは、撮影対象部分の撮影方向を正面方向とした場合に、正面方向に対し、傾斜した方向である斜め方向に撮影対象部分の表面に向けて照射することをいうものである。
また、画像撮影部は、光照射部が第一発光部を用いて撮影対象部分の表面に向けて光を照射している間に撮影対象部分の表面の第一画像を撮影し、かつ、光照射部が第二発光部を用いて撮影対象部分の表面に向けて光を照射している間に撮影対象部分の表面の第二画像を撮影し、検出部は、第一画像及び第二画像を用いて、撮影対象部分中の境界凹部を検出することが好ましい。
また、光照射部が第一発光部を用いて撮影対象部分の表面に向けて光を照射している間、第二発光部の発光が停止し、光照射部が第二発光部を用いて撮影対象部分の表面に向けて光を照射している間、第一発光部の発光が停止することが好ましい。
また、検出部は、第一画像中、撮影対象部分において第一発光部からより離れている側の領域が写っている部分と、第二画像中、撮影対象部分において第二発光部からより離れている側の領域が写っている部分と、を合成して合成画像を作成し、合成画像に基づいて、撮影対象部分中の境界凹部を検出することが好ましい。
また、画像撮影部は、包装袋連続体の厚み方向において互いに反対向きから撮影対象部分を撮影する第一カメラ及び第二カメラを有し、第一カメラは、厚み方向における撮影対象部分の一つの表面の画像を撮影し、第二カメラは、厚み方向において一つの表面とは反対側に位置する撮影対象部分の他の表面の画像を撮影し、検出部は、第一カメラが撮影した画像と、第二カメラが撮影した画像とに基づいて、撮影対象部分中の境界凹部を検出することが好ましい。
また、検出部は、第一カメラが撮影した画像に写った境界凹部の候補を特定し、かつ、第二カメラが撮影した画像に写った境界凹部の候補を特定した後、第一カメラが撮影した画像、及び、第二カメラが撮影した画像の双方に共通して写った境界凹部の候補を、撮影対象部分中の境界凹部として検出することが好ましい。
また、包装袋連続体中の包装袋には薬剤が包装されており、画像撮影部は、薬剤が包装された包装袋の端部、及び端部に隣接する境界凹部が少なくとも位置する撮影対象部分の表面の画像を、撮影条件を変えて複数回撮影することが好ましい。
また、包装袋は、光透過性を有しており、画像撮影部は、薬剤が包装された包装袋のうち、薬剤を覆った部分と端部、及び端部に隣接する境界凹部が少なくとも位置する撮影対象部分の表面の画像を、撮影条件を変えて複数回撮影し、撮影条件を変えて撮影した複数の画像の各々に対して、画像中の薬剤の画像を除去するための除去処理を実行する除去処理実行部を有することが好ましい。
また、除去処理実行部は、画像撮影部が撮影した画像を構成する画素群を少なくとも一つの方向に沿って収縮及び膨張させることで得られる収縮膨張後の画像を、収縮膨張前の画像から除去することにより、画像中の薬剤の画像を除去する除去処理を実行することが好ましい。
また、境界凹部は、包装袋連続体の横幅方向において包装袋連続体の一端から他端に亘って形成された破線状の直線溝によって構成される切り取り線であることが好ましい。
また、前述の目的を達成するために、本発明の境界凹部の検出方法は、薬剤を包む包装袋が複数並んだ帯状の包装袋連続体において、包装袋間の境界位置に形成された境界凹部を検出する境界凹部の検出方法であって、包装袋連続体中、少なくとも境界凹部が位置する撮影対象部分の表面に向けて光を照射した状態で、撮影対象部分の表面の画像を、撮影条件を変えて複数回撮影する工程と、撮影条件を変えて撮影した複数の画像に基づき、撮影対象部分中の境界凹部を検出する工程と、を有することを特徴とする。
本発明の薬剤判定装置及び境界凹部の検出方法によれば、包装袋連続体において包装袋間の境界に設けられた境界凹部の位置を適切に検出することが可能である。この結果、包装袋に包まれた薬剤の適否を判定する際に、包装袋連続体の撮影範囲を正確に画定した上で、的確に判定を行うことが可能となる。
以下、本発明の薬剤判定装置及び薬剤判定方法について詳細に説明する。
以下に記載する構成要件の説明は、本発明の代表的な実施態様に基づいてなされることがあるが、本発明は、そのような実施態様に限定されるものではない。すなわち、以下の実施形態は、本発明の薬剤判定装置及び薬剤判定方法を分かり易く説明するための一例であるが、本発明を限定するものではない。また、当然ながら、本発明の主旨を逸脱しない範囲において、種々の改良又は変更を行ってもよい。
以下に記載する構成要件の説明は、本発明の代表的な実施態様に基づいてなされることがあるが、本発明は、そのような実施態様に限定されるものではない。すなわち、以下の実施形態は、本発明の薬剤判定装置及び薬剤判定方法を分かり易く説明するための一例であるが、本発明を限定するものではない。また、当然ながら、本発明の主旨を逸脱しない範囲において、種々の改良又は変更を行ってもよい。
なお、本明細書において、「薬剤」とは、固形物状の薬剤を意味し、具体的には錠剤及びカプセル剤が該当する。
<<薬剤処方作業について>>
本発明の一実施形態に係る薬剤判定装置(以下、薬剤判定装置10)について説明するにあたり、先ず、薬剤判定装置10を用いて行われる薬剤処方作業について概説する。薬剤処方作業では、図1に示すように処方箋入力作業、ピッキング作業、自動分包作業、調剤鑑査作業及び処方作業が順に行われる。図1は、薬剤処方作業の流れを示す図である。
本発明の一実施形態に係る薬剤判定装置(以下、薬剤判定装置10)について説明するにあたり、先ず、薬剤判定装置10を用いて行われる薬剤処方作業について概説する。薬剤処方作業では、図1に示すように処方箋入力作業、ピッキング作業、自動分包作業、調剤鑑査作業及び処方作業が順に行われる。図1は、薬剤処方作業の流れを示す図である。
処方箋入力作業では、処方箋に記載されている処方条件を、薬剤師がコンピュータ(以下、処方条件入力装置50)に入力する。ここで、処方条件とは、患者に対して薬剤を処方するために設定された条件である。入力される処方条件の内容は、例えば、患者の氏名、年齢、処方される薬剤の種類、種類別の処方数量等である。なお、以下の説明では、複数回の服用を前提とし、一服用分の処方数量が同一量であるとする。ただし、処方条件は、これに限定されるものではなく、一服用分のみの薬剤が処方されてもよい。また、一服用分の薬剤の種類及び処方数量が各回で異なってもよい。
ピッキング作業では、薬剤師が処方条件に基づき、処方条件に応じた種類の薬剤を、それぞれ処方条件に応じた数量の分だけ薬剤棚55からピッキングする。なお、ピッキング作業については、薬剤師が手作業で行う場合に限らず、公知の自動ピッキング装置が処方条件入力装置50に入力された処方条件に基づき自動的に行ってもよい。
また、本実施形態においてピッキングされる薬剤は、いずれも、その表面に識別情報が形成されているものである。「識別情報」とは、薬剤の種類(薬種)を識別するための文字、数字及び記号等であり、刻印あるいは印字によって形成されたものである。なお、本実施形態では、薬剤の表面に識別情報が刻印(凹部加工)によって形成されていることとする。ただし、ピッキングされる薬剤は、上記の実施形態に限定されるものではなく、ピッキングされる薬剤の中に識別情報が形成されていないものが含まれていてもよく、また、印字によって識別情報が形成された薬剤が含まれていてもよい。
自動分包作業では、ピッキング作業でピッキングされた薬剤を薬剤師が図1に図示の分包機60のトレイにセットし、分包機60がトレイ内の薬剤を自動的に分包する。この際、ピッキングされた薬剤は、一服用分毎にトレイにセットされ、複数の包装袋1のそれぞれに一服用分の薬剤が分包される。包装袋1は、公知の分包袋であり、光透過性を有する。包装袋1の材料としては、例えば、セロファンとポリエチレンとのラミネートフィルム及びポリエチレンフィルム等が挙げられる。
薬剤が分包された複数の包装袋1は、自動分包作業の終了時点において、図2に示すように連続して並んで帯状の包装袋連続体3を構成している。薬剤服用時には、患者は、包装袋連続体3から一袋分の包装袋1を切り離し、切り離した包装袋1に包まれた薬剤を服用する。図2は、包装袋連続体3を示した図である。
包装袋連続体3について説明すると、包装袋連続体3中の包装袋1(後述の空袋1Aを除く)には、ピッキングされた薬剤が包装されている。また、図2から分かるように、包装袋連続体3に包装袋3間の境界位置には、境界凹部としての切り取り線3yが形成されている。ここで、切り取り線3yは、破線状の直線溝によって構成されており、包装袋連続体3の横幅方向において包装袋連続体3の一端から他端に亘って形成されている。なお、境界凹部としては、切り取り線3yのほかに、包装袋連続体3の横幅方向端部に形成された三角形状、長方形状又は半楕円状等の切り込みが形成されていてもよい。
また、自動分包作業の終了時点において、包装袋連続体3の一端に位置する包装袋1は、図2に示すように空袋1Aとなっている。空袋1Aは、内部に薬剤が入っていない点を除き、薬剤を包んだ状態の包装袋1と共通している。なお、空袋1Aについては、包装袋連続体3の端以外の場所に設けられていてもよく、また、包装袋連続体3中に空袋1Aが含まれていなくてもよい。
調剤鑑査作業では、図1に図示の薬剤判定装置10を用いて、処方される薬剤が正しいかどうかを鑑査する。具体的には、薬剤判定装置10は、包装袋連続体3中の各包装袋1に包まれた薬剤の種類及び個数(厳密には、種類毎の個数)が、処方箋にて指示された内容どおりであるか否かを判定する。
処方作業は、患者(処方先)に対して、調剤鑑査作業で正しい(処方箋の内容に従っている)と判断された分包済みの薬剤の処方を行う。このとき、薬剤師は、包装袋連続体3の一端に位置する空袋1Aを取り外し、残った包装袋連続体3を患者に手渡す。
<<薬剤判定装置の構成>>
次に、薬剤判定装置10の構成について説明する。
薬剤判定装置10は、調剤鑑査用に用いられ、自動分包作業で包装袋1に包まれた薬剤の種類及び個数(厳密には、種類毎の個数)が正規の種類及び個数であるかどうかを判定する。ここで、正規の種類及び個数とは、処方箋で指示された(換言すると、処方条件として入力された)薬剤の種類及び種類別の個数であり、厳密には、一服用分の薬剤の種類及び種類別の個数である。
なお、包装袋連続体3中、空袋1Aを除く各包装袋1に包まれた(分包された)薬剤は、判定対象の薬剤に相当する。
次に、薬剤判定装置10の構成について説明する。
薬剤判定装置10は、調剤鑑査用に用いられ、自動分包作業で包装袋1に包まれた薬剤の種類及び個数(厳密には、種類毎の個数)が正規の種類及び個数であるかどうかを判定する。ここで、正規の種類及び個数とは、処方箋で指示された(換言すると、処方条件として入力された)薬剤の種類及び種類別の個数であり、厳密には、一服用分の薬剤の種類及び種類別の個数である。
なお、包装袋連続体3中、空袋1Aを除く各包装袋1に包まれた(分包された)薬剤は、判定対象の薬剤に相当する。
薬剤判定装置10は、図1に示すように、判定対象となる薬剤(詳しくは、各包装袋1に包まれた薬剤)の画像を撮影する機能を有する装置本体11と、装置本体11にて撮影された画像に基づいて調剤鑑査を行う機能を有する処理装置12と、によって構成されている。
装置本体11は、図1に図示の筐体13を有し、筐体13内に、図3に図示の搬送部14と配置部15と画像撮影部16と光照射部17とを有する。図3は、装置本体11の内部構造を示す概略図である。また、装置本体11の筐体13には、包装袋連続体3を装置本体11の内部に導入するための導入部13aと、装置本体11の内部に導入された包装袋連続体3を装置本体11の外に排出するための不図示の排出部と、が設けられている。
搬送部14は、装置本体11の内部に形成された搬送路18を備え、包装袋連続体3を搬送路18に沿って搬送するものである。導入部13aから装置本体11の内部に導入された包装袋連続体3は、搬送部14の搬送動作により、搬送路18の下流側に向かって移動し、やがて排出部を通過して装置本体11の外に排出される。ここで、「下流側」とは、搬送方向において排出部により近い側を意味し、上流側とは、下流側とは反対側、すなわち、搬送方向において導入部13aにより近い側を意味する。
なお、本実施形態において、搬送路18は、水平な経路となっており、搬送部14は、包装袋連続体3の長手方向が搬送路18(すなわち、搬送方向)に沿い、かつ、包装袋連続体3の厚み方向が上下方向(鉛直方向)に沿った状態で搬送する。
搬送部14は、図3に示すように、上流側駆動部14Uと下流側駆動部14Dとを有する。上流側駆動部14Uは、配置部15の上流側に配置されており、下流側駆動部14Dは、配置部15の下流側に配置されている。上流側駆動部14U及び下流側駆動部14Dの各々は、上下一対のニップローラ14a及び14bと、上下一対のニップローラ14a及び14bのうちの一方を回転駆動する不図示のモータと、を有する。上下一対のニップローラ14a及び14bは、包装袋連続体3が通れる程度の隙間を空けて並んでおり、ローラ間に包装袋連続体3を挟持した状態で回転する。これにより、包装袋連続体3は、若干のテンション(張力)が掛かった状態で搬送される。
また、本実施形態では、上記のモータが断続的に回転するように構成されている。このため、搬送部14は、間欠的に搬送動作を行うことになる。一回の搬送動作では、包装袋連続体3が搬送方向に沿って所定量だけ移動する。一回の搬送動作における包装袋連続体3の移動量(搬送量)については、後述する処理装置12の制御部21によって設定される。
なお、本実施形態の搬送部14は、上記のモータの回転方向を切り換えることにより、搬送方向の上流側及び下流側の双方に搬送することが可能である。搬送の向きについては、処理装置12の制御部21によって設定される。
また、本実施形態では、ローラの回転駆動を利用した搬送機構(すなわち、ローラコンベア)を用いることとしたが、包装袋連続体3を好適に搬送し得るものである限り、他の搬送機構を利用してもよく、例えば、無端状のベルトの上面に包装袋連続体3を載せた状態でベルトを回転駆動させて包装袋連続体3を搬送するベルトコンベアを用いてもよい。
配置部15は、判定対象の薬剤が包装袋1に包まれた状態で配置される部分であり、図3に示すように、搬送路18の途中位置に設けられている。配置部15は、矩形枠体状の台であり、包装袋1が一つ載る程度のサイズを有する。また、搬送部14による包装袋連続体3の搬送により、包装袋連続体3中、配置部15に配置される包装袋1が順次切り換わる。
なお、配置部15に配置された状態にある包装袋1の上面(装置本体11の上側を向く表面、以下同様。)については、その全領域が露出しており、また、包装袋1の下面(装置本体11の下側を向く表面、以下同様。)については、縁部以外の領域が露出している。包装袋1の縁部とは、包装袋1を構成するフィルムシートを二枚重ねて圧着することで形成されたシール部分のことである。
画像撮影部16は、配置部15に配置された包装袋1、及び、その包装袋1に包まれた薬剤(すなわち、判定対象の薬剤)の画像を撮影するものである。画像撮影部16は、図3に示すように、複数のカメラとして上下2つのカメラを有する。この2つのカメラは、包装袋連続体3の厚み方向(すなわち、上下方向)において互いに反対向きから、包装袋連続体3中の配置部15に配置された部分(すなわち、撮影対象部分3x)を撮影する。
具体的に説明すると、上下2つのカメラのうち、上側にあるカメラ(以下、第一カメラ16aと言う。)は、配置部15の直上位置に配置されており、包装袋連続体3の厚み方向における撮影対象部分3xの一つの表面、より詳しくは、配置部15に配置された包装袋1の上面の画像を上方から撮影する。下側のカメラ(以下、第二カメラ16bと言う。)は、配置部15の直下位置に配置されており、包装袋連続体3の厚み方向において一つの表面(つまり、第一カメラ16aが撮影する方の表面)とは反対側に位置する撮影対象部分3xの他の表面、より詳しくは、配置部15に配置された包装袋1の下面の画像を下方から撮影する。
なお、第一カメラ16a及び第二カメラ16bによって撮影された包装袋1(空袋1Aを除く)の画像には、薬剤の画像が含まれている。ここで、「薬剤の画像」とは、包装袋1越しに撮影された薬剤の画像を意味する。
本実施形態では、装置本体11は、搬送部14による搬送動作が間欠的に行われるように構成されており、画像撮影部16は、搬送動作の間に、配置部15に配置された包装袋1、及びその包装袋1に包まれた薬剤の画像を撮影する。そして、画像撮影部16は、搬送動作により配置部15に配置される包装袋1が切り換わる都度、配置部15に配置された包装袋1、及びその包装袋1に包まれた薬剤の画像を撮影する。
本実施形態において、第一カメラ16aの撮影範囲(画角)は、図4に示すように矩形領域(図4中、破線で示された矩形領域)であり、配置部15に配置された包装袋1の上面の全面と、その両側に位置する包装袋1の上面の一部(厳密には、端部分)と、を撮影可能な範囲に設定されている。換言すると、包装袋連続体3中、第一カメラ16aの撮影範囲内にある部分は、撮影対象部分3xに該当し、その部分には、図4に示すように、少なくとも包装袋3間の切り取り線3yが位置している。
なお、図4は、画像撮影部16の撮影範囲と、その範囲内に入っている包装袋連続体3の一部分を示す図である。
なお、図4は、画像撮影部16の撮影範囲と、その範囲内に入っている包装袋連続体3の一部分を示す図である。
同様に、下側のカメラ16bの撮影範囲(画角)は、矩形領域であり、配置部15に配置された包装袋1の下面のうち、配置部15の内側にあって露出している領域と、その両側に位置する包装袋1の下面の一部(厳密には、端部分)と、を撮影可能な範囲に設定されている。換言すると、包装袋連続体3中、第二カメラ16bの撮影範囲内にある部分は、撮影対象部分3xに該当し、その部分には、少なくとも包装袋1間の切り取り線3yが位置している。
なお、画像撮影部16は、被写体の画像データを取得する機能を有するものであればよく、例えば、CCD(Charge-Coupled Device)イメージセンサ又はCMOS(Complementary Metal Oxide Semiconductor)イメージセンサ等が挙げられるが、これらに限定されない。
また、本実施形態では、画像撮影部16が2台のカメラによって構成されていることとしたが、カメラの台数については、特に限定されるものではなく、1台のみであってもよく、あるいは、3台以上であってもよい。
また、本実施形態では、配置部15を上下に挟む位置にカメラが設置されていることとしたが、カメラの設置位置については、配置部15に配置された包装袋1、及びその包装袋1に包まれた薬剤の画像を良好に撮影し得る位置である限り、任意の位置に設定することが可能である。
また、本実施形態では、画像撮影部16が2台のカメラによって構成されていることとしたが、カメラの台数については、特に限定されるものではなく、1台のみであってもよく、あるいは、3台以上であってもよい。
また、本実施形態では、配置部15を上下に挟む位置にカメラが設置されていることとしたが、カメラの設置位置については、配置部15に配置された包装袋1、及びその包装袋1に包まれた薬剤の画像を良好に撮影し得る位置である限り、任意の位置に設定することが可能である。
光照射部17は、画像撮影部16が画像を撮影する際に、配置部15に配置された包装袋1、及びその包装袋1に包まれた薬剤(すなわち、判定対象の薬剤)に対して光を照射するものである。より詳しくは、光照射部17は、包装袋連続体3中、画像撮影部16の撮影範囲内にある部分(すなわち、撮影対象部分3xの表面)に向けて光を照射する。
光照射部17は、図5に示すように、複数の発光部を有しており、本実施形態では4つの発光部17a、17b、17c及び17dを有する。図5は、光照射部17が有する複数の発光部を上方から見たときの模式図である。4つの発光部17a、17b、17c及び17dは、光照射部17が光を照射する際に用いる光源であり、図5に示すように配置部15の四方のそれぞれに配置されている。そして、光照射部17は、4つの発光部17a、17b、17c及び17d(複数の発光部)を用いて、互いに異なる方向に光を照射する。
具体的に説明すると、2つの発光部17a及び17bは、搬送方向(すなわち、包装袋連続体3の長手方向)において、配置部15から見て互いに反対側の位置に配置されており、互いに反対向きに光を発する。すなわち、一方の発光部17a(以下、第一発光部17aと言う。)は、搬送方向上流側から、搬送方向下流側にある配置部15に向かって光を発する。もう一方の発光部17b(以下、第二発光部17bと言う。)は、搬送方向下流側から、搬送方向上流側にある配置部15に向かって光を発する。
4つの発光部17a、17b、17c及び17dのうち、残り2つの発光部17c及び17dは、搬送方向を横切る方向(以下では、交差方向)において配置部15から見て互いに反対側の位置に配置されており、互いに反対向きに光を発する。すなわち、一方の発光部17c(以下、第三発光部17cと言う。)は、交差方向において一方側から、他方側にある配置部15に向かって光を発する。もう一方の発光部17d(以下、第四発光部17dと言う。)は、交差方向において他方側から、一方側にある配置部15に向かって光を発する。ここで、「交差方向の一方側」とは、例えば、配置部15の交差方向一端に近い側を意味し、「交差方向の他方側」とは、配置部15の交差方向他端側に近い側を意味する。
光照射部17は、上記4つの発光部17a、17b、17c及び17dの一部又は全部を用いて、配置部15に配置された包装袋1、及びその包装袋1に包まれた薬剤に対して光を照射する。このとき、光照射部17は、図6から分かるように、撮影対象部分3xの表面に向けて光を斜め方向から照射する。これは、薬剤の表面に対して斜め方向から光を当てた場合、薬剤の表面に形成された識別情報の輪郭(特に、輪郭のうち、光の照射先にあるエッジ部分)を際立たせることができるからである。
図6は、包装袋1に光が照射される様子を示した図であり、包装袋1、画像撮影部16及び光照射部17を側方から示した模式図である。
図6は、包装袋1に光が照射される様子を示した図であり、包装袋1、画像撮影部16及び光照射部17を側方から示した模式図である。
また、本実施形態では、画像撮影部16が画像を撮影する際に光照射部17が用いる発光部17a、17b、17c及び17dを切り換えることが可能である。具体的に説明すると、光照射部17は、4つの発光部17a、17b、17c及び17dのうちの一つを用いて光を照射する。このとき、他の発光部は、停止しており、光を発していない。例えば、光照射部17が第一発光部17aを用いて撮影対象部分3xの表面に向けて光を照射している間、第二発光部17b、第三発光部17c及び第四発光部17dの各々の発光は、停止している。同じく、光照射部17が第二発光部17bを用いて撮影対象部分3xの表面に向けて光を照射している間、第一発光部17a、第三発光部17c及び第四発光部17dの各々の発光は、停止している。
光照射部17が一つの発光部から光を照射している間に、画像撮影部16は、配置部15に配置された包装袋1に包まれた薬剤の画像を一回撮影する。その後、光照射部17は、発光部17a、17b、17c及び17dのうち、直前に使用していた発光部を別の発光部に切り換え、切り換え後の発光部17a、17b、17c又は17dを用いて光を照射する。その間に、画像撮影部16が、配置部15に配置された包装袋1に包まれた薬剤の画像を再度撮影する。
以降、同様の手順にて光照射部17が発光部17a、17b、17c及び17dを順次切り換え、光照射部17が発光部17a、17b、17c及び17dを切り換える度に、画像撮影部16が、配置部15に配置された包装袋1に包まれた薬剤の画像を撮影する。この結果、配置部15に配置された一つの包装袋1に包まれた薬剤に対して、光の照射方向別の画像(つまり、薬剤表面各部における光の反射具合が異なる4つの画像)が撮影されることになる。
以上のように、本実施形態では、画像撮影部16が包装袋連続体3中の撮影対象部分3xの表面に向けて光を照射した状態で、撮影対象部分3xの表面の画像を、撮影条件を変えて複数回撮影する。ここで、撮影条件とは、画像撮影部16が画像撮影時に用いるカメラ、及び、光照射部17が光照射時に用いる発光部等が該当する。
より具体的に説明すると、光照射部17は、撮影条件を変えるにあたり、第一発光部17a、第二発光部17b、第三発光部17c及び第四発光部17dのうち、光を照射する際に用いる発光部を変える。また、画像撮影部16は、撮影条件を変えるにあたり、第一カメラ16a及び第二カメラ16bのうち、画像を撮影する際に用いるカメラを変える。そして、画像撮影部16が撮影条件を変えて(撮影条件別に)撮影対象部分3xの画像を撮影した結果、包装袋連続体3中の各包装袋1に対して計8枚(カメラの台数×発光部の個数)の画像が撮影されることになる。
また、本実施形態では、図5に示すように、搬送方向(換言すると、包装袋連続体3の長手方向)において第一発光部17aが配置部15よりも上流側に位置し、かつ、第二発光部17bが配置部15よりも下流側に位置している。また、配置部15の直上位置に第一カメラ16aが配置されており、かつ、配置部15の直下位置に第二カメラ16bが配置されている。このような位置関係により、画像撮影部16は、搬送方向において第一発光部17a及び第二発光部17bの間に撮影対象部分3xが位置している状態で、撮影対象部分3xの表面の画像を撮影することになる。
ここで、撮影対象部分3xには、前述したように、配置部15に配置された包装袋1(厳密には、空袋1A以外の、薬剤が包装された包装袋1)の端部、及び、その端部に隣接する切り取り線3yが位置している。より詳しく説明すると、撮影対象部分3xは、配置部15に配置された包装袋1のうち、薬剤を覆った部分と、搬送方向における両端部と、それぞれの端部に隣接する切り取り線3yと、が少なくとも位置している部分である。そして、画像撮影部16は、撮影対象部分3xの表面の画像を、撮影条件を変えて複数回撮影する。
ここで、画像撮影部16が撮影した撮影対象部分3xの表面の画像について説明すると、図7A及び図7Bに示すように、画像には、配置部15に配置された包装袋1、その包装袋1の両脇に位置する切り取り線3y、及び包装袋1に包まれた状態の薬剤fの各々が写っている。図7A及び図7Bは、画像撮影部16によって撮影された画像の一例である。
なお、図7Aに示す画像と、図7Bに示す画像とは、互いに異なる撮影条件の下で撮影された画像である。図7Aに示す画像は、光照射部17が第一発光部17aを用いて撮影対象部分3xの表面に向けて光を照射している間に画像撮影部16が撮影した撮影対象部分3xの表面の画像であり、以下では、「第一画像」と呼ぶこととする。他方、図7Bに示す画像は、光照射部17が第二発光部17bを用いて撮影対象部分3xの表面に向けて光を照射している間に画像撮影部16が撮影した撮影対象部分3xの表面の画像であり、以下では、「第二画像」と呼ぶこととする。
ちなみに、光照射部17が光照射用に用いる発光部17a、17b、17c及び17dとしては、公知の光源が利用可能であり、点光源、線光源及び面光源のうちのいずれを用いてもよい。具体的には、例えば、LED(Light Emitting Diode)、半導体レーザ(LD:Laser Diode)、及び有機EL(Electro-luminescence)などの電界発光によるもの、ハロゲン電球及び白熱電球などの放射熱によるもの、水銀灯及び蛍光灯などの放電発光によるもの、並びにこれらの光源と導光板又は光ファイバ等の導光部材とを組み合わせたものが利用可能である。
また、本実施形態では、光照射部17が4つの発光部17a、17b、17c及び17dを有することとしたが、発光部の台数については特に限定されるものではなく、2つ以上設けられていればよい。
処理装置12は、調剤鑑査を実施するにあたり、一連の情報処理を実行するものであり、本実施形態では、装置本体11に外付けされたパーソナルコンピュータ(PC)によって構成されている。ただし、これに限定されるものではなく、装置本体11に内蔵されたコンピュータによって処理装置12が構成されていてもよい。
また、処理装置12は、装置本体11、処方条件入力装置50、及び後述するデータベースサーバ70と通信可能に接続されている。なお、処理装置12と各機器との接続方式については有線接続方式であってもよく、若しくは無線接続方式であってもよい。
また、処理装置12は、図8に示すように、制御部21、処方条件情報取得部22、画像取得部23、前処理部24、判定部25、検出部27及び除去処理実行部28を有する。図8は、処理装置12の構成を示すブロック図である。これらの各部は、処理装置12が備える不図示のCPU(Central Processing Unit)及びメモリ等のハードウェア機器と、処理装置12に格納された情報処理プログラムとが協働することで実現される。この情報処理プログラムは、同プログラムが記憶されたCD-ROM(Compact Disc Read Only Memory)等の記録媒体から読み出して取得してもよく、あるいは、所定のサイトからネットワーク経由でダウンロードして取得してもよい。
なお、本実施形態では、処理装置12の各機能部(具体的には、制御部21、処方条件情報取得部22、画像取得部23、前処理部24、判定部25、検出部27及び除去処理実行部28)が一台のパーソナルコンピュータによって構成されているが、これに限定されるものではなく、上記の機能部のうちの一部が一台のパーソナルコンピュータによって構成されており、残りの機能部が別のパーソナルコンピュータによって構成されていてもよい。
なお、本実施形態では、処理装置12の各機能部(具体的には、制御部21、処方条件情報取得部22、画像取得部23、前処理部24、判定部25、検出部27及び除去処理実行部28)が一台のパーソナルコンピュータによって構成されているが、これに限定されるものではなく、上記の機能部のうちの一部が一台のパーソナルコンピュータによって構成されており、残りの機能部が別のパーソナルコンピュータによって構成されていてもよい。
制御部21は、装置本体11に搭載された駆動制御回路11aを介して装置本体11各部(具体的には、搬送部14、画像撮影部16、及び光照射部17)と電気的に接続されており、装置各部を制御する。より詳しく説明すると、制御部21は、搬送部14の搬送動作に関して、一回の搬送動作における搬送量、搬送の向き、及び搬送動作のタイミング等を制御する。また、制御部21は、画像撮影部16の撮影動作に関して、画像撮影部16が有する2台のカメラ16a及び16bの中で使用するカメラ、及び画像撮影のタイミング等を制御する。また、制御部21は、光照射部17の光照射動作に関して、光照射部17が有する4つの発光部17a、17b、17c及び17dの中で使用する発光部、及び光照射のタイミング等を制御する。
処方条件情報取得部22は、処方条件入力装置50と通信可能に接続されており、処方条件入力装置50と通信することにより、処方条件情報を取得する。ここで、処方条件情報とは、処方条件を示す情報であり、具体的には、薬剤師が処方条件入力装置50に入力した処方条件を示す電子データである。
なお、本実施形態では、処方条件入力装置50において処方条件の入力が完了すると、処方条件入力装置50から処方条件情報取得部22に向けて処方条件情報が自動的に送られ、処方条件情報取得部22が上記の処方条件情報を受信する。ただし、これに限定されるものではなく、処方条件情報取得部22から情報送信要求が送られ、この要求を処方条件入力装置50が受け付けた時点で処方条件入力装置50が処方条件情報を送信してもよい。より具体的に説明すると、処方条件を特定するための文字列情報、あるいは二次元バーコード情報が包装袋連続体3の先端部(包装袋連続体3中、最初に装置本体11内に導入される部分)に印刷されており、包装袋連続体3が装置本体11内に導入された際に処方条件情報取得部22が上記の印刷情報を読み取る。その後、処方条件情報取得部22は、読み取った印刷情報に基づき、装置本体11内に導入された包装袋連続体3中の各包装袋1に分包された薬剤に係る処方条件を示す処方条件情報を、処方条件入力装置50に対して要求する。この要求を受け付けた処方条件入力装置50は、要求を解析し、要求に係る処方条件情報を特定し、特定した処方条件情報を処理装置12に向けて送信する。
画像取得部23は、画像撮影部16(厳密には、第一カメラ16a及び第二カメラ16b)と接続されており、ネットワークを介して、画像撮影部16が撮影した画像を取得する。ここで、画像取得部23が取得する画像とは、画像データのことであり、具体的には、JPEG(JointPthotographic ExpertsGroup)形式、GIF(Graphics Interchange Format)形式、PNG(PortableNetwork Graphics)形式、TIFF(TaggedImage File Format)形式、及びBMP(Bitmap Image)形式等の画像データである。
なお、画像取得部23は、画像撮影部16が画像を撮影する度、画像撮影部16から画像を取得する。より詳しく説明すると、本実施形態では、前述したように、薬剤が分包された一つの包装袋1につき、画像が撮影条件を変えて(撮影条件別に)複数回(具体的には8回)撮影される。したがって、画像取得部23は、各包装袋1及びその包装袋1に包まれた薬剤について、撮影条件を変えて複数の画像(すなわち、撮影条件別の8枚の画像)を取得することになる。
また、配置部15に配置される包装袋1が切り換わると、画像撮影部16が撮影条件を変えて新たに画像を撮影するため、これに伴って、画像取得部23が、新たに撮影された撮影条件が異なる複数の画像を取得することになる。
前処理部24は、画像取得部23が画像撮影部16から取得した画像(つまり、判定対象の薬剤の画像データ)に対して前処理を実行する。前処理とは、画像取得部23が取得した画像に写った薬剤の表面に形成された識別情報を強調するための処理である。
具体的に説明すると、本実施形態では、前述したように、一つの包装袋1に包まれた薬剤に対して、画像を光の照射方向を変えて複数回(具体的には、4回)撮影する。ここで、光の照射方向別の画像のそれぞれでは、画像に写った薬剤の表面において光の照度ムラが生じている。こうした光の照度ムラは、薬剤の表面に形成された識別情報を検出及び特定する際に影響を及ぼす。また、光の照度ムラは、光の照射方向に応じて異なる。そこで、前処理部24は、前処理を実行し、光の照射方向別に撮影した画像を用い、薬剤の表面にある識別情報を強調するために、各画像に写った識別情報の輪郭(エッジ)中、光の照射方向との関係で際立っている部分を合成する。あるいは、前処理部24は、光の照射方向別に撮影した画像に対して照度差ステレオ法を適用し、各画像における光の照射方向を考慮しつつ、各画像に共通して写った識別情報を際立たせるための画像合成を行う。
以上の前処理が実施された画像は、光の照射方向に応じて変化する光の照度ムラが極力排除され、画像に写った薬剤の表面に形成されている識別情報が強調された画像となる。
判定部25は、配置部15に配置された包装袋1に包まれた薬剤(すなわち、判定対象の薬剤)の個数及び種類が、処方条件情報取得部22が取得した処方条件情報から特定される薬剤の数量及び種類と一致するかを判定するものである。
判定部25によって行われる判定の具体的な手順について、図9を参照しながら説明する。図9は、判定部25による判定フローの大まかな流れを示す図である。判定部25による判定フローでは、図9に示すように、先ず、前処理が実施された画像から、判定対象の薬剤が写っている領域を特定する工程が行われる(S001)。以下では、前処理が実施された画像を「前処理後画像」と呼ぶこととし、前処理後画像の中で薬剤が写っている領域を「薬剤存在領域」と呼ぶこととする。
薬剤存在領域特定工程S001では、前処理後画像に対して公知のエッジ抽出処理及びセグメンテーション処理を行い、画像内の薬剤の輪郭を特定する。そして、特定された輪郭に囲まれた領域を薬剤存在領域として特定する。前処理後画像に複数の薬剤が写っている場合には、薬剤の個数だけ薬剤存在領域を特定する。
薬剤存在領域特定工程S001の実施後、判定部25は、前処理後画像を構成する画素群の中から、薬剤存在領域に該当する画素群を抽出する(S002)。抽出された画素群は、図10に示すように、薬剤存在領域を取り囲む矩形(図10中の符号Xが付された矩形領域)をなしている。以下では、抽出された画素群を「薬剤抽出画像X」と呼ぶこととする。なお、薬剤存在領域特定工程S001において複数の薬剤存在領域を特定した場合には、薬剤存在領域別に薬剤抽出画像Xを特定することになる。
ちなみに、図10は、薬剤抽出画像Xの説明図である。なお、図10に図示の画素サイズ(画像に対する画素1つあたりの大きさ)は、図示の都合上、実際の画素サイズよりも大きく描かれている。
ちなみに、図10は、薬剤抽出画像Xの説明図である。なお、図10に図示の画素サイズ(画像に対する画素1つあたりの大きさ)は、図示の都合上、実際の画素サイズよりも大きく描かれている。
また、画素群抽出工程S002では、薬剤抽出画像Xのサイズ及び位置を特定する。ここで、薬剤抽出画像Xのサイズは、薬剤抽出画像Xをなす矩形状の画素群の面積であり、図10に図示した二辺の長さd1、d2の積に相当する。
また、薬剤抽出画像Xの位置は、基準位置を原点とし、搬送方向及び交差方向を座標軸方向としたときの座標位置であり、具体的には、薬剤抽出画像Xをなす矩形状の画素群の対角線の交点位置であり、図10に図示の点Pの座標に相当する。このように薬剤抽出画像Xの位置を特定することにより、画像撮影部16の撮影範囲(厳密には、第一カメラ16a及び第二カメラ16bのそれぞれの画角)に対する、判定対象の薬剤の撮影位置(配置位置)を特定することが可能となる。なお、本実施形態では、原点とする基準位置は、画像撮影部16(厳密には、第一カメラ16a及び第二カメラ16b)の撮影範囲の中央位置に設定されているが、これに限定されるものではなく、任意の位置に設定してもよい。
画素群抽出工程S002の実施後、判定部25は、処方条件情報取得部22を用いて取得した処方条件情報から、処方すべき薬剤の種類を特定し、特定した種類の薬剤のマスタ画像をデータベースDBから読み出す工程を行う(S003)。本工程S003では、処方すべき薬剤の種類が複数ある場合、すなわち、複数種類の薬剤が包装袋1に分包される場合には、種類別にマスタ画像を読み出す。
ここで、マスタ画像について説明すると、マスタ画像は、薬剤の種類に対応させて登録された薬剤の画像であり、処方条件情報から特定される種類の薬剤について予め登録された画像である。また、本実施形態において、マスタ画像は、包装袋1に包まれた状態で撮影された薬剤の画像となっている。また、判定部25による判定が過去に行われたことがある薬剤の種類については、その種類の薬剤を画像撮影部16が過去に撮影した撮影画像(厳密には、薬剤抽出画像X)のうち、処方条件と合致するという判定結果が得られたときの撮影画像がマスタ画像として登録される。
データベースDBについて説明すると、図11に示すように、データベースDBは、各薬剤のマスタ画像と薬剤の種類とを互いに対応付けて登録したものである。図11は、マスタ画像が登録されたデータベースDBの説明図である。
また、データベースDBには、マスタ画像のほかに、薬剤名称、薬剤の表面に形成された識別情報、薬剤のサイズとしての平面視サイズ及び厚みが薬剤の種類と対応付けて登録されている。なお、データベースDBに登録される情報については、上記の情報に限定されるものではなく、上記の情報以外の情報が登録されていてもよい。
また、本実施形態において、データベースDBは、外部のデータベースサーバ70に設けられており、判定部25は、データベースサーバ70と通信してデータベースDBにアクセスする。ただし、本発明は、これに限定されるものではなく、データベースDBが処理装置12に設けられてもよく、すなわち、処理装置12内の記憶媒体に記憶されていてもよい。
マスタ画像をデータベースDBから読み出した後、判定部25は、読み出したマスタ画像と、画像撮影部16が撮影した判定対象の薬剤の画像(厳密には、薬剤抽出画像X)とを用いて、判定対象の薬剤の種類がマスタ画像に写った薬剤の種類(つまり、取得した処方条件情報から特定される薬剤の種類)と一致するかを判定する(S004)。具体的に説明すると、判定工程S004では、マスタ画像と薬剤抽出画像Xとのテンプレートマッチングを行い、マスタ画像に写った薬剤と薬剤抽出画像Xに写った薬剤(すなわち、判定対象の薬剤)との間の類似度を評価する。類似度の評価方法については、公知のジオメトリックハッシング法又はLLHA(Locally Likely Arrangement Hashing)法が利用可能である。そして、類似度が基準値以上である場合、判定部25は、薬剤抽出画像Xに写った薬剤の種類がマスタ画像に写った薬剤の種類と一致すると判定する。
なお、薬剤抽出画像Xが複数ある場合には、薬剤抽出画像X毎に類似度の評価を行う。また、判定部25は、薬剤の種類別に、薬剤抽出画像Xに写った画像のうち、マスタ画像に写った薬剤の種類と一致すると判定されたものの個数(以下、薬種一致数と言う。)を計数する。そして、判定部25は、種類別に計数した薬種一致数が処方条件情報から特定される種類別の処方数量と同数であるかを判定する。
以上までに説明した手順にて、判定部25による判定が行われる。そして、配置部15に配置される包装袋1が切り換わると(すなわち、判定対象の薬剤が変わると)、その度に判定が繰り返し行われる。つまり、配置部15に配置される包装袋1が切り換わり、その包装袋1に包まれた薬剤の画像が取得されると、新たに取得した画像を用いて判定が行われる。なお、包装袋連続体3中の各包装袋1に同一の処方条件で薬剤が分包される場合、2回目以降の判定では、1回目の判定で用いたマスタ画像をそのまま流用できるので、マスタ画像をデータベースDBから読み出す工程S003を省いてもよい。
以上までに説明してきた手順により、包装袋連続体3中の各包装袋1(厳密には、空袋1A以外の包装袋1)に包まれた薬剤に対して判定が行われることで、それぞれの包装袋1に薬剤が処方箋の指示どおりに正しく分包されているどうかを確認(鑑査)することが可能である。
検出部27は、筐体13内に導入された包装袋連続体3において包装袋1間の境界位置に形成された切り取り線3y(境界凹部)を、検出するものである。検出部27による切り取り線3yの検出は、包装袋1に包まれた薬剤の適否を判定部25が判定するにあたり、包装袋連続体3中の撮影範囲を画定するために行われる。
より分かり易く説明すると、例えば、切り取り線3yが検出されないまま画像撮影部16が撮影対象部分3xの画像を撮影してしまうと、包装袋連続体3中の各包装袋1が正規の位置からずれた状態で画像が撮影される場合がある。かかる場合には、撮影画像が切り取り線3yを跨いだ画像となってしまい、隣接する2つの包装袋1のそれぞれに分包された薬剤が一画像中に共に写ってしまう虞がある。このため、本実施形態では、判定部25による判定が行われる前に、検出部27が包装袋連続体3における切り取り線3yを検出する。
また、本実施形態において、検出部27は、画像取得部23が取得した撮影条件が異なる画像(換言すると、画像撮影部16が撮影した撮影条件が異なる画像)に基づいて、包装袋連続体3における撮影対象部分3x中の切り取り線3yを検出する。なお、切り取り線3yの具体的な検出手順については、後に詳しく説明することとする。
除去処理実行部28は、検出部27が切り取り線3yを検出する際に用いる画像に対して、その画像中の薬剤の画像を除去する除去処理を実行するものである。検出部27は、除去処理実行部28によって除去処理が実行された画像(すなわち、薬剤の画像が除去された画像)に基づいて、撮影対象部分3x中の切り取り線3yを検出する。なお、除去処理の詳細については、切り取り線3yの検出手順とともに後述することとする。
<<切り取り線の検出方法>>
次に、本実施形態における切り取り線3yの検出方法について説明する。なお、切り取り線3yの検出方法は、本発明の境界凹部の検出方法に該当する。そして、後述する切り取り線3yの検出工程を含めた薬剤判定装置10の基本動作では、本発明の境界凹部の検出方法が利用されている。
次に、本実施形態における切り取り線3yの検出方法について説明する。なお、切り取り線3yの検出方法は、本発明の境界凹部の検出方法に該当する。そして、後述する切り取り線3yの検出工程を含めた薬剤判定装置10の基本動作では、本発明の境界凹部の検出方法が利用されている。
本実施形態における切り取り線3yの検出方法について説明するにあたり、先ず、従来における切り取り線3yの検出に関する問題について説明する。切り取り線3yを検出する一般的な方法では、画像撮影部16によって撮影対象部分3xの画像を撮影し、その撮影画像に写っている切り取り線3yを検出する。また、画像撮影時には、光照射部17が撮影対象部分3xに向けて光を照射する。光照射部17が照射した光が撮影対象部分3x中の切り取り線3yに達すると、切り取り線3yにて光が乱反射する。したがって、撮影画像では、図7A及び図7Bに示すように、切り取り線3yが形成されている箇所の輝度(明るさ)が高くなる。
一方、包装袋1には薬剤が包装されているので、包装袋1の表面のうち、切り取り線3yの近傍に位置する部分は、包装袋連続体3において切り取り線3yが形成された部分よりも隆起している。このため、光照射部17が撮影対象部分3xに向けて照射した光の一部は、図6に示すように、包装袋1の表面の、切り取り線3y近傍で隆起している箇所(図6中、記号Rf1が付された箇所)にて反射する。その反射光は、画像撮影部16によって撮影される。この結果、撮影画像では、図7A及び図7Bに示すように、切り取り線3y近傍に輝度が周囲より高い線が発現する。そして、この線(以下、偽切り取り線3r)を切り取り線3yとして誤検出してしまう可能性がある。
以上のように、画像撮影部16によって撮影した撮影対象部分3xの画像から切り取り線3yを検出する場合には、偽切り取り線3rを誤って検出することを回避する必要がある。そのため、本実施形態では、画像撮影部16が撮影した撮影条件が異なる画像を用いて、包装袋連続体3における撮影対象部分3x中の切り取り線3yを検出する。そして、本実施形態の検出方法によれば、偽切り取り線3rの誤検出を回避して、切り取り線3yを正確に検出することが可能となる。以下、切り取り線3yの検出手順について、既出の図6、並びに図12~図16を参照しながら説明する。
図12は、検出部27が切り取り線3yを検出する工程(以下、切り取り線検出工程)の流れを示す図である。図13は、後述する合成画像の一例である。図14は、画像の収縮膨張処理の流れについての説明図(画像)である。図15は、除去処理実行部28によって除去処理が実施された画像の一例である。図16は、除去処理が実施された画像における、画像の端位置からの距離と階調合計値との対応関係を示す図である。図16の横軸は、搬送方向における画像の端位置(具体的には、搬送方向上流側により近い方の端位置)からの距離を画素(pixel)単位で表しており、縦軸は、同距離にある画素の階調値(濃さ)を合計した値を表している。
切り取り線検出工程において、検出部27は、画像撮影部16が撮影した撮影条件が異なる画像のうち、前述した第一画像及び第二画像を用いて、撮影対象部分3x中の切り取り線3yを検出する。より詳しく説明すると、検出部27は、第一画像として、光照射部17が第一発光部17aを用いて撮影対象部分3xの表面に向けて光を照射している間に画像撮影部16が第一カメラ16aを用いて撮影した撮影対象部分3xの表面の画像を用いる。また、検出部27は、第二画像として、光照射部17が第二発光部17bを用いて撮影対象部分3xの表面に向けて光を照射している間に画像撮影部16が第一カメラ16aを用いて撮影した撮影対象部分3xの表面の画像を用いる。
切り取り線検出工程では、図12に示すように、先ず、検出部27が第一画像及び第二画像の各々から一定の領域を選択する(S051)。具体的に説明すると、検出部27は、搬送方向に相当する方向(すなわち、画像の横方向)に第一画像を二分し、第一画像中、搬送方向下流側に近い方の部分を選択する。なお、第一画像中、搬送方向下流側に近い方の部分は、撮影対象部分3xにおいて第一発光部17aからより離れている側の領域が写っている部分に該当する。
同様に、検出部27は、第二画像を画像の横方向に二分し、第二画像中、搬送方向上流側に近い方の部分を選択する。なお、第二画像中、搬送方向上流側に近い方の部分とは、撮影対象部分3xにおいて第二発光部17bからより離れている側の領域が写っている部分である。
検出部27が第一画像及び第二画像の各々の、画像撮影時に光照射部17が用いた発光部17a又は17bからより離れている部分を選択する理由について説明すると、選択した部分では、上述の偽切り取り線3rが発現し難いからである。より詳しく説明すると、配置部15に配置された一つの包装袋1と、その包装袋1の両側に設けられた切り取り線3yと、が撮影対象部分3xに入っている状態で、光照射部17が光を撮影対象部分3xに向けて照射する。この場合、図6に示すように、そのときに光を発している発光部17a又は17bにより近い方の切り取り線3y及びその近傍にある箇所(図6中、記号Rf1が付された箇所)では、光が反射し、その反射光を画像撮影部16が撮影する。この結果、撮影画像中、光を発している発光部17a又は17bにより近い部分では、偽切り取り線3rが発現し易くなる。
これに対して、上記の包装袋1において、光照射部17が用いる発光部17a又は17bからより離れている側で隆起している箇所(図6中、記号Rf2が付された箇所)で光が反射したとしても、図6に示すように、その反射光は、画像撮影部16に到達しない。それ故に、撮影画像のうち、光を発する発光部17a又は17bからより離れている部分には、偽切り取り線3rが発現し難くなる。このような性質に鑑みて、検出部27は、第一画像及び第二画像の各々の、画像撮影時に光照射部17が用いた発光部17a又は17bからより離れている部分を用いて、撮影対象部分3x中の切り取り線3yを検出する。
切り取り線検出工程についての説明に戻ると、検出部27は、第一画像及び第二画像の各々の、前ステップS051にて選択した部分同士を合成して、合成画像を作成する(S052)。この合成画像は、第一画像中の搬送方向下流側半分と、第二画像中の搬送方向上流側半分とによって構成されている。したがって、合成画像には、前述した理由から偽切り取り線3rが発現しておらず、図13に示すように、包装袋1内に包まれた薬剤及び切り取り線3yが主に写っている。そして、検出部27は、合成画像に基づいて、撮影対象部分3x中の切り取り線3yを検出する。
合成画像作成後の流れについて具体的に説明すると、除去処理実行部28が合成画像に対して除去処理を実施する(S053)。本実施形態において、除去処理は、画像処理技術としての収縮膨張技術を適用して行われる。すなわち、除去処理実行部28は、合成画像を構成する画素群を少なくとも一つの方向に沿って収縮及び膨張させることで得られる収縮膨張後の画像を、収縮膨張前の画像から除去することにより、合成画像中の薬剤の画像を除去する除去処理を実行する。
除去処理の流れについて図14を参照しながら説明する。なお、図14には、収縮膨張の手順を分かり易く説明する理由から、合成画像ではなく、画像撮影部16が撮影した画像(厳密には、撮影画像をRGB(Red Green Blue)画像からグレースケール画像に変換したもの)を載せている。
図14の上段にある画像は、収縮膨張前の画像を示している。この画像を構成する画素群を、搬送方向に相当する方向(すなわち、画像の横方向)に沿って収縮させると、図14の中段にある画像のように、収縮膨張前の画像において交差方向に相当する方向(すなわち、画像の縦方向)に延びる線等が消えた画像(収縮後画像)が得られる。ここで、収縮させるとは、画像中の各画素を白黒二値化したときに、対象画素の周辺にある画素のいずれかが黒である場合に対象画素を黒にして1画素分縮めることを意味する。
その後、収縮後画像を構成する画素群を画像の横方向に沿って膨張させると、図14の下段にある画像のように、収縮後画像に写る薬剤及び切り取り線3y等の縦線が横方向において収縮前のサイズとなった画像(収縮膨張後画像)が得られる。ここで、膨張させるとは、画像中の各画素を白黒二値化したときに、対象画素の周辺にある画素のいずれかが白である場合に対象画素を白にして1画素分膨らませることを意味する。
なお、本実施形態では、搬送方向に相当する方向(すなわち、画像の横方向)に沿って収縮及び膨張することとしたが、これに限定されるものではなく、交差方向に相当する方向(すなわち、画像の縦方向)に沿って収縮及び膨張してもよく、また、一つの方向のみではなく、複数の方向に沿って収縮及び膨張してもよい。
そして、収縮膨張前画像から収縮膨張後画像を除去する(換言すると、両画像の差分画像を取得する)と、収縮膨張前画像中の薬剤の画像が除去されることになる。以上のような手順によって除去処理が合成画像に対して行われると、図15に示すように、切り取り線3yのみが写った合成画像が得られる。なお、図15に示した合成画像は、除去処理後の合成画像を構成する画素群を画像の横方向に沿って膨張させた画像となっている。
除去処理が終了すると、検出部27は、除去処理後の合成画像(すなわち、薬剤の画像が除去された合成画像)に基づいて、撮影対象部分3x中の切り取り線3yを検出する(S054)。除去処理後の合成画像から切り取り線3yを検出する方法としては、例えば、除去処理後の合成画像を構成する各画素の位置と階調値(濃さ)との関係を特定して、切り取り線3yを検出する方法が挙げられる。
具体的に説明すると、検出部27は、除去処理後の合成画像を構成する画素のうち、合成画像の端位置からの距離が等しい位置にある複数の画素を、一つの画素列(画像の縦方向に沿った列)とする。そして、検出部27は、画素列中の各画素の階調値を、画素列中の画素の個数分だけ合計する。この合計値(以下、合計階調値)を、除去処理後の合成画像に存在する画素列の個数分だけ求めると、図16に図示したような、画素列の位置と合計階調値との対応関係が特定される。
検出部27は、特定した対応関係に基づき、周囲の画素列よりも合計階調値が高く、かつ、その合計階調値が閾値を超えている画素列を特定する。例えば、図16に図示のケースであれば、合成画像の端位置からの距離が同図の矢印が指す距離となった画素列が特定される。そして、検出部27は、撮影対象部分3xのうち、特定した画素列に該当する部分を切り取り線3yとして検出する。なお、検出部27は、一つの撮影対象部分3xの画像(厳密には、合成画像)から、撮影対象部分3x中にある2本の切り取り線3yを検出する。
また、検出部27は、検出した2本の切り取り線3yの間隔(図16にて記号wにて示す距離)を算出し、その算出結果を制御部21に送信する。制御部21は、検出部27から送られてきた切り取り線3yの間隔の算出結果に基づき、搬送部14を制御する。より具体的に説明すると、制御部21は、一回の搬送動作における搬送量を、切り取り線3yの間隔の算出結果に応じた量に設定する。
以上までに切り取り線3yを検出する手順の一例を説明したが、上述した手順以外の手順にて切り取り線3yを検出してもよい。以下、図17を参照しながら、切り取り線3yを検出する手順の変更例について説明する。図17は、切り取り線3yを検出する手順についての変更例を示す図である。
変更例に係る切り取り線検出工程において、検出部27は、画像撮影部16が撮影した撮影条件が異なる画像のうち、画像撮影部16が第一カメラ16aによって撮影した画像(以下、上面画像Js)と、画像撮影部16が第二カメラ16bによって撮影した画像(以下、下面画像Jb)を用いて、撮影対象部分3x中の切り取り線3yを検出する。ここで、検出部27が用いる上面画像Js及び下面画像Jbは、いずれも、光照射部17が同じ発光部17a、17b、17c又は17dから光を照射している間に撮影された画像である。
なお、図17に示すように、上面画像Js及び下面画像Jbには、薬剤f及び切り取り線3yが写っている他、画像撮影時に光を発していた発光部に近い方の端部に偽切り取り線3rが発現している。上面画像Jsと下面画像Jbとを比較すると、図17に示すように、切り取り線3yが上面画像Jsと下面画像Jbとの間で同じ位置に写っているのに対し、偽切り取り線3rは、互いに異なる位置に写っている。これは、包装袋1の上面と下面とでは、光照射部17からの照射光が反射する箇所が異なるからである。
変更例に係る切り取り線検出工程では、図17に示すように、先ず、除去処理実行部28が上面画像Js及び下面画像Jbに対して、前述と同様の手順により、除去処理を実施する。すなわち、除去処理実行部28は、除去処理において、画像撮影部16が撮影した上面画像Js及び下面画像Jbの各々を構成する画素群を搬送方向に相当する方向(すなわち、画像の横方向)に沿って収縮及び膨張させる。その後、除去処理実行部28は、各画像を収縮及び膨張することで得られる収縮膨張後の画像を、収縮膨張前の画像から除去する。これにより、上面画像Js及び下面画像Jbの各々から薬剤fの画像が除去された画像、すなわち、除去処理後上面画像NJs及び除去処理後下面画像NJbが取得される。
除去処理後上面画像NJs及び除去処理後下面画像NJbには、図17に示すように、交差方向に相当する方向(すなわち、画像の縦方向)に沿った縦線、具体的には、切り取り線3y及び偽切り取り線3rが写っている。
除去処理の実施後、検出部27は、第一カメラ16aが撮影した画像(厳密には、除去処理後上面画像NJs)に写った切り取り線3yの候補を特定し、かつ、第二カメラ16bが撮影した画像(厳密には、除去処理後下面画像NJb)に写った切り取り線3yの候補を特定する。ここで、切り取り線3yの候補とは、除去処理後上面画像NJs及び除去処理後下面画像NJbの各々に写った縦線であり、具体的には、切り取り線3yそのもの、及び偽切り取り線3rである。
その後、検出部27は、第一カメラ16aが撮影した画像(厳密には、除去処理後上面画像NJs)、及び、第二カメラ16bが撮影した画像(厳密には、除去処理後下面画像NJb)の双方に共通して写った切り取り線3yの候補を、特定する。そして、検出部27は、特定した切り取り線3yの候補を、撮影対象部分3x中の切り取り線3yとして検出する。
より詳しく説明すると、検出部27は、除去処理後上面画像NJsと除去処理後下面画像NJbとの間で共通して写っている縦線を特定し、その特定結果を反映した統合画像Jiを生成する。統合画像Jiは、除去処理後上面画像NJs及び除去処理後下面画像NJbとの間で共通して写った縦線のみが写っている画像である。ここで、統合画像Jiに写っている縦線は、図17に示すように、切り取り線3yである。したがって、検出部27は、統合画像Jiに写った縦線を、撮影対象部分3x中の切り取り線3yとして検出する。なお、統合画像Ji中の縦線(すなわち、切り取り線3y)を検出する方法としては、前述した、画像中の各画素列の位置と各画素列での合計階調値との対応関係(図16参照)を用いた方法が利用可能である。
<<薬剤判定装置の基本動作>>
次に、薬剤判定装置10の基本動作について図18を参照しながら説明する。図18は、薬剤判定装置10の基本動作の流れを示す図である。
次に、薬剤判定装置10の基本動作について図18を参照しながら説明する。図18は、薬剤判定装置10の基本動作の流れを示す図である。
先ず、処方箋入力作業において処方条件情報の入力が完了すると、処理装置12の処方条件情報取得部22が、処方条件入力装置50と通信し、入力された処方条件を示す処方条件情報を取得する(S011)。
一方で、入力された処方条件(換言すると、処方条件情報取得部22が取得した処方条件情報が示す処方条件)に則って分包機60により自動分包作業が行われると、薬剤を包んだ包装袋1が連なった帯状の包装袋連続体3が作成される。この包装袋連続体3は、装置本体11の筐体13に形成された導入部13aによって、装置本体11内部に導入される(S012)。
包装袋連続体3が装置本体11内に導入されると、搬送部14による搬送動作が間欠的に繰り返し行われる(S013)。各搬送動作では、包装袋連続体3を所定量だけ搬送方向下流側に搬送する。包装袋連続体3が搬送方向下流側に搬送されると、やがて、包装袋連続体3中の一つの包装袋1が配置部15に配置される。そして、搬送動作が行われる度に、包装袋連続体3中、配置部15に配置される包装袋1が切り換わる。
搬送動作間の期間(つまり、包装袋連続体3の搬送が停止している間)には、光照射部17が、配置部15に配置された包装袋1に包まれた薬剤に対して光を照射する(S014)。その状態で、画像撮影部16が第一カメラ16a及び第二カメラ16bのそれぞれを用いて、配置部15に配置された包装袋1に包まれた画像(すなわち、判定対象の薬剤)を撮影する(S015)。
光照射部17による光照射工程S014について詳しく説明すると、光照射部17は、配置部15の周りに配置された4つの発光部17a、17b、17c又は17dの一つから光を照射した後、発光部を順次切り換え(S016及びS017)、切換え後の発光部17a、17b、17c又は17dから光を再度照射する。つまり、光照射部17は、光の照射方向を順次切り換え、それぞれの方向から光を照射する。そして、画像撮影部16は、判定対象の薬剤の画像を光の照射方向別に撮影する。これにより、配置部15に配置された包装袋1に包まれている薬剤については、計8つ(カメラの台数×光の照射方向の数)の画像が撮影されることになる。
なお、上述した光照射工程S014、画像撮影工程S015、及び発光部切換え工程S017は、配置部15に配置されている包装袋1が搬送動作に伴って切り換わる度に繰り返し行われる。
撮影された画像は、随時、処理装置12の画像取得部23に伝送される(S018)。その後、画像取得部23が取得した画像に対して、処理装置12の前処理部24によって前処理が実施される(S019)。これにより、薬剤の表面に刻印にて形成された識別情報のエッジが強調された前処理後画像が生成される。
一方で、処理装置12の判定部25が、前処理後画像に写った薬剤(すなわち、判定対象の薬剤)に係る処方条件を特定する(S020)。具体的には、S011で取得した処方条件情報から、包装袋連続体3中の各包装袋1に分包された薬剤に対して設定された処方条件(詳しくは、薬剤の種類及び種類別の個数)を特定する。
また、処理装置12の検出部27が、画像取得部23が取得した撮影条件が異なる画像(換言すると、画像撮影部16が撮影条件を変えて撮影した撮影対象部分3xの画像)を用いて、切り取り線検出工程を実施する(S021)。具体的に説明すると、検出部27は、前述した手順により、撮影対象部分3x中にある2本の切り取り線3yを検出する。ここで、2本の切り取り線3yが検出された場合、配置部15には包装袋連続体3中の一つの包装袋1が正しく配置されていることになる。反対に、2本の切り取り線3yが検出されなかった場合、例えば、2つの包装袋1が配置部15に跨って配置されているために1本の切り取り線3yのみが検出された場合、搬送部14が包装袋連続体3を若干搬送して包装袋連続体3の位置を調整した後に、検出部27が切り取り線検出工程を再度実施する。そして、検出部27が撮影対象部分3x中の2本の切り取り線3yを検出するまで、搬送部14による位置調整用の搬送動作と、切り取り線検出工程とが繰り返される。
検出部27は、撮影対象部分3x中の2本の切り取り線3yを検出すると、切り取り線3y間の間隔を算出し、その算出結果を制御部21に送信する。制御部21は、それ以降に行われる搬送部14の搬送動作において、切り取り線3y間の間隔の算出値に応じた搬送量だけ包装袋連続体3を搬送するように搬送部14を制御する。これにより、各搬送動作の実施後には、包装袋連続体3中の包装袋1が一つずつ配置部15に正しく配置されるようになる。
また、搬送部14が停止している間には、判定部25が、上述した判定フローの手順により、包装袋連続体3中の各包装袋1に分包された薬剤が処方条件どおりに正しく分包されているかを判定する(S022)。判定フローにおいて、判定部25は、データベースサーバ70のデータベースDBにアクセスし、前工程S020で特定した処方条件(具体的には、薬剤の種類)と対応するマスタ画像を読み出す。そして、判定部25は、前処理後画像とマスタ画像とを用いて、配置部15に配置された包装袋1に包まれた薬剤の種類及び個数が処方条件どおりであるかを判定する。
以上までに説明してきた搬送動作から判定フローまでの一連の工程S013~S022は、包装袋連続体3中の各包装袋1内の薬剤に対して判定が終了するまで、配置部15に配置される包装袋1が切り換わる都度、繰り返し実施される(S023)。
なお、図18に図示のフローでは、配置部15に配置される包装袋1が切り換わる都度、切り取り線検出工程S021が繰り返し実施されるが、切り取り線検出工程S021は、初回のみ実施し、それ以降は実施を省略してもよい。
なお、図18に図示のフローでは、配置部15に配置される包装袋1が切り換わる都度、切り取り線検出工程S021が繰り返し実施されるが、切り取り線検出工程S021は、初回のみ実施し、それ以降は実施を省略してもよい。
判定部25は、包装袋連続体3中の各包装袋1に分包された薬剤を判定対象として上記の判定を行い、すべての判定が終了すると、その結果(判定結果)を示す文字情報をディスプレイに表示する(S024)。
なお、ディスプレイに表示する判定結果については、包装袋連続体3中のどの包装袋1に包まれた薬剤に対する判定結果であるかが明瞭に把握できればよく、包装袋1別に切り換えて判定結果を表示してもよく、あるいは、包装袋連続体3中の各包装袋1のそれぞれの判定結果を、包装袋1の位置又は順序と対応付けつつ、まとめて表示してもよい。
なお、ディスプレイに表示する判定結果については、包装袋連続体3中のどの包装袋1に包まれた薬剤に対する判定結果であるかが明瞭に把握できればよく、包装袋1別に切り換えて判定結果を表示してもよく、あるいは、包装袋連続体3中の各包装袋1のそれぞれの判定結果を、包装袋1の位置又は順序と対応付けつつ、まとめて表示してもよい。
そして、搬送部14の搬送動作によって包装袋連続体3が装置本体11の筐体13の排出部に到達し、包装袋連続体3の末端側にある包装袋1(搬送方向において最も上流側に位置する包装袋1)が筐体13の外に排出された時点で、薬剤判定装置10の基本動作が終了する。
<<本実施形態に係る薬剤判定装置の有効性について>>
以上までに説明してきたように、本実施形態に係る薬剤判定装置10及び境界凹部の検出方法(具体的には、切り取り線3yの検出方法)は、画像撮影部16が撮影条件を変えて撮影した撮影対象部分3xの画像を用いて、撮影対象部分3x中の切り取り線3yを検出する。これにより、包装袋連続体3における切り取り線3yの形成位置を適切に検出することが可能となる。この結果、包装袋連続体3の各包装袋1に対して薬剤適否の判定(鑑査)を個別に行うケースにおいて、包装袋連続体3中の撮影領域を的確に画定することが可能となる。かかる点において、本発明の薬剤判定装置及び境界凹部の検出方法は、特許文献1~4に記載の技術よりも有利な効果を奏するものである。
以上までに説明してきたように、本実施形態に係る薬剤判定装置10及び境界凹部の検出方法(具体的には、切り取り線3yの検出方法)は、画像撮影部16が撮影条件を変えて撮影した撮影対象部分3xの画像を用いて、撮影対象部分3x中の切り取り線3yを検出する。これにより、包装袋連続体3における切り取り線3yの形成位置を適切に検出することが可能となる。この結果、包装袋連続体3の各包装袋1に対して薬剤適否の判定(鑑査)を個別に行うケースにおいて、包装袋連続体3中の撮影領域を的確に画定することが可能となる。かかる点において、本発明の薬剤判定装置及び境界凹部の検出方法は、特許文献1~4に記載の技術よりも有利な効果を奏するものである。
より詳しく説明すると、背景技術の項で説明したように、切り取り線3yは、比較的小さく潰れ易いため、画像における切り取り線3yが明瞭でなく、検出することが難しい。また、包装袋連続体3における切り取り線3yの形成位置に向けて光を照射しながら、切り取り線3y付近の画像を撮影して切り取り線3yを検出する場合、前述したように、切り取り線3y近傍に偽切り取り線3rが発現し、この偽切り取り線3rを切り取り線3yと誤認する可能性がある。そのため、特許文献1~4に記載の技術では、切り取り線3y自体を検出するのではなく、切り取り線3y付近にある部分又は切り取り線3yの候補等を検出して、切り取り線3yを間接的に検出する。
具体的に説明すると、特許文献1に記載の技術では、分包紙において透光時の散乱性がヒートシール部と非シール部との間で異なる性質を利用して、照明側の背景像を包み端部にだけ浮かび上がらせることで包み端部を検出する。
特許文献2に記載の技術では、上流側境界候補及び下流側境界候補の組み合わせ候補のうち、鑑査対象である分包袋の長さの導出値が既定値に近似している組合せを、鑑査対象である分包袋の上流側及び下流側に位置する境界位置とみなす。
特許文献3及び4に記載の技術では、所定の長さよりも長い縦エッジ同士の間隔からエッジ領域を認識し、そのエッジ領域の中央部を縦シール部同士の境界位置とする。
特許文献2に記載の技術では、上流側境界候補及び下流側境界候補の組み合わせ候補のうち、鑑査対象である分包袋の長さの導出値が既定値に近似している組合せを、鑑査対象である分包袋の上流側及び下流側に位置する境界位置とみなす。
特許文献3及び4に記載の技術では、所定の長さよりも長い縦エッジ同士の間隔からエッジ領域を認識し、そのエッジ領域の中央部を縦シール部同士の境界位置とする。
これに対して、本実施形態に係る薬剤判定装置10では、包装袋連続体3中、切り取り線3yが位置する撮影対象部分3xの画像を、撮影条件を変えて複数回撮影し、撮影条件を変えて撮影した複数の撮影画像を用いることで、偽切り取り線3rを画像から除去することが可能である。このため、撮影画像から切り取り線3yを直接検出することが可能である。また、特許文献1に記載の技術を利用する場合には、ヒートシール部と非シール部との間で光の散乱性が異なっている必要があるが、本実施形態に係る薬剤判定装置10であれば、そのような性質を有していない包装袋連続体3に対しても利用することが可能である。
また、特許文献2に記載の技術を利用するには、鑑査対象である分包袋の長さの既定値が必要であり、その既定値が未知である場合には利用できない。また、特許文献2に記載の技術では、上流側境界候補及び下流側境界候補の組み合わせ候補のうち、鑑査対象である分包袋の長さの導出値が既定値に近似したものが複数存在する場合がある。かかる場合には、境界候補の中から境界位置を決めることが困難となる。これに対して、本実施形態に係る薬剤判定装置10であれば、上記の既定値を必要とせず、また、境界候補が限られるため(少ないため)、より簡便、かつ精度よく切り取り線3yを検出することが可能である。
また、特許文献3及び4に記載の技術では、エッジ領域の中央位置に包みの境界位置が存在するという前提の下で境界位置を特定するが、例えば、エッジ領域の中央部から外れた位置に切り取り線等が設けられている場合には、正確に切り取り線等の位置を特定し難くなる。これに対して、本実施形態に係る薬剤判定装置10であれば、前述したように、切り取り線3yそのものを検出するため、より正確に切り取り線3yを検出することが可能である。
<<その他の実施形態>>
以上までに本発明の薬剤判定装置及び境界凹部の検出方法について、具体的な一例を挙げて説明してきたが、上記の実施形態は、あくまでも一例であり、他の実施形態も考えられる。例えば、上記の実施形態では、包装袋連続体3中の各包装袋1(空袋1Aを除く)内に複数の薬剤が分包されているケースを例に挙げて説明したが、これに限定されるものではない。各包装袋1内に分包される薬剤の個数は、任意に設定することが可能であり、1つのみであってもよく、あるいは2つ以上であってもよい。
以上までに本発明の薬剤判定装置及び境界凹部の検出方法について、具体的な一例を挙げて説明してきたが、上記の実施形態は、あくまでも一例であり、他の実施形態も考えられる。例えば、上記の実施形態では、包装袋連続体3中の各包装袋1(空袋1Aを除く)内に複数の薬剤が分包されているケースを例に挙げて説明したが、これに限定されるものではない。各包装袋1内に分包される薬剤の個数は、任意に設定することが可能であり、1つのみであってもよく、あるいは2つ以上であってもよい。
また、上記の実施形態では、薬剤師が患者に薬剤を処方するにあたって、包装袋1に分包された薬剤の適否を判定するために用いられる薬剤判定装置10を例に挙げて説明した。ただし、薬剤判定装置10の用途は、上記の用途に限定されるものではなく、患者が病院等の施設に入院する際に薬剤を包装袋1に包まれた状態で持参したときに、施設のスタッフがその持参薬剤の種類及び数量(厳密には、種類別の数量)を把握する目的で薬剤判定装置10を利用してもよい。
1 包装袋
1A 空袋
3 包装袋連続体
3r 偽切り取り線
3x 撮影対象部分
3y 切り取り線
10 薬剤判定装置
11 装置本体
11a 駆動制御回路
12 処理装置
13 筐体
13a 導入部
14 搬送部
14a,14b ニップローラ
15 配置部
16 画像撮影部
16a 第一カメラ
16b 第二カメラ
17 光照射部
17a 第一発光部
17b 第二発光部
17c 第三発光部
17d 第四発光部
18 搬送路
21 制御部
22 処方条件情報取得部
23 画像取得部
24 前処理部
25 判定部
27 検出部
28 除去処理実行部
50 処方条件入力装置
55 薬剤棚
60 分包機
70 データベースサーバ
DB データベース
f 薬剤
Jb 下面画像
Ji 統合画像
Js 上面画像
NJb 除去処理後下面画像
NJs 除去処理後上面画像
X 薬剤抽出画像
1A 空袋
3 包装袋連続体
3r 偽切り取り線
3x 撮影対象部分
3y 切り取り線
10 薬剤判定装置
11 装置本体
11a 駆動制御回路
12 処理装置
13 筐体
13a 導入部
14 搬送部
14a,14b ニップローラ
15 配置部
16 画像撮影部
16a 第一カメラ
16b 第二カメラ
17 光照射部
17a 第一発光部
17b 第二発光部
17c 第三発光部
17d 第四発光部
18 搬送路
21 制御部
22 処方条件情報取得部
23 画像取得部
24 前処理部
25 判定部
27 検出部
28 除去処理実行部
50 処方条件入力装置
55 薬剤棚
60 分包機
70 データベースサーバ
DB データベース
f 薬剤
Jb 下面画像
Ji 統合画像
Js 上面画像
NJb 除去処理後下面画像
NJs 除去処理後上面画像
X 薬剤抽出画像
Claims (12)
- 薬剤を包む包装袋が複数並んだ帯状の包装袋連続体において前記包装袋間の境界位置に形成された境界凹部を検出する検出部と、
前記包装袋連続体中、少なくとも前記境界凹部が位置する撮影対象部分の表面に向けて光を照射した状態で、前記撮影対象部分の表面の画像を、撮影条件を変えて複数回撮影する画像撮影部と、を有し、
前記検出部は、前記画像撮影部が前記撮影条件を変えて撮影した複数の画像に基づき、前記撮影対象部分中の前記境界凹部を検出することを特徴とする薬剤判定装置。 - 前記画像撮影部が画像を撮影する際に、前記撮影対象部分の表面に向けて光を照射する光照射部を有し、
前記光照射部は、前記包装袋連続体の長手方向において互いに反対向きに光を発する第一発光部及び第二発光部を有し、前記撮影対象部分の表面に向けて斜め方向から光を照射し、
前記画像撮影部は、前記長手方向において前記第一発光部及び前記第二発光部の間に前記撮影対象部分が位置している状態で画像を撮影し、
前記光照射部は、前記撮影条件を変えるにあたり、前記第一発光部及び前記第二発光部のうち、光を照射する際に用いる発光部を変える、請求項1に記載の薬剤判定装置。 - 前記画像撮影部は、前記光照射部が前記第一発光部を用いて前記撮影対象部分の表面に向けて光を照射している間に前記撮影対象部分の表面の第一画像を撮影し、かつ、前記光照射部が前記第二発光部を用いて前記撮影対象部分の表面に向けて光を照射している間に前記撮影対象部分の表面の第二画像を撮影し、
前記検出部は、前記第一画像及び前記第二画像を用いて、前記撮影対象部分中の前記境界凹部を検出する請求項2に記載の薬剤判定装置。 - 前記光照射部が前記第一発光部を用いて前記撮影対象部分の表面に向けて光を照射している間、前記第二発光部の発光が停止し、
前記光照射部が前記第二発光部を用いて前記撮影対象部分の表面に向けて光を照射している間、前記第一発光部の発光が停止する請求項3に記載の薬剤判定装置。 - 前記検出部は、前記第一画像中、前記撮影対象部分において前記第一発光部からより離れている側の領域が写っている部分と、前記第二画像中、前記撮影対象部分において前記第二発光部からより離れている側の領域が写っている部分と、を合成して合成画像を作成し、前記合成画像に基づいて、前記撮影対象部分中の前記境界凹部を検出する請求項4に記載の薬剤判定装置。
- 前記画像撮影部は、前記包装袋連続体の厚み方向において互いに反対向きから前記撮影対象部分を撮影する第一カメラ及び第二カメラを有し、
前記第一カメラは、前記厚み方向における前記撮影対象部分の一つの表面の画像を撮影し、
前記第二カメラは、前記厚み方向において前記一つの表面とは反対側に位置する前記撮影対象部分の他の表面の画像を撮影し、
前記検出部は、前記第一カメラが撮影した画像と、前記第二カメラが撮影した画像とに基づいて、前記撮影対象部分中の前記境界凹部を検出する請求項1に記載の薬剤判定装置。 - 前記検出部は、前記第一カメラが撮影した画像に写った前記境界凹部の候補を特定し、かつ、前記第二カメラが撮影した画像に写った前記境界凹部の候補を特定した後、前記第一カメラが撮影した画像、及び、前記第二カメラが撮影した画像の双方に共通して写った前記境界凹部の候補を、前記撮影対象部分中の前記境界凹部として検出する請求項6に記載の薬剤判定装置。
- 前記包装袋連続体中の前記包装袋には薬剤が包装されており、
前記画像撮影部は、前記薬剤が包装された前記包装袋の端部、及び前記端部に隣接する前記境界凹部が少なくとも位置する前記撮影対象部分の表面の画像を、前記撮影条件を変えて複数回撮影する請求項1乃至請求項7のいずれか一項に記載の薬剤判定装置。 - 前記包装袋は、光透過性を有しており、
前記画像撮影部は、前記薬剤が包装された前記包装袋のうち、前記薬剤を覆った部分と前記端部、及び前記端部に隣接する前記境界凹部が少なくとも位置する前記撮影対象部分の表面の画像を、前記撮影条件を変えて複数回撮影し、
前記撮影条件を変えて撮影した複数の画像の各々に対して、画像中の薬剤の画像を除去するための除去処理を実行する除去処理実行部を有する請求項8に記載の薬剤判定装置。 - 前記除去処理実行部は、前記画像撮影部が撮影した画像を構成する画素群を少なくとも一つの方向に沿って収縮及び膨張させることで得られる収縮膨張後の画像を、収縮膨張前の画像から除去することにより、画像中の前記薬剤の画像を除去する前記除去処理を実行する、請求項9に記載の薬剤判定装置。
- 前記境界凹部は、前記包装袋連続体の横幅方向において前記包装袋連続体の一端から他端に亘って形成された破線状の直線溝によって構成される切り取り線である請求項1乃至請求項10のいずれか一項に記載の薬剤判定装置。
- 薬剤を包む包装袋が複数並んだ帯状の包装袋連続体において、前記包装袋間の境界位置に形成された境界凹部を検出する境界凹部の検出方法であって、
前記包装袋連続体中、少なくとも前記境界凹部が位置する撮影対象部分の表面に向けて光を照射した状態で、前記撮影対象部分の表面の画像を、撮影条件を変えて複数回撮影する工程と、
撮影条件を変えて撮影した複数の画像に基づき、前記撮影対象部分中の前記境界凹部を検出する工程と、を有することを特徴とする境界凹部の検出方法。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
EP19775083.9A EP3777813B1 (en) | 2018-03-26 | 2019-01-29 | Medicine assessment device and method of detecting boundary recess |
JP2020509743A JP7141445B2 (ja) | 2018-03-26 | 2019-01-29 | 薬剤判定装置、及び境界凹部の検出方法 |
CN201980021887.3A CN111902843A (zh) | 2018-03-26 | 2019-01-29 | 药剂判定装置以及边界凹部的检测方法 |
US17/006,414 US11887293B2 (en) | 2018-03-26 | 2020-08-28 | Medicine verification device and boundary recess detection method |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018058105 | 2018-03-26 | ||
JP2018-058105 | 2018-03-26 |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
US17/006,414 Continuation US11887293B2 (en) | 2018-03-26 | 2020-08-28 | Medicine verification device and boundary recess detection method |
Publications (1)
Publication Number | Publication Date |
---|---|
WO2019187601A1 true WO2019187601A1 (ja) | 2019-10-03 |
Family
ID=68061134
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
PCT/JP2019/002942 WO2019187601A1 (ja) | 2018-03-26 | 2019-01-29 | 薬剤判定装置、及び境界凹部の検出方法 |
Country Status (5)
Country | Link |
---|---|
US (1) | US11887293B2 (ja) |
EP (1) | EP3777813B1 (ja) |
JP (1) | JP7141445B2 (ja) |
CN (1) | CN111902843A (ja) |
WO (1) | WO2019187601A1 (ja) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPWO2021172288A1 (ja) * | 2020-02-26 | 2021-09-02 | ||
WO2022012901A1 (en) * | 2020-07-16 | 2022-01-20 | Trivision Aps | A system and a method for packaging product into separate bags |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6974595B2 (ja) * | 2018-04-03 | 2021-12-01 | 富士フイルム富山化学株式会社 | 薬剤判定装置及び薬剤判定方法 |
AU2021304666A1 (en) | 2020-07-10 | 2023-02-09 | Triastek, Inc. | High-precision additive manufacturing device and high-throughput additive manufacturing system |
CN117804696B (zh) * | 2023-12-28 | 2024-05-31 | 广州市珠江饼业食品有限公司 | 基于烘培食品检测的食品包装袋密封性检测方法及系统 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006334062A (ja) | 2005-06-01 | 2006-12-14 | Tosho Inc | 錠剤計数監査装置 |
JP2007068845A (ja) * | 2005-09-08 | 2007-03-22 | Aloka System Engineering Co Ltd | X線ct装置及び画像処理方法 |
JP5196285B1 (ja) | 2011-04-28 | 2013-05-15 | 株式会社湯山製作所 | 薬剤鑑査装置、及び薬剤分包装置 |
JP2015232486A (ja) * | 2014-06-09 | 2015-12-24 | 株式会社キーエンス | 画像検査装置 |
JP2017047975A (ja) | 2012-10-03 | 2017-03-09 | 株式会社湯山製作所 | 薬剤鑑査システム、巻取装置、操出装置、及びホルダー |
JP2017090360A (ja) * | 2015-11-16 | 2017-05-25 | 日産自動車株式会社 | 表面検査装置および表面検査方法 |
JP2017207356A (ja) * | 2016-05-18 | 2017-11-24 | アズビル株式会社 | 画像検査装置及び画像検査方法 |
Family Cites Families (19)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3477009B2 (ja) * | 1996-09-26 | 2003-12-10 | 株式会社湯山製作所 | 薬包帯巻取装置を備えた結束機 |
US6330351B1 (en) * | 1996-11-29 | 2001-12-11 | Kabushiki Kaisha Yuyama Seisakusho | Drug inspection device and drug packaging device |
NL1022679C1 (nl) * | 2003-02-14 | 2004-08-17 | Dijkstra Vereenigde Bedrijven | Inspectie inrichting voor losse objecten, zoals tabletten. |
JP4446842B2 (ja) | 2004-09-02 | 2010-04-07 | 株式会社トーショー | 錠剤計数監査装置 |
WO2005065627A1 (ja) * | 2004-01-05 | 2005-07-21 | Tosho Inc. | 自動調剤装置および薬剤フィーダ |
KR100650285B1 (ko) * | 2005-05-25 | 2006-11-27 | (주)제이브이엠 | 약포 검사시스템 |
KR101123656B1 (ko) * | 2008-10-08 | 2012-03-21 | (주)제이브이엠 | 약포 검사장치 |
US20100170206A1 (en) * | 2009-01-06 | 2010-07-08 | Jvm Co., Ltd. | Medicine pouch arranging device |
JP4755714B2 (ja) * | 2009-11-17 | 2011-08-24 | 株式会社湯山製作所 | 薬剤払出装置 |
KR101791460B1 (ko) * | 2010-12-21 | 2017-10-30 | (주)제이브이엠 | 포장약품 와인딩장치 |
US9272796B1 (en) * | 2011-01-11 | 2016-03-01 | Chudy Group, LLC | Automatic drug packaging machine and package-less verification system |
US10435192B2 (en) * | 2011-05-16 | 2019-10-08 | Edge Medical Properties, Llc | Multiple inspection system and method that inspects different medications |
JP5422062B2 (ja) * | 2011-08-08 | 2014-02-19 | パナソニック株式会社 | 薬包体監査システム |
CN105073082B (zh) * | 2013-02-20 | 2019-09-03 | 株式会社汤山制作所 | 药剂检查装置和药剂分包系统 |
JP6403445B2 (ja) * | 2014-06-09 | 2018-10-10 | 株式会社キーエンス | 検査装置、検査方法およびプログラム |
JP6682809B2 (ja) | 2015-11-09 | 2020-04-15 | 大日本印刷株式会社 | 検査システムおよび検査方法 |
JP6548584B2 (ja) * | 2016-01-19 | 2019-07-24 | 富士フイルム株式会社 | 調剤監査装置及び方法、並びにプログラム |
JP2018045368A (ja) * | 2016-09-13 | 2018-03-22 | キヤノン株式会社 | 画像処理装置、情報処理方法及びプログラム |
US10187593B2 (en) * | 2016-09-27 | 2019-01-22 | Rxsafe Llc | Verification system for a pharmacy packaging system |
-
2019
- 2019-01-29 WO PCT/JP2019/002942 patent/WO2019187601A1/ja unknown
- 2019-01-29 EP EP19775083.9A patent/EP3777813B1/en active Active
- 2019-01-29 CN CN201980021887.3A patent/CN111902843A/zh active Pending
- 2019-01-29 JP JP2020509743A patent/JP7141445B2/ja active Active
-
2020
- 2020-08-28 US US17/006,414 patent/US11887293B2/en active Active
Patent Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006334062A (ja) | 2005-06-01 | 2006-12-14 | Tosho Inc | 錠剤計数監査装置 |
JP2007068845A (ja) * | 2005-09-08 | 2007-03-22 | Aloka System Engineering Co Ltd | X線ct装置及び画像処理方法 |
JP5196285B1 (ja) | 2011-04-28 | 2013-05-15 | 株式会社湯山製作所 | 薬剤鑑査装置、及び薬剤分包装置 |
JP2013144101A (ja) | 2011-04-28 | 2013-07-25 | Yuyama Manufacturing Co Ltd | 薬剤鑑査装置、及び薬剤分包装置 |
JP2017047975A (ja) | 2012-10-03 | 2017-03-09 | 株式会社湯山製作所 | 薬剤鑑査システム、巻取装置、操出装置、及びホルダー |
JP2018020247A (ja) * | 2012-10-03 | 2018-02-08 | 株式会社湯山製作所 | 薬剤鑑査システム、巻取装置、操出装置、及びホルダー |
JP2015232486A (ja) * | 2014-06-09 | 2015-12-24 | 株式会社キーエンス | 画像検査装置 |
JP2017090360A (ja) * | 2015-11-16 | 2017-05-25 | 日産自動車株式会社 | 表面検査装置および表面検査方法 |
JP2017207356A (ja) * | 2016-05-18 | 2017-11-24 | アズビル株式会社 | 画像検査装置及び画像検査方法 |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPWO2021172288A1 (ja) * | 2020-02-26 | 2021-09-02 | ||
WO2021172288A1 (ja) * | 2020-02-26 | 2021-09-02 | 富士フイルム富山化学株式会社 | 薬剤識別装置 |
JP7282978B2 (ja) | 2020-02-26 | 2023-05-29 | 富士フイルム富山化学株式会社 | 薬剤識別装置 |
WO2022012901A1 (en) * | 2020-07-16 | 2022-01-20 | Trivision Aps | A system and a method for packaging product into separate bags |
Also Published As
Publication number | Publication date |
---|---|
EP3777813A1 (en) | 2021-02-17 |
EP3777813A4 (en) | 2021-06-09 |
US11887293B2 (en) | 2024-01-30 |
US20200394786A1 (en) | 2020-12-17 |
EP3777813B1 (en) | 2023-11-15 |
JP7141445B2 (ja) | 2022-09-22 |
CN111902843A (zh) | 2020-11-06 |
JPWO2019187601A1 (ja) | 2021-03-11 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
WO2019187601A1 (ja) | 薬剤判定装置、及び境界凹部の検出方法 | |
JP6974594B2 (ja) | 薬剤判定装置及び薬剤判定方法 | |
US20140033644A1 (en) | Medicine inspection device, and medicine packaging device | |
WO2012005004A1 (ja) | 錠剤監査支援方法及び錠剤監査支援装置 | |
WO2014119994A1 (en) | Method and apparatus for inspecting packages containing medication | |
JP2012029702A (ja) | 薬包中の薬剤個数計数装置 | |
JP4439433B2 (ja) | 錠剤計数監査装置 | |
JP7080307B2 (ja) | 薬剤判定装置、及び薬剤判定方法 | |
JP5033267B1 (ja) | 薬剤検査システム | |
JP3423055B2 (ja) | 錠剤検査システム | |
KR20200062533A (ko) | 알약 포장 설비 자동화 기계의 검사 장치 | |
JP6974595B2 (ja) | 薬剤判定装置及び薬剤判定方法 | |
JP2003291929A (ja) | 分包シート検査方法及び装置 | |
KR101985545B1 (ko) | 약포형 약제 불출 박스 | |
JP2003075352A (ja) | 密封包装体の熱接着部の検査方法及び検査装置 | |
KR101985546B1 (ko) | 약포 패키지 절취선 감지 방법 | |
JP6755696B2 (ja) | Ptpシート検査装置、ptpシート検査方法 | |
CN102598024B (zh) | 用于识别在包装上施加的信息的方法和设备 | |
US11403905B2 (en) | Device and method for counting bundles of value documents, in particular bundles of bank notes | |
JP6567460B2 (ja) | 位置検出装置、位置検出方法、位置検出プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 19775083 Country of ref document: EP Kind code of ref document: A1 |
|
ENP | Entry into the national phase |
Ref document number: 2020509743 Country of ref document: JP Kind code of ref document: A |
|
NENP | Non-entry into the national phase |
Ref country code: DE |
|
ENP | Entry into the national phase |
Ref document number: 2019775083 Country of ref document: EP Effective date: 20201026 |