[go: up one dir, main page]
More Web Proxy on the site http://driver.im/

WO2018164172A1 - ショベル及び建設機械の作業支援システム - Google Patents

ショベル及び建設機械の作業支援システム Download PDF

Info

Publication number
WO2018164172A1
WO2018164172A1 PCT/JP2018/008724 JP2018008724W WO2018164172A1 WO 2018164172 A1 WO2018164172 A1 WO 2018164172A1 JP 2018008724 W JP2018008724 W JP 2018008724W WO 2018164172 A1 WO2018164172 A1 WO 2018164172A1
Authority
WO
WIPO (PCT)
Prior art keywords
color
ground
excavator
projection
projection device
Prior art date
Application number
PCT/JP2018/008724
Other languages
English (en)
French (fr)
Inventor
裕介 佐野
春男 呉
孔康 井辻
塚根 浩一郎
匠 伊藤
圭二 本田
Original Assignee
住友重機械工業株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 住友重機械工業株式会社 filed Critical 住友重機械工業株式会社
Priority to JP2019504630A priority Critical patent/JP6957597B2/ja
Priority to CN201880016335.9A priority patent/CN110382793B/zh
Priority to CN202210305466.7A priority patent/CN114482157A/zh
Priority to KR1020197025899A priority patent/KR102455260B1/ko
Priority to EP18763416.7A priority patent/EP3594415B1/en
Priority to EP21206892.8A priority patent/EP3974586B1/en
Publication of WO2018164172A1 publication Critical patent/WO2018164172A1/ja
Priority to US16/562,637 priority patent/US11613873B2/en
Priority to US18/175,952 priority patent/US12031301B2/en

Links

Images

Classifications

    • EFIXED CONSTRUCTIONS
    • E02HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
    • E02FDREDGING; SOIL-SHIFTING
    • E02F3/00Dredgers; Soil-shifting machines
    • E02F3/04Dredgers; Soil-shifting machines mechanically-driven
    • E02F3/28Dredgers; Soil-shifting machines mechanically-driven with digging tools mounted on a dipper- or bucket-arm, i.e. there is either one arm or a pair of arms, e.g. dippers, buckets
    • EFIXED CONSTRUCTIONS
    • E02HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
    • E02FDREDGING; SOIL-SHIFTING
    • E02F9/00Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
    • E02F9/26Indicating devices
    • EFIXED CONSTRUCTIONS
    • E02HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
    • E02FDREDGING; SOIL-SHIFTING
    • E02F9/00Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
    • E02F9/24Safety devices, e.g. for preventing overload
    • E02F9/245Safety devices, e.g. for preventing overload for preventing damage to underground objects during excavation, e.g. indicating buried pipes or the like
    • EFIXED CONSTRUCTIONS
    • E02HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
    • E02FDREDGING; SOIL-SHIFTING
    • E02F3/00Dredgers; Soil-shifting machines
    • E02F3/04Dredgers; Soil-shifting machines mechanically-driven
    • E02F3/28Dredgers; Soil-shifting machines mechanically-driven with digging tools mounted on a dipper- or bucket-arm, i.e. there is either one arm or a pair of arms, e.g. dippers, buckets
    • E02F3/30Dredgers; Soil-shifting machines mechanically-driven with digging tools mounted on a dipper- or bucket-arm, i.e. there is either one arm or a pair of arms, e.g. dippers, buckets with a dipper-arm pivoted on a cantilever beam, i.e. boom
    • E02F3/32Dredgers; Soil-shifting machines mechanically-driven with digging tools mounted on a dipper- or bucket-arm, i.e. there is either one arm or a pair of arms, e.g. dippers, buckets with a dipper-arm pivoted on a cantilever beam, i.e. boom working downwardly and towards the machine, e.g. with backhoes
    • EFIXED CONSTRUCTIONS
    • E02HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
    • E02FDREDGING; SOIL-SHIFTING
    • E02F3/00Dredgers; Soil-shifting machines
    • E02F3/04Dredgers; Soil-shifting machines mechanically-driven
    • E02F3/28Dredgers; Soil-shifting machines mechanically-driven with digging tools mounted on a dipper- or bucket-arm, i.e. there is either one arm or a pair of arms, e.g. dippers, buckets
    • E02F3/36Component parts
    • EFIXED CONSTRUCTIONS
    • E02HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
    • E02FDREDGING; SOIL-SHIFTING
    • E02F3/00Dredgers; Soil-shifting machines
    • E02F3/04Dredgers; Soil-shifting machines mechanically-driven
    • E02F3/28Dredgers; Soil-shifting machines mechanically-driven with digging tools mounted on a dipper- or bucket-arm, i.e. there is either one arm or a pair of arms, e.g. dippers, buckets
    • E02F3/36Component parts
    • E02F3/42Drives for dippers, buckets, dipper-arms or bucket-arms
    • EFIXED CONSTRUCTIONS
    • E02HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
    • E02FDREDGING; SOIL-SHIFTING
    • E02F3/00Dredgers; Soil-shifting machines
    • E02F3/04Dredgers; Soil-shifting machines mechanically-driven
    • E02F3/28Dredgers; Soil-shifting machines mechanically-driven with digging tools mounted on a dipper- or bucket-arm, i.e. there is either one arm or a pair of arms, e.g. dippers, buckets
    • E02F3/36Component parts
    • E02F3/42Drives for dippers, buckets, dipper-arms or bucket-arms
    • E02F3/425Drive systems for dipper-arms, backhoes or the like
    • EFIXED CONSTRUCTIONS
    • E02HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
    • E02FDREDGING; SOIL-SHIFTING
    • E02F3/00Dredgers; Soil-shifting machines
    • E02F3/04Dredgers; Soil-shifting machines mechanically-driven
    • E02F3/28Dredgers; Soil-shifting machines mechanically-driven with digging tools mounted on a dipper- or bucket-arm, i.e. there is either one arm or a pair of arms, e.g. dippers, buckets
    • E02F3/36Component parts
    • E02F3/42Drives for dippers, buckets, dipper-arms or bucket-arms
    • E02F3/43Control of dipper or bucket position; Control of sequence of drive operations
    • E02F3/435Control of dipper or bucket position; Control of sequence of drive operations for dipper-arms, backhoes or the like
    • EFIXED CONSTRUCTIONS
    • E02HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
    • E02FDREDGING; SOIL-SHIFTING
    • E02F9/00Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
    • EFIXED CONSTRUCTIONS
    • E02HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
    • E02FDREDGING; SOIL-SHIFTING
    • E02F9/00Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
    • E02F9/02Travelling-gear, e.g. associated with slewing gears
    • EFIXED CONSTRUCTIONS
    • E02HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
    • E02FDREDGING; SOIL-SHIFTING
    • E02F9/00Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
    • E02F9/08Superstructures; Supports for superstructures
    • E02F9/0833Improving access, e.g. for maintenance, steps for improving driver's access, handrails
    • EFIXED CONSTRUCTIONS
    • E02HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
    • E02FDREDGING; SOIL-SHIFTING
    • E02F9/00Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
    • E02F9/20Drives; Control devices
    • E02F9/2025Particular purposes of control systems not otherwise provided for
    • EFIXED CONSTRUCTIONS
    • E02HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
    • E02FDREDGING; SOIL-SHIFTING
    • E02F9/00Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
    • E02F9/20Drives; Control devices
    • E02F9/2058Electric or electro-mechanical or mechanical control devices of vehicle sub-units
    • EFIXED CONSTRUCTIONS
    • E02HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
    • E02FDREDGING; SOIL-SHIFTING
    • E02F9/00Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
    • E02F9/20Drives; Control devices
    • E02F9/22Hydraulic or pneumatic drives
    • EFIXED CONSTRUCTIONS
    • E02HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
    • E02FDREDGING; SOIL-SHIFTING
    • E02F9/00Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
    • E02F9/20Drives; Control devices
    • E02F9/22Hydraulic or pneumatic drives
    • E02F9/2264Arrangements or adaptations of elements for hydraulic drives
    • EFIXED CONSTRUCTIONS
    • E02HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
    • E02FDREDGING; SOIL-SHIFTING
    • E02F9/00Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
    • E02F9/26Indicating devices
    • E02F9/261Surveying the work-site to be treated
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/50Depth or shape recovery
    • G06T7/55Depth or shape recovery from multiple images
    • G06T7/593Depth or shape recovery from multiple images from stereo images
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/204Image signal generators using stereoscopic image cameras
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10004Still image; Photographic image
    • G06T2207/10012Stereo images
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10024Color image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30248Vehicle exterior or interior
    • G06T2207/30252Vehicle exterior; Vicinity of vehicle

Definitions

  • the present invention relates to a work support system for excavators and construction machines.
  • an excavator is known as a construction machine that supports a drilling operation by an operator by displaying a numerical value indicating a distance between a target surface and a blade edge of a bucket on a monitor (see, for example, Patent Document 1).
  • the target surface is the ground obtained when the excavation work is performed according to the target, and is typically buried under the current ground.
  • the monitor is installed near the operator in the cab. Therefore, the operator performs excavation work by operating the operation lever while alternately viewing the actual blade edge of the bucket outside the cab and the numerical value displayed on the monitor in the cab.
  • An excavator includes a lower traveling body, an upper revolving body that is turnably mounted on the lower traveling body, and a control device that controls a projection device that projects light onto the ground.
  • the control device is attached to the upper-part turning body and configured to visualize the relationship between the current shape of the ground and the shape of the target surface by controlling the projection device.
  • the above-mentioned means can provide an excavator that can support the operator or surrounding workers without deteriorating the work efficiency.
  • FIG. 1 is a side view of an excavator (excavator) according to an embodiment of the present invention.
  • An upper swing body 3 is mounted on the lower traveling body 1 of the excavator via a swing mechanism 2 so as to be capable of swinging.
  • a boom 4 is attached to the upper swing body 3.
  • An arm 5 is attached to the tip of the boom 4, and a bucket 6 as an end attachment is attached to the tip of the arm 5.
  • a slope bucket, a kite bucket, or the like may be used as an end attachment.
  • the boom 4, the arm 5, and the bucket 6 constitute a drilling attachment as an example of the attachment, and are hydraulically driven by the boom cylinder 7, the arm cylinder 8, and the bucket cylinder 9, respectively.
  • a boom angle sensor S1 is attached to the boom 4
  • an arm angle sensor S2 is attached to the arm 5, and a bucket angle sensor S3 is attached to the bucket 6.
  • the excavation attachment may be provided with a bucket tilt mechanism.
  • the boom angle sensor S1 detects the rotation angle of the boom 4.
  • the boom angle sensor S ⁇ b> 1 is an acceleration sensor that detects a tilt angle with respect to the horizontal plane and detects a rotation angle of the boom 4 with respect to the upper swing body 3.
  • the arm angle sensor S2 detects the rotation angle of the arm 5.
  • the arm angle sensor S ⁇ b> 2 is an acceleration sensor that detects the rotation angle of the arm 5 relative to the boom 4 by detecting the inclination with respect to the horizontal plane.
  • the bucket angle sensor S3 detects the rotation angle of the bucket 6.
  • the bucket angle sensor S3 is an acceleration sensor that detects the rotation angle of the bucket 6 with respect to the arm 5 by detecting the inclination with respect to the horizontal plane.
  • the bucket angle sensor S3 additionally detects the rotation angle of the bucket 6 around the tilt axis.
  • the boom angle sensor S1, the arm angle sensor S2, and the bucket angle sensor S3 included in the attachment attitude sensor are a potentiometer that uses a variable resistor, a stroke sensor that detects the stroke amount of the corresponding hydraulic cylinder, and a rotation around the connecting pin.
  • a rotary encoder that detects a moving angle may be used.
  • the upper swing body 3 is provided with a cabin 10.
  • an operation device 26 is provided as a driving control unit.
  • the upper revolving unit 3 is equipped with a power source such as the engine 11.
  • the upper swing body 3 is provided with a body tilt sensor S4 and a swing angular velocity sensor S5.
  • a stereo camera S6, a communication device S7, a positioning device S8, and a projection device S9 are attached to the cabin 10.
  • the projection device S9 may be attached to another position such as in a tool box in the right front portion of the upper swing body 3. When installed in the tool box, the projection device S9 projects light through a slit or the like formed in the tool box cover. Since the tool box can be locked, it also has an anti-theft effect.
  • a plurality of projection devices S9 may be attached to the shovel.
  • the body tilt sensor S4 detects the tilt of the upper swing body 3 with respect to the horizontal plane.
  • the body tilt sensor S4 is a biaxial acceleration sensor that detects the tilt angles of the upper swing body 3 around the front and rear axes and the left and right axes.
  • the front and rear axes and the left and right axes of the upper swing body 3 are, for example, orthogonal to each other and pass through a shovel center point that is one point on the shovel pivot axis.
  • the turning angular velocity sensor S5 detects the turning angular velocity of the upper turning body 3.
  • the turning angular velocity sensor S5 is, for example, a gyro sensor.
  • the turning angular velocity sensor S5 may be a resolver, a rotary encoder, or the like.
  • the stereo camera S6 is an imaging device capable of taking a stereo image to acquire an image around the excavator.
  • the stereo camera S6 is attached to the upper part of the front side (traveling direction side) of the cabin 10.
  • Stereo camera S6 may be a monocular camera.
  • the stereo camera S6 sets two camera images captured with slightly different imaging positions as stereo pair images.
  • the movement of the imaging position is realized by, for example, turning of the upper swing body 3 and is measured using a gyro sensor, a GNSS (Global Navigation Satellite System), or the like.
  • GNSS Global Navigation Satellite System
  • the communication device S7 is a device that controls communication between the excavator and the outside.
  • the communication device S7 controls, for example, wireless communication between a surveying system such as GNSS and an excavator.
  • the shovel can acquire design data including information on the target surface and the like via wireless communication by using the communication device S7.
  • the shovel may acquire design data using a semiconductor memory or the like.
  • the positioning device S8 is a device that measures the position and orientation of the excavator.
  • the positioning device S8 is a GNSS receiver that incorporates an electronic compass, and measures the latitude, longitude, and altitude of the location of the shovel and measures the direction of the shovel.
  • Projection device S9 is a device that projects light onto the ground.
  • the projection device S9 is, for example, a liquid crystal projector for 3D projection mapping, a DLP (registered trademark) projector, or the like.
  • the projection device S9 is a DLP (registered trademark) projector having a resolution of 1024 ⁇ 768 pixels. It may be a higher resolution or a lower resolution.
  • an input device D1 In the cabin 10, an input device D1, an audio output device D2, a display device D3, a storage device D4, a gate lock lever D5, a controller 30, and a machine guidance device 50 are installed.
  • the controller 30 functions as a control device that performs drive control of the excavator.
  • the controller 30 is composed of an arithmetic processing unit including a CPU and an internal memory.
  • Various functions of the controller 30 are realized by the CPU executing programs stored in the internal memory.
  • the machine guidance device 50 is a control device that guides the operation of the excavator.
  • the machine guidance device 50 visually and audibly notifies the operator of the vertical distance between the target surface set by the operator and the tip (toe) position of the bucket 6, for example.
  • the machine guidance apparatus 50 can guide the operation of the shovel by the operator.
  • the machine guidance device 50 may only notify the operator of the distance visually or may only notify the operator audibly.
  • the machine guidance device 50 is configured by an arithmetic processing device including a CPU and an internal memory. Various functions of the machine guidance device 50 are realized by the CPU executing a program stored in the internal memory.
  • the machine guidance device 50 controls the projection device S9, for example, and irradiates each point on the ground with light of a color corresponding to the vertical distance between each point on the current ground and the corresponding point on the target surface. May be. Further, the machine guidance device 50 may be provided separately from the controller 30 or may be incorporated in the controller 30.
  • the input device D1 is a device for an excavator operator to input various information to the machine guidance device 50.
  • the input device D1 is a membrane switch attached around the display device D3.
  • a touch panel or the like may be used as the input device D1.
  • the voice output device D2 outputs voice information in response to a voice output command from the machine guidance device 50.
  • the audio output device D2 is an in-vehicle speaker that is directly connected to the machine guidance device 50.
  • the audio output device D2 may be an alarm device such as a buzzer.
  • the display device D3 outputs image information in response to a command from the machine guidance device 50.
  • the display device D3 is a liquid crystal display directly connected to the machine guidance device 50.
  • Storage device D4 is a device for storing various information.
  • the storage device D4 is a nonvolatile storage medium such as a semiconductor memory.
  • the storage device D4 stores, for example, various information output by the machine guidance device 50 and the like.
  • the gate lock lever D5 is a mechanism that prevents the shovel from being operated accidentally.
  • the gate lock lever D5 is disposed between the door of the cabin 10 and the driver's seat.
  • the various operation devices can be operated.
  • the gate lock lever D5 is pushed down so that the operator can leave the cabin 10, the various operation devices become inoperable.
  • FIG. 2 is a diagram showing a configuration example of the drive system of the excavator in FIG.
  • the mechanical power transmission system is indicated by a double line
  • the hydraulic oil line is indicated by a thick solid line
  • the pilot line is indicated by a broken line
  • the electric drive / control system is indicated by a thin solid line.
  • the engine 11 is a power source for the excavator.
  • the engine 11 is a diesel engine that employs isochronous control that keeps the engine speed constant regardless of increase or decrease in engine load.
  • the engine controller unit (ECU) D7 controls the fuel injection amount, fuel injection timing, boost pressure, and the like in the engine 11.
  • the engine 11 is connected with a main pump 14 and a pilot pump 15 as hydraulic pumps.
  • a control valve 17 is connected to the main pump 14 via a hydraulic oil line.
  • the control valve 17 is a hydraulic control device that controls the hydraulic system of the excavator. Hydraulic actuators such as a right traveling hydraulic motor, a left traveling hydraulic motor, a boom cylinder 7, an arm cylinder 8, a bucket cylinder 9, and a turning hydraulic motor are connected to a control valve 17 via a hydraulic oil line. A boom oil pressure sensor for detecting a load applied to the boom cylinder 7 and a load applied to the arm cylinder 8 are detected in hydraulic oil lines connecting the control valve 17 and each of the boom cylinder 7, the arm cylinder 8 and the bucket cylinder 9. An arm cylinder pressure sensor and a bucket cylinder pressure sensor for detecting a load applied to the bucket cylinder 9 are arranged. In addition, a turning pressure sensor is disposed in the hydraulic oil line connecting the control valve 17 and the turning hydraulic motor. The turning hydraulic motor may be a turning motor generator.
  • the operating device 26 is connected to the pilot pump 15 via a pilot line and a gate lock valve D6.
  • the operating device 26 includes a lever and a pedal.
  • the gate lock valve D6 switches between connection and disconnection of the pilot line connecting the pilot pump 15 and the operating device 26.
  • the gate lock valve D6 is an electromagnetic valve that switches between connection and disconnection of the pilot line in accordance with a command from the controller 30.
  • the controller 30 determines the state of the gate lock lever D5 based on the state signal output from the gate lock lever D5.
  • the controller 30 outputs a communication command to the gate lock valve D6.
  • the gate lock valve D6 is opened in response to the communication command and connects the pilot line. As a result, the operator's operation on the operation device 26 becomes effective.
  • the controller 30 determines that the gate lock lever D5 is in the lowered state, the controller 30 outputs a cutoff command to the gate lock valve D6.
  • the gate lock valve D6 is closed in response to the shutoff command and shuts off the pilot line. As a result, the operator's operation on the operation device 26 becomes invalid.
  • the pressure sensor 29 detects the operation content of the operating device 26 in the form of pressure.
  • the pressure sensor 29 outputs the detection value to the controller 30.
  • FIG. 2 shows the connection relationship between the controller 30 and the display device D3.
  • the display device D3 is connected to the controller 30 via the machine guidance device 50.
  • the display device D3, the machine guidance device 50, and the controller 30 may be connected via a communication network such as CAN, or may be connected via a dedicated line.
  • Display device D3 includes a conversion processing unit D3a that generates an image.
  • the conversion processing unit D3a generates a camera image for display based on the output of the stereo camera S6. Therefore, the display device D3 acquires the output of the stereo camera S6 connected to the machine guidance device 50 via the machine guidance device 50.
  • the stereo camera S6 may be connected to the display device D3 or may be connected to the controller 30.
  • the conversion processing unit D3a generates a display image based on the output of the controller 30 or the machine guidance device 50.
  • the conversion processing unit D3a converts various information output from the controller 30 or the machine guidance device 50 into an image signal.
  • the information output by the controller 30 includes, for example, data indicating the temperature of engine coolant, data indicating the temperature of hydraulic oil, data indicating the remaining amount of fuel, and the like.
  • the information output from the machine guidance device 50 includes data indicating the toe position of the bucket 6, data indicating the direction of the slope of the work target, data indicating the direction of the shovel, and an operation for causing the shovel to face the slope. Includes data indicating the direction.
  • the conversion processing unit D3a may be realized not as a function of the display device D3 but as a function of the controller 30 or the machine guidance device 50.
  • the display device D3 operates upon receiving power from the storage battery 70.
  • the storage battery 70 is charged with electric power generated by the alternator 11a (generator) of the engine 11.
  • the electric power of the storage battery 70 is supplied not only to the controller 30 and the display device D3 but also to the electric equipment 72 of the excavator.
  • the starter 11 b of the engine 11 is driven by electric power from the storage battery 70 and starts the engine 11.
  • the engine 11 is controlled by the engine controller unit D7.
  • the engine controller unit D7 transmits various data indicating the state of the engine 11 to the controller 30.
  • the various data is, for example, the cooling water temperature detected by the water temperature sensor 11c.
  • the controller 30 stores this data in the temporary storage unit (memory) 30a and can transmit it to the display device D3 when necessary.
  • the regulator 14 a of the main pump 14 that is a variable displacement hydraulic pump supplies data related to the swash plate tilt angle to the controller 30.
  • the discharge pressure sensor 14 b supplies data related to the discharge pressure of the main pump 14 to the controller 30.
  • the oil temperature sensor 14 c supplies the controller 30 with data relating to the temperature of the hydraulic oil that flows through the pipe line between the main pump 14 and the tank in which the hydraulic oil sucked by the main pump 14 is stored.
  • a fuel remaining amount sensor 55 a in the fuel tank 55 supplies data related to the remaining amount of fuel to the controller 30.
  • the pressure sensor 29 supplies data related to the pilot pressure sent to the control valve 17 to the controller 30 when the operating device 26 is operated.
  • the excavator includes an engine speed adjustment dial 75 in the cabin 10.
  • the engine rotation speed adjustment dial 75 is a dial for adjusting the rotation speed of the engine 11, and in this embodiment, the engine rotation speed can be switched in four stages.
  • the engine speed adjustment dial 75 transmits data indicating the setting state of the engine speed to the controller 30.
  • FIG. 3 is a functional block diagram illustrating a configuration example of the machine guidance device 50.
  • the controller 30 controls whether or not to perform guidance by the machine guidance device 50 in addition to controlling the operation of the entire shovel. Specifically, the controller 30 controls whether or not the guidance by the machine guidance device 50 is performed based on the state of the gate lock lever D5, the detection signal from the pressure sensor 29, and the like.
  • the machine guidance device 50 includes, for example, a boom angle sensor S1, an arm angle sensor S2, a bucket angle sensor S3, a machine body inclination sensor S4, a turning angular velocity sensor S5, an input device D1, and various outputs output from the controller 30.
  • the machine guidance device 50 calculates the toe position of the bucket 6 based on the received signal and data.
  • the machine guidance device 50 visually and audibly outputs information corresponding to the distance between the toe position of the bucket 6 and the target surface to guide the operation of the shovel.
  • the machine guidance device 50 includes functional units that perform various functions.
  • the machine guidance device 50 includes a position calculation unit 501, a comparison unit 502, a notification unit 503, a stereo pair image acquisition unit 504, a terrain data generation unit 505, a coordinate conversion unit 506, a coordinate correction unit 510, and terrain data display.
  • the position calculation unit 501 calculates the position of the work site of the end attachment. For example, the toe position of the bucket 6 is calculated based on the current position of the shovel, the direction of the shovel, and the attitude of the attachment. The position and orientation of the excavator are calculated based on the output of the positioning device S8. The posture of the attachment is calculated based on the outputs of the boom angle sensor S1, the arm angle sensor S2, the bucket angle sensor S3, and the machine body tilt sensor S4.
  • the comparison unit 502 calculates the difference between the toe position height of the bucket 6 calculated by the position calculation unit 501 and the target surface height. For example, the comparison unit 502 uses the plane coordinates (for example, latitude and longitude) of the toe position of the bucket 6 calculated by the position calculation unit 501 to derive the height of the target surface from design data input in advance.
  • the plane coordinates for example, latitude and longitude
  • the notification unit 503 notifies the excavator operator of various types of information based on the comparison result by the comparison unit 502. For example, a notification command is transmitted to both or one of the audio output device D2 and the display device D3. When the voice output device D2 receives the notification command, the voice output device D2 emits a predetermined sound. When receiving the notification command, the display device D3 displays a predetermined image.
  • the notification content may be set in multiple stages according to the difference between the height of the toe position of the bucket 6 and the height of the target surface.
  • the stereo pair image acquisition unit 504 acquires a stereo pair image.
  • the stereo pair image is a pair of camera images used for deriving the distance between the stereo camera S6 and a point to be measured (hereinafter referred to as “measurement point”) using a triangulation method.
  • the stereo pair image acquisition unit 504 acquires a pair of camera images output from the stereo camera S6 as a stereo pair image. Further, parameters related to the stereo camera S6 such as the mounting position, mounting angle, and focal length of the stereo camera S6 are stored in advance in the storage device D4 and the like. The stereo pair image acquisition unit 504 reads these parameters from the storage device D4 or the like as necessary.
  • the stereo pair image acquisition unit 504 acquires a pair of camera images simultaneously captured by each of the pair of imaging units in the stereo camera S6 as a stereo pair image. Then, the distance between the stereo camera S6 and each measurement point is acquired based on the shift between the pixels corresponding to each measurement point and the distance between the pair of imaging units in each of the acquired pair of camera images. To do.
  • the stereo pair image acquisition unit 504 acquires a stereo pair image every time a predetermined acquisition condition is satisfied.
  • the predetermined acquisition condition is set based on, for example, the turning angle of the upper turning body 3, the excavator moving distance, and the like.
  • the stereo pair image acquisition unit 504 acquires a stereo pair image every time the upper swing body 3 turns by a predetermined turning angle ⁇ .
  • the turning angle is derived from the output of the turning angular velocity sensor S5, for example.
  • the stereo pair image acquisition unit 504 may acquire a stereo pair image each time the excavator moves (runs) a predetermined distance.
  • the moving distance is derived from the output of the positioning device S8, for example.
  • the stereo pair image acquisition unit 504 may dynamically determine thresholds relating to a turning angle, a moving distance, and the like as acquisition conditions so that a stereo pair image including an image of a desired measurement point can be efficiently acquired.
  • the stereo pair image acquisition unit 504 may acquire a stereo pair image at predetermined time intervals, and acquire a stereo pair image at an arbitrary timing according to an operation input (for example, switch operation) by an operator of the excavator. May be.
  • the machine guidance device 50 measures the terrain information around the excavator from the stereo pair image acquired in this way during or after the construction.
  • the terrain data generation unit 505 generates terrain data.
  • the terrain data is, for example, a set of three-dimensional coordinates representing each point on the ground around the excavator.
  • the three-dimensional coordinates are, for example, coordinates in the camera coordinate system.
  • the camera coordinate system is a coordinate system based on the camera, and includes, for example, the center point of the stereo camera S6 as the origin, the X axis between the two optical axes of the stereo camera S6, and including these two optical axes. This is a three-dimensional orthogonal XYZ coordinate system taking the Z axis perpendicular to the plane.
  • the terrain data generation unit 505 derives the three-dimensional coordinates of each measurement point in the camera coordinate system based on the distance to each measurement point derived by the stereo pair image acquisition unit 504.
  • the terrain data generation unit 505 may derive the current shape of the ground based on the known shape of the ground at a predetermined time and the movement path of the end attachment after the predetermined time.
  • the known shape of the ground at a predetermined time is, for example, terrain data representing the terrain at that time stored in the storage device D4 or the like when the excavation work is started. In this case, the terrain data can be measured by an arbitrary method such as surveying using a total station.
  • the movement trajectory of the end attachment is, for example, the movement trajectory of the bucket 6.
  • the trajectory of the bucket 6 is derived from outputs of the boom angle sensor S1, the arm angle sensor S2, the bucket angle sensor S3, and the machine body tilt sensor S4 that are continuously acquired at a predetermined period.
  • the terrain data generation unit 505 derives an area excavated or backfilled by the bucket 6 based on the known shape of the ground at the time when the excavation work is started and the trajectory of the bucket 6 thereafter, thereby generating a current ground surface. Can be derived.
  • the coordinate conversion unit 506 converts coordinates in the camera coordinate system into coordinates in another coordinate system.
  • the coordinate conversion unit 506 converts coordinates in the camera coordinate system into coordinates in the shovel coordinate system or the reference coordinate system.
  • the excavator coordinate system is a coordinate system based on the excavator. For example, the intersection point between the turning axis of the upper turning body 3 and the virtual ground plane of the lower traveling body 1 is the origin, and the front and rear axes of the lower traveling body 1 are the X axis. And a three-dimensional orthogonal XYZ coordinate system in which the left and right axis of the lower traveling body 1 is the Y axis and the turning axis is the Z axis.
  • the reference coordinate system includes, for example, the world geodetic system.
  • World Geodetic System is a three-dimensional orthogonal XYZ with the origin at the center of gravity of the earth, the X axis in the direction of the intersection of the Greenwich meridian and the equator, the Y axis in the direction of 90 degrees east longitude, and the Z axis in the direction of the North Pole Coordinate system.
  • the coordinate conversion unit 506 converts the three-dimensional coordinates of each measurement point in the camera coordinate system derived by the terrain data generation unit 505 into coordinates in the world geodetic system.
  • the terrain data display unit 507 displays the terrain data generated by the machine guidance device 50.
  • the terrain data display unit 507 displays a three-dimensional image (for example, a wire frame, a polygon mesh, etc.) of the terrain around the excavator based on the terrain data that is a set of coordinates after conversion derived by the coordinate conversion unit 506. Generate and display on the display device D3.
  • the terrain data display unit 507 may generate a three-dimensional image of the target surface based on the design data, and display the three-dimensional image of the target surface on the display device D3 together with the three-dimensional image of the terrain around the excavator.
  • the terrain data display unit 507 may synthesize and display an image actually captured by the stereo camera S6 on a three-dimensional image of the terrain around the excavator.
  • the terrain data projection unit 508 uses the projection device S9 to visualize the relationship between the current shape of the ground around the excavator and the shape of the target surface.
  • the terrain data projection unit 508 controls the projection device S9 to project light onto the ground around the excavator. Then, the color, illuminance, and the like of the light projected by the projection device S9 are changed according to the distance between the ground and the target surface.
  • FIG. 4 is a side sectional view of the ground where the excavator is located.
  • FIG. 5 shows the ground in front of the shovel as seen from the cabin 10.
  • Projector S9 is configured to project light onto the ground in front of the excavator. Specifically, the projection device S9 projects the number of light rays corresponding to the number of projection pixels in front of the shovel.
  • FIG. 4 relates to a visualization process when excavation work is performed. In excavation work, the target surface is set below the current ground.
  • the dot hatching region PR in FIG. 4 indicates the projection range of the projection device S9.
  • the thick solid line indicates the current shape of the ground CP, and the alternate long and short dash line indicates the target surface TP.
  • Light rays L1 to L3 are part of the number of light rays corresponding to the number of projection pixels.
  • Points P1, P2, and P3 are points on the ground CP onto which the light rays L1, L2, and L3 are projected, respectively.
  • the point P1 is at a position higher (shallow) than the target plane TP, and the vertical distance to the target plane TP is the distance C1.
  • the point P2 is on the target plane TP.
  • the point P3 is at a position lower (deeper) than the target surface TP, and the vertical distance to the target surface TP is the distance C3.
  • the terrain data projection unit 508 calculates the three-dimensional coordinates of the point where each light beam projected by the projection device S9 hits based on the current position and orientation of the projection device S9 and the parameters (resolution, projection angle, etc.) of the projection device S9. derive.
  • the current position and orientation of the projection device S9 are derived from the current position and orientation of the shovel.
  • the relative change in the current position and orientation of the projection device S9 may be determined based on outputs from the body tilt sensor S4 and the turning angular velocity sensor S5.
  • the terrain data projection unit 508 derives three-dimensional coordinates of points corresponding to each of 1024 ⁇ 768 pixels including the points P1 to P3.
  • the terrain data projection unit 508 derives the vertical distance between each point and the target surface based on the three-dimensional coordinates of each point derived as described above and the information regarding the target surface included in the design data.
  • the distance C3 and the like are derived.
  • the target surface TP shown in FIG. 4 is set as a final construction target surface, but may be set as a reference line in the middle of construction.
  • the target surface TP may be a surface having a predetermined depth between the current ground surface and the final construction target surface.
  • the surface of the predetermined depth between the present ground and the final construction target surface may be a plurality of surfaces. For example, when the depth from the current ground to the final construction target surface is 5 m, the target surface TP may be set every 1 m. Thereby, since the ground is excavated step by step, damage to the buried object or the like can be prevented even when the buried object or the like exists.
  • the terrain data projection unit 508 changes the color, illuminance, and the like of the light rays that irradiate each point according to the vertical distance between each point and the target plane.
  • the terrain data projection unit 508 is green when the vertical distance is zero. Then, the closer the vertical distance is to the plus side (the closer to the target plane TP), the closer to blue, and the longer the vertical distance to the minus side (the deeper the target plane TP), the closer to the red. Other colors may be used.
  • the terrain data projection unit 508 may change the color of the light beam stepwise or steplessly according to the vertical distance. Further, the terrain data projection unit 508 may change the shade of the color projected on the ground CP according to the magnitude of the vertical distance. When the color density is expressed by halftone dots, the density may be changed. In this case, the color projected on the ground CP may be a single color.
  • the dot hatching region PR shows a state in which the color of the light beam is changed in three stages according to the vertical distance.
  • the region PR1 indicates a state where the current height of the ground CP is higher (shallow) than the height of the target surface TP.
  • the point P1 is included in this region PR1.
  • the region PR2 shows a state where the current height of the ground CP is equal to the height of the target surface TP.
  • the point P2 is included in this region PR2.
  • the region PR3 indicates a state where the current height of the ground CP is lower (deeper) than the height of the target surface TP.
  • the point P3 is included in this region PR3.
  • the projection device S9 irradiates the region PR1 with blue light.
  • the projection device S9 irradiates the region PR2 with green light and irradiates the region PR3 with red light.
  • the projection device S9 may irradiate the entire region PR2 evenly, or may irradiate not only the inside of the region PR2 but also its contour so that the contour of the region PR2 stands out.
  • the contour portion may be irradiated with a light beam of another color.
  • contour lines contour lines (contour lines) may be displayed at predetermined heights (depths) within the region PR2. The same applies to the region PR3.
  • the terrain data projection unit 508 may project character information.
  • FIG. 5 shows a state in which the character information “remaining OOm 3 ” is projected on the region PR1. “Remaining OOm 3 ” represents the amount of soil to be excavated.
  • the terrain data projection unit 508 may project the character information at a predetermined position, or may select the relatively flat portion of the region PR1 and project the character information. Character information may be projected onto the region PR2 or the region PR3. Further, the terrain data projection unit 508 may project the target ground contact position TC.
  • the target ground contact position TC indicates, for example, a position on the ground where the toes of the bucket 6 should be brought into contact.
  • FIG. 5 shows a state where the target ground contact position TC is projected on the region PR1. Further, the same information as the information projected by the terrain data projection unit 508 may be displayed on the display device D3 in the cabin 10.
  • FIG. 6 is a flowchart of an example of the visualization process, and the terrain data projection unit 508 repeatedly executes this visualization process at a predetermined control cycle.
  • the terrain data projection unit 508 calculates the three-dimensional coordinates of each point P corresponding to each ray (step ST1). For example, as illustrated in FIG. 4, the terrain data projection unit 508 calculates the three-dimensional coordinates of the points P1, P2, and P3 corresponding to the light rays L1, L2, and L3.
  • the terrain data projection unit 508 determines the color of the light according to the vertical distance (step ST3). For example, as shown in FIG. 4, the terrain data projection unit 508 changes the color of the light beam L1 that hits the point P1 located at the vertical distance C1 from the target plane TP to blue. Further, the color of the light beam L2 that is at the vertical distance C2 from the target surface TP, that is, the point P2 that is at the same height as the target surface TP, is green. In addition, the color of the light beam L3 impinging on the point P3 located at the vertical distance C3 from the target surface TP is changed to red.
  • the terrain data projection unit 508 determines whether or not the color of the light beam has been determined for all the points P (step ST4).
  • the terrain data projection unit 508 returns the process to step ST1 and restarts the processes after step ST1.
  • the terrain data projection unit 508 ends the current visualization process.
  • the terrain data projection unit 508 visualizes the relationship between the current shape of the ground CP and the shape of the target surface TP by projection mapping by the projection device S9. Specifically, the vertical distance between the current ground CP and the target surface TP is visualized by color coding.
  • the operator of the shovel can check the depth of the target surface TP at the same time while visually checking the tip of the bucket 6. That is, the unevenness of the current ground CP with respect to the target surface TP can be confirmed, and it can be determined which portion should be dug and how much can be backfilled. Further, the operator of the shovel does not need to remove the line of sight from the tip of the bucket 6 in order to confirm the depth of the target surface. This is because the depth of the target surface TP can be confirmed by looking at the light (image) projected onto the ground without looking at the display device D3. As a result, the excavator can improve work efficiency and shorten work time.
  • the above-described configuration has an effect of reducing eye strain of the excavator operator. This is because the operator does not need to move his / her line of sight between the tip of the bucket 6 and the display device D3. That is, it is not necessary to move the line of sight between the toe of the bucket 6 that is relatively far away and the display device D3 that is relatively close, and it is not necessary to frequently adjust the focal distance of the eyes.
  • the display device D3 arranged in the cabin 10 may display the same image as the image projected on the ground in front of the shovel by the projection device S9. In this case, the images representing the regions PR2 and PR3 may be displayed superimposed on the camera image output by the imaging device that images the front of the excavator.
  • Projection device S9 projects construction information on the ground outside the shovel as described above. Therefore, not only the operator of the shovel but also the workers around the shovel can grasp the construction information.
  • FIG. 7 shows the ground in front of the shovel as seen from the cabin 10, and corresponds to FIG.
  • FIG. 8 is a flowchart of another example of the visualization process, and corresponds to FIG.
  • the state shown in FIG. 7 is different from the state shown in FIG. 5 mainly in that the embedded area BP is included in the dot hatching area PR, but is common in other points.
  • 8 is different from the flowchart of FIG. 6 in that it includes step ST1A and step ST3A, but is common in other points. Therefore, the description of the common part is omitted, and the different part is described in detail.
  • the terrain data projection unit 508 calculates the three-dimensional coordinates of a point corresponding to a specific light ray, and then determines whether there is an embedded object immediately below the point (step ST1A). For example, the terrain data projection unit 508 determines whether there is an embedded object directly below the point based on the design data.
  • step ST1A If it is determined that there is no embedded object (NO in step ST1A), the terrain data projection unit 508 executes the processing after step ST2.
  • the terrain data projection unit 508 sets the color of the light beam that irradiates the spot to a predetermined color (step ST3A). For example, the terrain data projection unit 508 selects a color (for example, gray) representing an underground object as the color of the light beam that irradiates the point, regardless of the vertical distance between the point and the target plane TP.
  • the buried object region BP in FIG. 7 shows a state in which a color representing the underground object is projected on the ground.
  • the terrain data projection unit 508 may project character information together with a color (image) representing an underground object.
  • FIG. 7 shows a state in which the character information “underground OOm” and “remaining OOm” are projected on the dot hatching region PR.
  • “Underground OOm” represents the burial depth of the buried object.
  • “Remaining OOm” represents the distance to the embedding depth, that is, the distance between the current ground and the embedding depth.
  • the terrain data projection unit 508 may project the character information at a predetermined position, or may select the relatively flat portion of the dot hatching region PR and project the character information. The character information may be projected as close as possible to the image representing the underground object.
  • the terrain data projection unit 508 can make the excavator operator aware of the presence by visualizing the underground object.
  • the operator of the shovel can recognize the position of the underground object without removing the line of sight from the tip of the bucket 6. Therefore, the operator of the shovel can continue excavation work while avoiding damage to the underground objects.
  • FIG. 9 is a diagram showing the relationship between the excavator PS and the projection device S9.
  • the shovel PS in FIG. 9 is different from the shovel in FIG. 1 in that the projection device S9 is installed outside the shovel PS, but is common in other points. Therefore, the description of the common part is omitted, and the different part is described in detail.
  • the projection device S9 is attached to a steel tower installed at the construction site.
  • the excavator PS wirelessly transmits and receives information to and from the projection device S9 through the communication network CN using the communication device S7.
  • Information may be directly transmitted to and received from the projection device S9 without going through the communication network CN.
  • the excavator PS may simultaneously control a plurality of projection apparatuses S9 attached to a steel tower at a construction site. Conversely, the projection device S9 may be controlled by a plurality of excavators PS.
  • the excavator PS can achieve the same effect as the excavator described with reference to FIGS.
  • the excavator PS can visualize the relationship between the current shape of the ground surface and the shape of the target surface by controlling one or a plurality of projection devices S9 installed outside the excavator PS. Therefore, it is possible to visualize the relationship between the current shape of the ground in a wider range and the shape of the target surface.
  • FIG. 10 is a side view of the excavator PS.
  • FIG. 11 is a front view of the excavator PS.
  • the excavator PS is different in posture between FIG. 10 and FIG.
  • the excavator PS includes a crawler type lower traveling body 1.
  • the lower revolving unit 1 of the excavator PS is equipped with an upper revolving unit 3 via a revolving mechanism 2.
  • a boom 4 is attached to the upper swing body 3.
  • An arm 5 is attached to the tip of the boom 4, and a bucket 6 is attached to the tip of the arm 5.
  • the boom 4, the arm 5, and the bucket 6 constitute an excavation attachment that is an example of an attachment.
  • the boom 4, arm 5, and bucket 6 are hydraulically driven by a boom cylinder 7, an arm cylinder 8, and a bucket cylinder 9, respectively.
  • a power source such as an engine 11 is mounted on the upper swing body 3.
  • illustration of the arm 5, the bucket 6, the boom cylinder 7, the arm cylinder 8, the bucket cylinder 9 and the like is omitted for the sake of clarity.
  • a cabin 10 is installed at the front end (+ X side end) on the left side ( ⁇ Y side) of the upper swing body 3.
  • the front surface (+ X side surface) of the cabin 10 is covered with a lower front window 10a and an upper front window 10b.
  • the upper front window 10b may be configured to be openable and closable.
  • the top surface (+ Z side surface) of the cabin 10 is covered with a top window 10c.
  • a handrail 10 d is attached to the outside of the left front pillar of the cabin 10.
  • a tool box 3a is installed at the front end (+ X side end) on the right side (+ Y side) of the upper swing body 3.
  • a urea water tank 3b is installed on the rear side ( ⁇ X side) of the tool box 3a, and a fuel tank 3c is installed on the rear side of the urea water tank 3b.
  • the urea water tank 3b is shown by a hidden line. This is because it is housed in the house cover of the upper swing body 3.
  • the tool box 3a, the house cover that covers the urea water tank 3b, and the fuel tank 3c form a stair so that the operator can move up and down. Therefore, a handrail 3d is attached to the outside (+ Y side) of the stairs.
  • a guard rail 3e is attached to the upper surface of the fuel tank 3c. The guard rail may be attached to the upper surface of the house cover installed on the rear side of the cabin 10.
  • the lower traveling body 1 mainly includes a frame 1a, a crawler belt 1b, a carrier roller 1c, a track roller 1d, a step 1e, a traveling hydraulic motor 1M, and the like.
  • FIG. 11 shows the state of main components of the lower traveling body 1 when the plane including the one-dot chain line L4 of FIG. 10 is viewed from the + X side.
  • the frame 1 a is a member that forms the skeleton of the lower traveling body 1.
  • the frame 1a includes a left frame portion 1a-L, a right frame portion 1a-R, and a central frame portion 1a-C that connects the left frame portion 1a-L and the right frame portion 1a-R.
  • the crawler belt 1b is an endless track (track) that is rotationally driven by the traveling hydraulic motor 1M.
  • the crawler belt 1b includes a left crawler belt 1b-L and a right crawler belt 1b-R.
  • the carrier roller 1c is a driven roller disposed between the frame 1a and the crawler belt 1b on the upper side of the frame 1a.
  • the track roller 1d is a driven roller disposed between the frame 1a and the crawler belt 1b below the frame 1a.
  • Step 1e is a member used when the worker climbs up and down the lower traveling body 1.
  • the step 1e includes a left front step 1e-FL, a left rear step 1e-BL, a right front step 1e-FR, and a right rear step 1e-BR (not shown).
  • the left front step 1e-FL and the left rear step 1e-BL are welded to the left side surface of the left frame portion 1a-L.
  • the left front step 1e-FL is configured not to protrude from the width Wc of the left crawler belt 1b-L, that is, not to protrude from the left end of the left crawler belt 1b-L.
  • the height Hs of the left front step 1e-FL is, for example, approximately half of the height Hc of the left crawler belt 1b-L.
  • the operator sequentially steps the front right step 1e-FR, the upper surface of the right crawler belt 1b-R, the step 3f, the upper surface of the tool box 3a, the upper surface of the house cover that covers the urea water tank 3b, and the upper surface of the fuel tank 3c.
  • Step 3f is a step that is attached to the swivel frame in front of the tool box 3a. The same applies to when descending to the ground from the top of the upper swing body 3 except that the order is reversed.
  • the operator can reach the cabin 10 by sequentially using, for example, the front left step 1e-FL and the upper surface of the left crawler belt 1b-L. The same applies to when getting off the cabin 10 to the ground, except that the order is reversed.
  • the traveling hydraulic motor 1M is attached to the rear end ( ⁇ X side end) of the frame 1a.
  • the traveling hydraulic motor 1M includes a left traveling hydraulic motor 1M-L and a right traveling hydraulic motor 1M-R (not shown).
  • the left traveling hydraulic motor 1M-L is attached to the rear end of the left frame portion 1a-L.
  • the left crawler belt 1b-L includes a drive sprocket coupled to the rotation shaft of the left traveling hydraulic motor 1M-L and a left driven sprocket 1S-L rotatably attached to the front end of the left frame portion 1a-L. I am engaged with each other.
  • the traveling hydraulic motor 1M rotates counterclockwise in FIG. 10
  • the crawler belt 1b also rotates counterclockwise and the excavator PS advances.
  • the traveling hydraulic motor 1M rotates clockwise
  • the crawler belt 1b also rotates clockwise and the excavator PS moves backward.
  • FIG. 12 is a perspective view of the lower traveling body 1 when the lower traveling body 1 is viewed from the upper left front side.
  • step 1e is formed by bending a single metal plate into a U shape. The both ends are welded to the frame 1a.
  • Step 1e may be formed by combining a plurality of metal plates. Step 1e may be fastened to the frame 1a with a bolt.
  • Step 1e is different in color from the frame 1a so that an operator (especially an operator who tries to get down to the ground using the step 1e from above the lower traveling body 1) can distinguish the frame 1a from the step 1e. So that it is painted.
  • the color property is represented by, for example, three attributes of hue, lightness, and saturation. “The color properties are different” means, for example, that each attribute stage is different in a color system that quantitatively represents a color. For example, in the Munsell color system, the hue is expressed in 100 levels, the lightness is expressed in 11 levels, and the saturation is expressed in 14 levels.
  • Step 1e is painted, for example, so that its color differs from the color of the frame 1a in at least one of hue, brightness, and saturation.
  • Step 1e may be painted with an achromatic paint or may be painted with a chromatic paint.
  • Step 1e may be painted with a fluorescent paint, a reflective paint, an antireflection paint, a phosphorescent paint, or the like. The same applies to the frame 1a.
  • the color brightness of step 1e is preferably higher than the color brightness of frame 1a.
  • the lightness of the color of the frame 1a and the lightness of the color of the step 1e are desirably different from each other by two or more levels, and more desirably four or more levels.
  • the step 1e may be painted so that the color is equal to or higher than the predetermined lightness (for example, lightness “6”).
  • the step 1e may be painted so that the color is lower than the predetermined lightness (for example, lightness “5”).
  • the step 1e can be easily distinguished from the frame 1a by making a difference in brightness.
  • the color hue of the step 1e may be the same as the color hue of the upper swing body 3, or may be different from the color hue of the upper swing body 3.
  • the hue of the color of step 1e is the same as the hue of the color of the upper swing body 3
  • the same paint can be used for the coating of the upper swing body 3 and step 1e. That is, the color of step 1e may be the same as the color of the upper swing body 3 in all of hue, brightness, and saturation.
  • the hue of the color in step 1e is preferably a highly discriminating color, for example, yellow or yellowish green.
  • the color of step 1e may be a complementary color of the color of the frame 1a or a complementary color of the color of the upper swing body 3.
  • the color of step 1e may be determined according to the use environment of the excavator.
  • the use environment of the excavator includes, for example, a scrap yard, a road, a forest area, a mountain area, and the like.
  • the color of Step 1e includes at least one of the side and top paint colors of Step 1e. That is, the step 1e is painted so that the color property differs from that of the frame 1a on at least one of the side surface and the upper surface. This is because an operator who goes up and down the lower traveling body 1 can easily find Step 1e.
  • the color of the side surface of Step 1e may be different from the color of the upper surface of Step 1e in at least one of hue, lightness, and saturation.
  • FIG. 12 shows a state where the upper surface UP and the side surface SP of the left front step 1e-FL are painted in different colors.
  • the side surface of Step 1e is basically painted with one color, but it may be painted with a plurality of colors different in at least one of hue, brightness and saturation. For example, it may be separately painted in two colors, a color that stands out at night and a color that stands out during the day. The same applies to the upper surface of step 1e.
  • the color of the left front step 1e-FL is basically the same as the color of the left rear step 1e-BL, but is painted so that it differs from the color of the left rear step 1e-BL in at least one of hue, brightness, and saturation. May be.
  • the colors of the left front step 1e-FL and the left rear step 1e-BL are basically the same as the colors of the right front step 1e-FR and the right rear step 1e-BR, but at least one of hue, lightness, and saturation. However, it may be painted differently from the color of the right front step 1e-FR and the right rear step 1e-BR. With this color scheme, the operator can more easily determine the orientation of the lower traveling body 1.
  • step 1e basically means the color of step 1e itself, but it may mean the color of the sticker affixed to step 1e, the color of another member fixed to step 1e, or the like. The same applies to the frame 1a.
  • Step 1e is a configuration example of Step 1e. Specifically, it is a perspective view of the left front step 1e-FL.
  • the left front step 1e-FL in FIG. 13A is different from the left front step 1e-FL in FIG. 12 in that the upper surface UPa is anti-slip processed. Specifically, the surface is configured to be a wavy surface.
  • 13B is different from the left front step 1e-FL in FIG. 12 in that a hole formed between the frame 1a and the left front step 1e-FL is closed with a metal plate UPb.
  • the metal plate UPb may be subjected to anti-slip processing as in the case of FIG. 13A.
  • the excavator PS includes the step 1e having a color different from that of the frame 1a. Therefore, step 1e that can be easily distinguished from frame 1a can be provided. For example, when the operator gets out of the cabin 10 and gets off, the operator can easily recognize step 1e, and does not step off step 1e.
  • the terrain data projection unit 508 visualizes the underground object in one gray color, but changes the color, illuminance, etc. according to the vertical distance to the underground object. Also good.
  • the projection device S9 is attached to the excavator PS.
  • the projection device S9 may be a projection device S9D attached to the flying body DR that flies over the excavator PS.
  • the flying body DR is, for example, an autonomous flying body that can fly by remote control or automatic control, and includes, for example, a multicopter (drone), an airship, and the like.
  • the flying object DR is a quadcopter equipped with a communication device S7D, a positioning device S8D, and a projection device S9D.
  • a dot hatching region PR in FIG. 14 indicates the projection range of the projection device S9D.
  • the projection device S9 may be a projection device S9T attached to a support stand TR installed outside the excavator PS.
  • the support base TR is, for example, a support fixed to the ground or a tripod that can be carried.
  • the support base TR is a tripod to which the communication device S7T, the positioning device S8T, and the projection device S9T are attached.
  • a dot hatching region PR in FIG. 15 indicates a projection range of the projection device S9T.
  • FIG. 14 and 15 show an example in which the projection device S9 is installed at a position away from the excavator PS.
  • a control device that controls the projection device S9 to change the information visualized on the ground may be arranged in the projection device S9.
  • communication means may be arranged in the projection device S9.
  • the control device of the projection device S9 receives information on construction, information on the operation state, and the like from the controller 30 (control device) disposed in the construction machine such as the excavator PS via the communication means. May be.
  • construction machines that can use the present invention include excavators (hydraulic excavators), bulldozers, wheel loaders, and the like.
  • Projection device S9 may be configured to project light onto the attachment.
  • the projection device S ⁇ b> 9 may be configured to project light onto a projection surface on the ventral side of the excavation attachment.
  • the projection surface includes, for example, at least one of the back surface of the bucket 6, the surface of the excavated object EX such as earth and sand taken into the bucket 6, and the abdominal surface of the arm 5.
  • the operator can visually recognize the information projected on the projection plane by looking at the ventral side of the excavation attachment from the driver's seat. it can.
  • the machine guidance device 50 may change the arrangement of the projection plane according to a change in the posture of the excavation attachment.
  • the information projected on the projection plane includes at least one of a bucket loading weight or a loading remaining amount as shown in FIG. 17, for example.
  • the bucket take-in weight is the weight of the excavated object EX taken into the bucket 6.
  • the bucket intake weight may be calculated based on, for example, loads detected by the boom cylinder pressure sensor, the arm cylinder pressure sensor, and the bucket cylinder pressure sensor.
  • the remaining loading amount is a value obtained by subtracting the weight of the excavated object EX already loaded on the dump truck bed from the maximum loading capacity of the dump truck.
  • FIG. 17 shows a state in which the bucket loading weight and the remaining loading amount are projected on the surface of the excavated object EX captured in the bucket 6 and the abdominal surface of the arm 5. Further, FIG. 17 shows that the bucket loading weight is 150 kg and the remaining loading amount is ⁇ 0 kg.
  • the bucket intake weight may be calculated, for example, when a boom raising turning operation is performed after the excavation is completed, and then projected. Further, the remaining amount of loading may be calculated based on, for example, the difference between the total weight of the bucket loaded from the start of loading and the maximum loaded weight of the dump truck, which is calculated for each dump truck.
  • the projection device S9 may be used to support work other than excavation work.
  • the projection device S9 may be used to support road laying work as shown in FIG. FIG. 18 relates to a visualization process when a road laying operation is performed.
  • the target plane TP is set above the current ground CP.
  • the road is configured to include four layers of an upper layer roadbed, a lower layer roadbed, a roadbed, and a road body. Therefore, the target surface TP includes a target surface TP1 of the upper layer roadbed, a target surface TP2 of the lower layer roadbed, a target surface TP3 of the roadbed, and a target surface TP4 of the road body.
  • FIG. 18 relates to a visualization process when a road laying operation is performed.
  • the target plane TP is set above the current ground CP.
  • the road is configured to include four layers of an upper layer roadbed, a lower layer roadbed, a roadbed, and a road body. Therefore, the target surface TP includes a target surface
  • the excavator PS performs a banking operation for forming the target surface TP1 of the upper roadbed and a rolling operation for finishing the target surface TP2 of the lower roadbed. That is, the embankment work and the rolling work for the road bed and the road body have already been completed.
  • points P1, P2, and P3 in FIG. 18 are points on the ground CP onto which the light rays L1, L2, and L3 are projected, and all are on the target plane TP2.
  • the dot hatching area PR indicates the projection range of the projection device S9.
  • the information projected by the projection device S9 includes, for example, as shown in FIG. 19, the rolling force, the target thickness of the layer, and the amount of soil necessary for forming the layer.
  • FIG. 19 shows that the target thickness of the upper roadbed is 30 cm, the amount of soil necessary to complete the upper roadbed is “ ⁇ m 3 ”, and the rolling force required to form the lower roadbed is It shows that it is “ ⁇ tons”.
  • the region PR1 shows a state in which the current height of the ground CP is higher (shallow) than the height of the target surface TP2 of the lower roadbed.
  • the region PR2 shows a state where the current height of the ground CP is equal to the height of the target surface TP2 of the lower roadbed.
  • region PR4 has shown the range where the rolling pressure is insufficient among lower layer roadbeds.
  • the machine guidance device 50 can notify the operator not only of the value of the rolling pressure necessary for forming the lower roadbed but also the range where the rolling pressure is insufficient.
  • the machine guidance device 50 notifies the operator that the embankment work for the upper layer roadbed should be started when the rolling work for the lower layer roadbed is completed (for example, when the range where the rolling pressure is insufficient is lost). It may be.
  • the machine guidance device 50 may be configured to project the embedding position onto the ground using the projection device S9 when a reinforcing material such as a log is embedded to reinforce the road. In this way, the machine guidance device 50 can project useful information that differs from work to work on the ground.
  • the useful information that differs for each work may include, for example, at least one of instruction information or numerical information that changes according to the progress of the work.
  • the projection device S9 may be configured to project light not only in front of the excavator PS body but also in a plurality of directions including at least one of the side and rear of the body.
  • the projection device S9 may include a front projection device S9F, a left projection device S9L, a right projection device S9R, and a rear projection device S9B as shown in FIGS. 20 and 21, for example.
  • the projection device S9 allows an operator working around the excavator PS to enter an entry prohibition area within the first distance from the aircraft and a second distance greater than the first distance from the aircraft.
  • the ground may be irradiated with light so that a certain attention area and a work area outside the attention area can be distinguished.
  • the dark satin pattern represents the entry prohibition region PRa
  • the thin satin pattern represents the attention region PRb.
  • the work area corresponds to a range outside the attention area PRb.
  • the first distance and the second distance are both distances from the turning axis. However, each of the first distance and the second distance may be a distance from the side end surface of the upper swing body 3.
  • the entry prohibition region PRa is irradiated with a red light beam
  • the attention region PRb is irradiated with a green light beam
  • the work region is not irradiated.
  • the attention area PRb may be irradiated with a yellow light beam.
  • the projection device S9 is configured to irradiate the entry prohibition region PRa and the attention region PRb when the engine 11 is ON. Therefore, an operator or the like can easily grasp the degree of approach of the excavator PS even at a work site where the engine sound cannot be heard due to ambient noise.
  • the projection device S9 may be configured to irradiate the entry prohibition region PRa and the attention region PRb when the gate lock valve D6 is in the open state. Further, the projection device S9 may be configured to project character information or graphic information that informs that the excavator PS is in an operating state onto the ground.
  • the projection device S9 may be configured to irradiate a predetermined area on the ground around the excavator PS according to the operation content of the operation device 26.
  • the projection device S9 is configured to irradiate the right front region PRc and the left rear region PRd with light of a predetermined color as shown in FIG. May be.
  • the front right region PRc corresponds to a range where there is a possibility that an object in contact with the excavation attachment exists when a right turn operation is performed.
  • the rear left region PRd corresponds to a range where there is a possibility that an object in contact with the counterweight exists when a right turn operation is performed.
  • the figure shown with the broken line of FIG. 22 represents the upper turning body 3 in the right turn.
  • the size of the right front region PRc may be configured to change according to changes in the posture of the excavation attachment, the tilt angle of the turning operation lever, and the like. The same applies to the left rear region PRd.
  • the projection device S9 may be configured to project light onto the ground in front and rear of the lower traveling body 1 when the excavator PS travels.
  • the projection device S9 may be configured to irradiate the front region PRe and the rear region PRf as shown in FIG. 23 when the travel lever is operated.
  • the front region PRe corresponds to a range where there is a possibility that an object that contacts the lower traveling body 1 exists when a forward operation is performed.
  • the rear region PRf corresponds to a range in which an object that contacts the lower traveling body 1 may exist when a reverse operation is performed.
  • the projection device S9 may be configured to irradiate the rear region PRf only when the backward operation is performed.
  • the size of the front region PRe may be configured to change in accordance with a change in the tilt angle or the like of the traveling lever.
  • the rear projection device S9B and the front projection device S9F constituting the projection device S9 may be connected in series by an electric circuit.
  • the operator of the excavator PS can confirm that the rear projection device S9B is operating normally, for example, by visually recognizing the light projected by the front projection device S9F. This is because the front projection device S9F cannot project light when the electrical circuit is interrupted by the rear projection device S9B.
  • Communication device S8, S8D, S8T ... Positioning device S9, S9D, S9T ... Projection device D1 ... Input device D2 ... Audio output device D3 ... Display device D3a ... Conversion processing part D4 ... Storage device D5 ... Gate lock lever D6 ; Gate lock valve D7 ... Engine controller unit DR ... Aircraft PS ... Excavator TR ... Support stand

Landscapes

  • Engineering & Computer Science (AREA)
  • Mining & Mineral Resources (AREA)
  • Civil Engineering (AREA)
  • General Engineering & Computer Science (AREA)
  • Structural Engineering (AREA)
  • Mechanical Engineering (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • General Life Sciences & Earth Sciences (AREA)
  • Paleontology (AREA)
  • Component Parts Of Construction Machinery (AREA)
  • Operation Control Of Excavators (AREA)
  • Transforming Electric Information Into Light Information (AREA)

Abstract

本発明の実施例に係るショベルは、下部走行体(1)と、下部走行体(1)に旋回可能に搭載される上部旋回体(3)と、地面に光を投影する投影装置(S9)を制御するマシンガイダンス装置(50)とを備える。マシンガイダンス装置(50)は、上部旋回体(3)に取り付けられ、且つ、投影装置(S9)を制御して地面の現在の形状と目標面の形状との関係を可視化するように構成されている。

Description

ショベル及び建設機械の作業支援システム
 本発明は、ショベル及び建設機械の作業支援システムに関する。
 従来、目標面とバケットの刃先との間の距離を示す数値をモニタに表示して操作者による掘削作業を支援する建設機械としてのショベルが知られている(例えば特許文献1参照)。目標面は、目標通りに掘削作業が行われた場合に得られる地面であり、典型的には、現在の地面の下に埋まっている。
 モニタは、運転室内で操作者の近くに設置されている。従って、操作者は、運転室の外にある実際のバケットの刃先と、運転室内のモニタに表示される数値とを交互に見ながら、操作レバーを操作して掘削作業を行う。
特開2012-172425号公報
 しかしながら、操作者は、モニタを確認するためにバケットの刃先から一時的に目を離す必要があり、操作レバーによる掘削作業を中断させる場合がある。また、ショベルの周囲の作業者は、建設機械が把握している情報を確認することができない。そのため、上述のショベルは、掘削作業の効率を低下させるおそれがある。
 上述に鑑み、作業効率を低下させずに、操作者若しくは周囲の作業者を支援できるショベルを提供することが望ましい。
 本発明の実施例に係るショベルは、下部走行体と、前記下部走行体に旋回可能に搭載される上部旋回体と、地面に光を投影する投影装置を制御する制御装置と、を備え、前記制御装置は、前記上部旋回体に取り付けられ、且つ、前記投影装置を制御して前記地面の現在の形状と目標面の形状との関係を可視化するように構成されている。
 上述の手段により、作業効率を低下させずに、操作者若しくは周囲の作業者を支援できるショベルを提供することができる。
ショベルの側面図である。 図1のショベルの駆動系の構成例を示す図である。 マシンガイダンス装置の構成例を示すブロック図である。 ショベルが位置する地面の側断面図である。 キャビン内から見たショベルの前方の地面を示す図である。 可視化処理の一例のフローチャートである。 キャビン内から見たショベルの前方の地面を示す図である。 可視化処理の別の一例のフローチャートである。 ショベルと投影装置の関係を示す図である。 ショベルの側面図である。 図10のショベルの正面図である。 下部走行体の斜視図である。 ステップの斜視図である。 ステップの斜視図である。 ショベルが位置する地面の側断面図である。 ショベルが位置する地面の側断面図である。 ショベルが位置する地面の側断面図である。 キャビン内から見たショベルの前方の空間を示す図である。 ショベルが位置する地面の側断面図である。 キャビン内から見たショベルの前方の空間を示す図である。 ショベルの側面図である。 ショベルの上面図である。 ショベルの上面図である。 ショベルの上面図である。
 図1は本発明の実施形態に係るショベル(掘削機)の側面図である。ショベルの下部走行体1には旋回機構2を介して上部旋回体3が旋回可能に搭載されている。上部旋回体3にはブーム4が取り付けられている。ブーム4の先端にはアーム5が取り付けられ、アーム5の先端にはエンドアタッチメントとしてのバケット6が取り付けられている。エンドアタッチメントとして、法面用バケット、浚渫用バケット等が用いられてもよい。
 ブーム4、アーム5、及びバケット6は、アタッチメントの一例としての掘削アタッチメントを構成し、ブームシリンダ7、アームシリンダ8、及びバケットシリンダ9によりそれぞれ油圧駆動される。ブーム4にはブーム角度センサS1が取り付けられ、アーム5にはアーム角度センサS2が取り付けられ、バケット6にはバケット角度センサS3が取り付けられている。掘削アタッチメントには、バケットチルト機構が設けられてもよい。
 ブーム角度センサS1はブーム4の回動角度を検出する。本実施例では、ブーム角度センサS1は水平面に対する傾斜を検出して上部旋回体3に対するブーム4の回動角度を検出する加速度センサである。
 アーム角度センサS2はアーム5の回動角度を検出する。本実施例では、アーム角度センサS2は水平面に対する傾斜を検出してブーム4に対するアーム5の回動角度を検出する加速度センサである。
 バケット角度センサS3はバケット6の回動角度を検出する。本実施例では、バケット角度センサS3は水平面に対する傾斜を検出してアーム5に対するバケット6の回動角度を検出する加速度センサである。掘削アタッチメントがバケットチルト機構を備える場合、バケット角度センサS3はチルト軸回りのバケット6の回動角度を追加的に検出する。
 アタッチメントの姿勢センサに含まれるブーム角度センサS1、アーム角度センサS2、及びバケット角度センサS3は、可変抵抗器を利用したポテンショメータ、対応する油圧シリンダのストローク量を検出するストロークセンサ、連結ピン回りの回動角度を検出するロータリエンコーダ等であってもよい。
 上部旋回体3には、キャビン10が設けられている。キャビン10内には、運転操縦部としての操作装置26が設けられている。また、上部旋回体3にはエンジン11等の動力源が搭載されている。また、上部旋回体3には、機体傾斜センサS4、旋回角速度センサS5が取り付けられている。また、キャビン10にはステレオカメラS6、通信装置S7、測位装置S8、及び投影装置S9が取り付けられている。投影装置S9は、上部旋回体3の右前部にある工具箱の中等、他の位置に取り付けられていてもよい。工具箱内に設置された場合、投影装置S9は、工具箱のカバーに形成されたスリット等を通じて光を投影する。工具箱は施錠可能であるため、盗難防止の効果も有する。また、複数台の投影装置S9がショベルに取り付けられていてもよい。
 機体傾斜センサS4は水平面に対する上部旋回体3の傾斜を検出する。本実施例では、機体傾斜センサS4は上部旋回体3の前後軸及び左右軸回りの傾斜角を検出する2軸加速度センサである。上部旋回体3の前後軸及び左右軸は、例えば、互いに直交してショベルの旋回軸上の一点であるショベル中心点を通る。
 旋回角速度センサS5は、上部旋回体3の旋回角速度を検出する。旋回角速度センサS5は、例えばジャイロセンサである。旋回角速度センサS5は、レゾルバ、ロータリエンコーダ等であってもよい。
 ステレオカメラS6は、ショベルの周辺の画像を取得するステレオ撮影可能な撮像装置である。本実施例では、ステレオカメラS6はキャビン10の前側(進行方向側)の上部に取り付けられている。ステレオカメラS6は単眼カメラであってもよい。この場合、ステレオカメラS6は、撮像位置を僅かに異ならせて撮像した2つのカメラ画像をステレオペア画像とする。撮像位置の移動は、例えば、上部旋回体3の旋回によって実現され、且つ、ジャイロセンサ、GNSS(Global Navigation Satellite System)等を用いて測定される。
 通信装置S7は、ショベルと外部との間の通信を制御する装置である。通信装置S7は、例えば、GNSS等の測量システムとショベルとの間の無線通信を制御する。ショベルは、通信装置S7を用いることで無線通信を介して目標面に関する情報等を含む設計データを取得できる。但し、ショベルは、半導体メモリ等を用いて設計データを取得してもよい。
 測位装置S8は、ショベルの位置及び向きを測定する装置である。本実施例では、測位装置S8は、電子コンパスを組み込んだGNSS受信機であり、ショベルの存在位置の緯度、経度、高度を測定し、且つ、ショベルの向きを測定する。
 投影装置S9は、地面に光を投影する装置である。投影装置S9は、例えば、3Dプロジェクションマッピング用の液晶プロジェクタ、DLP(登録商標)プロジェクタ等である。本実施例では、投影装置S9は、1024×768画素の解像度を有するDLP(登録商標)プロジェクタである。より高い解像度であってもよく、より低い解像度であってもよい。
 キャビン10内には、入力装置D1、音声出力装置D2、表示装置D3、記憶装置D4、ゲートロックレバーD5、コントローラ30、及びマシンガイダンス装置50が設置されている。
 コントローラ30は、ショベルの駆動制御を行う制御装置として機能する。本実施例では、コントローラ30は、CPU及び内部メモリを含む演算処理装置で構成されている。コントローラ30の各種機能は、CPUが内部メモリに格納されたプログラムを実行することで実現される。
 マシンガイダンス装置50は、ショベルの操作をガイドする制御装置である。本実施例では、マシンガイダンス装置50は、例えば、操作者が設定した目標面とバケット6の先端(爪先)位置との鉛直距離を視覚的に且つ聴覚的に操作者に知らせる。これにより、マシンガイダンス装置50は操作者によるショベルの操作をガイドできる。マシンガイダンス装置50は、その距離を視覚的に操作者に知らせるのみであってもよく、聴覚的に操作者に知らせるのみであってもよい。具体的には、マシンガイダンス装置50は、コントローラ30と同様、CPU及び内部メモリを含む演算処理装置で構成されている。そして、マシンガイダンス装置50の各種機能はCPUが内部メモリに格納されたプログラムを実行することで実現される。また、マシンガイダンス装置50は、例えば、投影装置S9を制御し、現在の地面上の各点と目標面上の対応点との鉛直距離に対応する色の光でその地面上の各点を照射してもよい。また、マシンガイダンス装置50は、コントローラ30とは別個に設けられてもよく、或いは、コントローラ30に組み込まれていてもよい。
 入力装置D1は、ショベルの操作者がマシンガイダンス装置50に各種情報を入力するための装置である。本実施例では、入力装置D1は、表示装置D3の周囲に取り付けられているメンブレンスイッチである。入力装置D1としてタッチパネル等が用いられてもよい。
 音声出力装置D2は、マシンガイダンス装置50からの音声出力指令に応じて音声情報を出力する。本実施例では、音声出力装置D2は、マシンガイダンス装置50に直接接続される車載スピーカである。音声出力装置D2は、ブザー等の警報器であってもよい。
 表示装置D3は、マシンガイダンス装置50からの指令に応じて画像情報を出力する。本実施例では、表示装置D3は、マシンガイダンス装置50に直接接続される液晶ディスプレイである。
 記憶装置D4は、各種情報を記憶するための装置である。本実施例では、記憶装置D4は、半導体メモリ等の不揮発性記憶媒体である。記憶装置D4は、例えば、マシンガイダンス装置50等が出力する各種情報を記憶する。
 ゲートロックレバーD5は、ショベルが誤って操作されるのを防止する機構である。本実施例では、ゲートロックレバーD5は、キャビン10のドアと運転席との間に配置されている。キャビン10から操作者が退出できないようにゲートロックレバーD5が引き上げられた場合に、各種操作装置は操作可能となる。一方、キャビン10から操作者が退出できるようにゲートロックレバーD5が押し下げられた場合には、各種操作装置は操作不能となる。
 図2は、図1のショベルの駆動系の構成例を示す図である。図2において、機械的動力伝達系は二重線、作動油ラインは太実線、パイロットラインは破線、電気駆動・制御系は細実線でそれぞれ示されている。
 エンジン11はショベルの動力源である。本実施例では、エンジン11は、エンジン負荷の増減にかかわらずエンジン回転数を一定に維持するアイソクロナス制御を採用したディーゼルエンジンである。エンジンコントローラユニット(ECU)D7は、エンジン11における燃料噴射量、燃料噴射タイミング、ブースト圧等を制御する。
 エンジン11には油圧ポンプとしてのメインポンプ14及びパイロットポンプ15が接続されている。メインポンプ14には作動油ラインを介してコントロールバルブ17が接続されている。
 コントロールバルブ17は、ショベルの油圧系の制御を行う油圧制御装置である。右側走行用油圧モータ、左側走行用油圧モータ、ブームシリンダ7、アームシリンダ8、バケットシリンダ9、旋回用油圧モータ等の油圧アクチュエータは、作動油ラインを介してコントロールバルブ17に接続されている。コントロールバルブ17とブームシリンダ7、アームシリンダ8及びバケットシリンダ9のそれぞれとを接続する作動油ラインには、ブームシリンダ7に掛かる負荷を検出するブームシリンダ圧力センサ、アームシリンダ8に掛かる負荷を検出するアームシリンダ圧力センサ、及び、バケットシリンダ9に掛かる負荷を検出するバケットシリンダ圧力センサが配置されている。また、コントロールバルブ17と旋回用油圧モータとを接続する作動油ラインには旋回圧力センサが配置されている。なお、旋回用油圧モータは旋回用電動発電機であってもよい。
 パイロットポンプ15にはパイロットライン及びゲートロック弁D6を介して操作装置26が接続されている。操作装置26はレバー及びペダルを含む。
 ゲートロック弁D6は、パイロットポンプ15と操作装置26とを接続するパイロットラインの連通・遮断を切り換える。本実施例では、ゲートロック弁D6は、コントローラ30からの指令に応じてパイロットラインの連通・遮断を切り換える電磁弁である。コントローラ30は、ゲートロックレバーD5が出力する状態信号に基づいてゲートロックレバーD5の状態を判定する。そして、コントローラ30は、ゲートロックレバーD5が引き上げられた状態にあると判定した場合に、ゲートロック弁D6に対して連通指令を出力する。ゲートロック弁D6は、連通指令に応じて開状態となり、パイロットラインを連通させる。その結果、操作装置26に対する操作者の操作が有効となる。一方、コントローラ30は、ゲートロックレバーD5が引き下げられた状態にあると判定した場合に、ゲートロック弁D6に対して遮断指令を出力する。ゲートロック弁D6は、遮断指令に応じて閉状態となり、パイロットラインを遮断する。その結果、操作装置26に対する操作者の操作が無効となる。
 圧力センサ29は、操作装置26の操作内容を圧力の形で検出する。圧力センサ29は、検出値をコントローラ30に対して出力する。
 また、図2はコントローラ30と表示装置D3との接続関係を示す。本実施例では、表示装置D3はマシンガイダンス装置50を介してコントローラ30に接続される。なお、表示装置D3、マシンガイダンス装置50、及びコントローラ30は、CAN等の通信ネットワークを介して接続されていてもよく、専用線を介して接続されていてもよい。
 表示装置D3は画像を生成する変換処理部D3aを含む。本実施例では、変換処理部D3aは、ステレオカメラS6の出力に基づいて表示用のカメラ画像を生成する。そのため、表示装置D3は、マシンガイダンス装置50を介し、マシンガイダンス装置50に接続されたステレオカメラS6の出力を取得する。但し、ステレオカメラS6は、表示装置D3に接続されてもよく、コントローラ30に接続されてもよい。
 変換処理部D3aは、コントローラ30又はマシンガイダンス装置50の出力に基づいて表示用の画像を生成する。本実施例では、変換処理部D3aは、コントローラ30又はマシンガイダンス装置50が出力する各種情報を画像信号に変換する。コントローラ30が出力する情報は、例えば、エンジン冷却水の温度を示すデータ、作動油の温度を示すデータ、燃料の残量を示すデータ等を含む。また、マシンガイダンス装置50が出力する情報は、バケット6の爪先位置を示すデータ、作業対象の法面の向きを示すデータ、ショベルの向きを示すデータ、ショベルを法面に正対させるための操作方向を示すデータ等を含む。
 変換処理部D3aは、表示装置D3が有する機能としてではなく、コントローラ30又はマシンガイダンス装置50が有する機能として実現されてもよい。
 表示装置D3は、蓄電池70から電力の供給を受けて動作する。蓄電池70はエンジン11のオルタネータ11a(発電機)で発電した電力で充電される。蓄電池70の電力は、コントローラ30及び表示装置D3ばかりでなく、ショベルの電装品72等にも供給される。エンジン11のスタータ11bは、蓄電池70からの電力で駆動され、エンジン11を始動する。
 エンジン11は、エンジンコントローラユニットD7により制御される。エンジンコントローラユニットD7は、エンジン11の状態を示す各種データをコントローラ30に送信する。各種データは、例えば、水温センサ11cで検出される冷却水温等である。コントローラ30は一時記憶部(メモリ)30aにこのデータを蓄積しておき、必要なときに表示装置D3に送信できる。
 また、各種データがコントローラ30に供給され、一時記憶部30aに格納される。例えば、可変容量式油圧ポンプであるメインポンプ14のレギュレータ14aは、斜板傾転角に関するデータをコントローラ30に供給する。吐出圧力センサ14bは、メインポンプ14の吐出圧力に関するデータをコントローラ30に供給する。油温センサ14cは、メインポンプ14が吸入する作動油が貯蔵されたタンクとメインポンプ14との間の管路を流れる作動油の温度に関するデータをコントローラ30に供給する。燃料タンク55における燃料残量センサ55aは、燃料の残量状態に関するデータをコントローラ30に供給する。圧力センサ29は、操作装置26が操作されたときにコントロールバルブ17に送られるパイロット圧に関するデータをコントローラ30に供給する。
 本実施例では、図2に示すように、ショベルは、キャビン10内にエンジン回転数調整ダイヤル75を備える。エンジン回転数調整ダイヤル75は、エンジン11の回転数を調整するためのダイヤルであり、本実施例ではエンジン回転数を4段階で切り換えできるようにする。エンジン回転数調整ダイヤル75は、エンジン回転数の設定状態を示すデータをコントローラ30に送信する。
 次に、図3を参照しながら、マシンガイダンス装置50の各種機能要素について説明する。図3は、マシンガイダンス装置50の構成例を示す機能ブロック図である。
 本実施例では、コントローラ30は、ショベル全体の動作の制御に加えて、マシンガイダンス装置50によるガイダンスを行うか否かを制御する。具体的には、コントローラ30は、ゲートロックレバーD5の状態、圧力センサ29からの検出信号等に基づいてマシンガイダンス装置50によるガイダンスを行うか否かを制御する。
 次に、マシンガイダンス装置50について説明する。本実施例では、マシンガイダンス装置50は、例えば、ブーム角度センサS1、アーム角度センサS2、バケット角度センサS3、機体傾斜センサS4、旋回角速度センサS5、入力装置D1、及びコントローラ30から出力される各種信号及びやデータを受信する。そして、マシンガイダンス装置50は、受信した信号及びデータに基づいてバケット6の爪先位置を算出する。そして、マシンガイダンス装置50は、バケット6の爪先位置と目標面との距離に応じた情報を視覚的に且つ聴覚的に出力してショベルの操作をガイドする。
 マシンガイダンス装置50は、様々な機能を担う機能部を含む。本実施例では、マシンガイダンス装置50は、位置算出部501、比較部502、通知部503、ステレオペア画像取得部504、地形データ生成部505、座標変換部506、座標修正部510、地形データ表示部507、及び地形データ投影部508を含む。
 位置算出部501は、エンドアタッチメントの作業部位の位置を算出する。例えば、ショベルの現在位置、ショベルの向き、及びアタッチメントの姿勢に基づいてバケット6の爪先位置を算出する。ショベルの位置及び向きは、測位装置S8の出力に基づいて算出される。アタッチメントの姿勢は、ブーム角度センサS1、アーム角度センサS2、バケット角度センサS3、機体傾斜センサS4の出力に基づいて算出される。
 比較部502は、位置算出部501が算出したバケット6の爪先位置の高さと目標面の高さとの差を算出する。比較部502は、例えば、位置算出部501が算出したバケット6の爪先位置の平面座標(例えば、緯度及び経度)を利用し、予め入力された設計データから目標面の高さを導き出す。
 通知部503は、比較部502による比較の結果に基づいて各種情報をショベルの操作者に通知する。例えば、音声出力装置D2及び表示装置D3の両方又は一方に通知指令を送信する。音声出力装置D2は、通知指令を受けると所定の音を発する。表示装置D3は、通知指令を受けると所定の画像を表示する。通知内容は、バケット6の爪先位置の高さと目標面の高さとの差に応じて多段階に設定されてもよい。
 ステレオペア画像取得部504はステレオペア画像を取得する。ステレオペア画像は、三角測量の手法を用いてステレオカメラS6と測定対象となる点(以下、「測定点」とする。)との距離を導き出すために用いる1対のカメラ画像である。本実施例では、ステレオペア画像取得部504は、ステレオカメラS6が出力する1対のカメラ画像をステレオペア画像として取得する。また、ステレオカメラS6の取り付け位置、取り付け角度、焦点距離等のステレオカメラS6に関するパラメータは予め記憶装置D4等に記憶されている。ステレオペア画像取得部504は、それらパラメータを必要に応じて記憶装置D4等から読み出す。
 ステレオペア画像取得部504は、ステレオカメラS6における1対の撮像部のそれぞれが同時に撮像した1対のカメラ画像をステレオペア画像として取得する。そして、取得した1対のカメラ画像のそれぞれにおける、各測定点に対応する画素の間のズレと、1対の撮像部間の距離とに基づいてステレオカメラS6と各測定点との距離を取得する。
 また、ステレオペア画像取得部504は、所定の取得条件が満たされる度にステレオペア画像を取得する。所定の取得条件は、例えば、上部旋回体3の旋回角度、ショベルの移動距離等に基づいて設定される。本実施例では、ステレオペア画像取得部504は、上部旋回体3が所定の旋回角度αだけ旋回する毎にステレオペア画像を取得する。旋回角度は、例えば、旋回角速度センサS5の出力から導き出される。また、ステレオペア画像取得部504は、ショベルが所定の距離だけ移動(走行)する毎にステレオペア画像を取得してもよい。移動距離は、例えば、測位装置S8の出力から導き出される。或いは、ステレオペア画像取得部504は、所望の測定点の画像を含むステレオペア画像が効率的に取得できるように、取得条件となる旋回角度、移動距離等に関する閾値を動的に決定してもよい。また、ステレオペア画像取得部504は、所定の時間間隔毎にステレオペア画像を取得してもよく、ショベルの操作者による操作入力(例えばスイッチ操作)に応じて任意のタイミングでステレオペア画像を取得してもよい。マシンガイダンス装置50は、このように取得したステレオペア画像から、施工の途中、或いは、施工後において、ショベル周辺の地形情報を計測する。
 地形データ生成部505は、地形データを生成する。地形データは、例えば、ショベル周辺の地面上の各点を表す三次元座標の集合である。三次元座標は、例えば、カメラ座標系における座標である。カメラ座標系は、カメラを基準とする座標系であり、例えば、ステレオカメラS6の中心点を原点とし、ステレオカメラS6の2つの光軸の中間にX軸をとり、それら2つの光軸を含む平面に垂直にZ軸をとる三次元直交XYZ座標系である。本実施例では、地形データ生成部505は、ステレオペア画像取得部504が導き出した各測定点までの距離に基づいてカメラ座標系における各測定点の三次元座標を導き出す。
 地形データ生成部505は、所定時点における地面の既知の形状とその所定時点以降のエンドアタッチメントの移動軌跡とに基づいて地面の現在の形状を導き出すようにしてもよい。所定時点における地面の既知の形状は、例えば、掘削作業を開始する時点において、記憶装置D4等に記憶されているその時点における地形を表す地形データである。この場合、地形データは、トータルステーションを用いた測量等、任意の方法で測定され得る。エンドアタッチメントの移動軌跡は、例えば、バケット6の移動軌跡である。バケット6の軌跡は、所定周期で継続的に取得されるブーム角度センサS1、アーム角度センサS2、バケット角度センサS3、及び機体傾斜センサS4のそれぞれの出力から導き出される。地形データ生成部505は、掘削作業を開始する時点における地面の既知の形状と、その後のバケット6の軌跡とに基づき、バケット6によって掘削された或いは埋め戻された領域を導き出すことで地面の現在の形状を導き出すことができる。
 座標変換部506は、カメラ座標系における座標を他の座標系における座標に変換する。例えば、座標変換部506は、カメラ座標系における座標をショベル座標系又は基準座標系における座標に変換する。ショベル座標系は、ショベルを基準とする座標系であり、例えば、上部旋回体3の旋回軸と下部走行体1の仮想接地面との交点を原点とし、下部走行体1の前後軸をX軸とし、下部走行体1の左右軸をY軸とし、旋回軸をZ軸とする三次元直交XYZ座標系である。基準座標系は、例えば世界測地系を含む。世界測地系は、地球の重心に原点をおき、X軸をグリニッジ子午線と赤道との交点の方向に、Y軸を東経90度の方向に、そしてZ軸を北極の方向にとる三次元直交XYZ座標系である。本実施例では、座標変換部506は、地形データ生成部505が導き出したカメラ座標系における各測定点の三次元座標を世界測地系における座標に変換する。
 地形データ表示部507は、マシンガイダンス装置50が生成した地形データを表示する。本実施例では、地形データ表示部507は、座標変換部506が導き出した変換後の座標の集合である地形データに基づいてショベル周辺の地形の3次元画像(例えばワイヤフレーム、ポリゴンメッシュ等)を生成して表示装置D3に表示する。また、地形データ表示部507は、設計データに基づいて目標面の3次元画像を生成し、ショベル周辺の地形の3次元画像と共にその目標面の3次元画像を表示装置D3に表示してもよい。更に、地形データ表示部507は、ショベル周辺の地形の3次元画像に、ステレオカメラS6が現に撮像した画像を合成して表示してもよい。
 地形データ投影部508は、投影装置S9を用い、ショベル周辺の地面の現在の形状と目標面の形状との関係を可視化する。本実施例では、地形データ投影部508は、投影装置S9を制御してショベル周辺の地面に光を投影させる。そして、地面と目標面との距離に応じて投影装置S9が投影する光の色、照度等を変える。
 ここで、図4及び図5を参照し、地形データ投影部508が投影装置S9を用いてショベル周辺の地面の現在の形状と目標面の形状との関係を可視化する処理(以下、「可視化処理」とする。)について説明する。図4は、ショベルが位置する地面の側断面図である。図5は、キャビン10内から見たショベルの前方の地面を示す。
 投影装置S9は、ショベルの前方の地面に光を投影するように構成されている。具体的には、投影装置S9は、投影画素数に相当する本数の光線をショベルの前方に投影する。図4は、掘削作業が行われる際の可視化処理に関する。掘削作業では、目標面は、現在の地面よりも下方に設定されている。図4のドットハッチング領域PRは投影装置S9の投影範囲を示す。太実線は現在の地面CPの形状を示し、一点鎖線は目標面TPを示す。光線L1~L3は、投影画素数に相当する本数の光線の一部である。地点P1、P2、P3はそれぞれ、光線L1、L2、L3が投影される地面CP上の点である。地点P1は目標面TPよりも高い(浅い)位置にあり、目標面TPまでの鉛直距離は距離C1である。地点P2は目標面TP上にある。地点P3は目標面TPよりも低い(深い)位置にあり、目標面TPまでの鉛直距離は距離C3である。
 地形データ投影部508は、投影装置S9の現在位置及び向き、並びに、投影装置S9のパラメータ(解像度、投影角等)に基づき、投影装置S9が投影する光線のそれぞれが当たる地点の3次元座標を導き出す。投影装置S9の現在位置及び向きは、ショベルの現在位置及び向きから導き出される。投影装置S9の現在位置及び向きの相対的な変化は、機体傾斜センサS4及び旋回角速度センサS5の出力に基づいて決定されてもよい。図4の例では、地形データ投影部508は、地点P1~P3を含む1024×768画素のそれぞれに相当する地点の3次元座標を導き出す。
 その後、地形データ投影部508は、上述のように導き出した各地点の3次元座標と、設計データに含まれる目標面に関する情報とに基づいて各地点と目標面との鉛直距離を導き出す。図4の例では、地形データ投影部508は、地点P1と目標面TPとの鉛直距離C1、地点P2と目標面TPとの鉛直距離C2(=0)、地点P3と目標面TPとの鉛直距離C3等を導き出す。図4で示した目標面TPは、最終的な施工目標面として設定されているが、施工途中の目安線として設定されてもよい。この場合、目標面TPは、現在の地面と最終的な施工目標面との間における所定の深さの面であってもよい。また、現在の地面と最終的な施工目標面との間における所定の深さの面は複数の面であってもよい。例えば、現在の地面から最終的な施工目標面までの深さが5mの場合、目標面TPは、1m毎に設定されてもよい。これにより、地面が段階的に掘削されるため、埋設物等が存在する場合であっても埋設物等の損傷を防止できる。
 その後、地形データ投影部508は、各地点と目標面との鉛直距離の大きさに応じて各地点を照射する光線の色、照度等を変える。図4の例では、地形データ投影部508は、鉛直距離がゼロのときに緑色とする。そして、鉛直距離がプラス側に大きいほど(目標面TPより浅いほど)青色に近づけ、鉛直距離がマイナス側に大きいほど(目標面TPより深いほど)赤色に近づけるようにする。他の色が用いられてもよい。また、地形データ投影部508は、鉛直距離の大きさに応じて光線の色を段階的に変化させてもよく、無段階に変化させてもよい。また、地形データ投影部508は、鉛直距離の大きさに応じ、地面CPに投影された色の濃淡を変化させてもよい。色の濃淡を網点で表現する場合にはその密度を変化させてもよい。この場合、地面CPに投影される色は単一色であってもよい。
 図5のドットハッチング領域PRは投影装置S9の投影範囲を示す。ドットハッチング領域PRは、鉛直距離の大きさに応じて光線の色を3段階に変化させた状態を示している。具体的には、領域PR1は、現在の地面CPの高さが目標面TPの高さよりも高い(浅い)状態を示す。地点P1はこの領域PR1に含まれている。領域PR2は、現在の地面CPの高さが目標面TPの高さと等しい状態を示す。地点P2はこの領域PR2に含まれている。領域PR3は、現在の地面CPの高さが目標面TPの高さよりも低い(深い)状態を示す。地点P3はこの領域PR3に含まれている。この場合、投影装置S9は、領域PR1を青色の光線で照射している。また、投影装置S9は、領域PR2を緑色の光線で照射し、領域PR3を赤色の光線で照射している。投影装置S9は、領域PR2の全体を満遍なく照射してもよく、領域PR2の輪郭が際立つように領域PR2の内部ばかりでなくその輪郭を照射してもよい。例えば別の色の光線を輪郭部分に照射してもよい。更に、領域PR2の内部において所定の高さ(深さ)毎に等高線(等深線)が表示されるようにしてもよい。領域PR3についても同様である。
 地形データ投影部508は、文字情報を投影させてもよい。図5は、領域PR1に文字情報「残○○m」が投影されている状態を示す。「残○○m」は、掘削すべき土量を表す。地形データ投影部508は、所定位置に文字情報を投影させてもよく、領域PR1の比較的平坦な部分を選択して文字情報を投影させてもよい。領域PR2又は領域PR3に文字情報を投影させてもよい。また、地形データ投影部508は、目標接地位置TCを投影させてもよい。目標接地位置TCは、例えば、バケット6の爪先を接触させるべき地面上の位置を示す。図5は、領域PR1に目標接地位置TCが投影されている状態を示す。また、地形データ投影部508が投影する情報と同じ情報が、キャビン10内の表示装置D3に表示されてもよい。
 次に、図6を参照し、可視化処理の流れについて説明する。図6は、可視化処理の一例のフローチャートであり、地形データ投影部508は、所定の制御周期で繰り返しこの可視化処理を実行する。
 最初に、地形データ投影部508は、各光線に対応する各地点Pの3次元座標を算出する(ステップST1)。例えば、図4に示すように、地形データ投影部508は、光線L1、L2、L3に対応する地点P1、P2、P3の3次元座標を算出する。
 その後、地形データ投影部508は、各地点Pと目標面との鉛直距離を算出する(ステップST2)。例えば、図4に示すように、地形データ投影部508は、地点P1、P2、P3のそれぞれと目標面TPとの鉛直距離C1、C2(=0)、C3を算出する。
 その後、地形データ投影部508は、鉛直距離の大きさに応じて光線の色を決定する(ステップST3)。例えば、図4に示すように、地形データ投影部508は、目標面TPから鉛直距離C1のところにある地点P1に当たる光線L1の色を青色にする。また、目標面TPから鉛直距離C2のところにある、すなわち、目標面TPと同じ高さにある地点P2に当たる光線L2の色を緑色にする。また、目標面TPから鉛直距離C3のところにある地点P3に当たる光線L3の色を赤色にする。
 その後、地形データ投影部508は、全ての地点Pについて光線の色を決定したか否かを判定する(ステップST4)。
 全ての地点Pについて光線の色を未だ決定していないと判定した場合(ステップST4のNO)、地形データ投影部508は、処理をステップST1に戻し、ステップST1以降の処理を再開させる。
 全ての地点Pについて光線の色を決定したと判定した場合(ステップST4のYES)、地形データ投影部508は、今回の可視化処理を終了させる。
 このように、地形データ投影部508は、投影装置S9によるプロジェクションマッピングによって現在の地面CPの形状と目標面TPの形状との関係を可視化する。具体的には、現在の地面CPと目標面TPとの鉛直距離を色分けして可視化する。ショベルの操作者は、バケット6の爪先を視認しながら同時に目標面TPの深さを確認できる。すなわち、目標面TPに対する現在の地面CPの凹凸を確認でき、どの部分をどの程度掘ればよいか或いはどの程度埋め戻せばよいかを判断できる。また、ショベルの操作者は、目標面の深さを確認するためにバケット6の爪先から視線を外す必要がない。表示装置D3を見ることなく、地面に投影された光(画像)を見ることで目標面TPの深さを確認できるためである。そのため、ショベルは、作業効率の向上及び作業時間の短縮を実現できる。
 また、上述の構成は、ショベルの操作者の眼精疲労を軽減する効果を有する。操作者は、バケット6の爪先と表示装置D3との間で視線を行き来させる必要がないためである。すなわち、比較的遠くにあるバケット6の爪先と比較的近くにある表示装置D3との間で視線を行き来させる必要がなく、目の焦点距離を頻繁に調節する必要もないためである。但し、キャビン10内に配置されている表示装置D3は、投影装置S9がショベルの前方の地面に投影する画像と同じ画像を表示してもよい。この場合、領域PR2、領域PR3を表す画像は、ショベルの前方を撮像する撮像装置が出力するカメラ画像に重畳表示されてもよい。
 投影装置S9は、上述のようにショベルの外にある地面に施工情報を投影する。そのため、ショベルの操作者ばかりでなく、ショベルの周囲にいる作業者も施工情報を把握することができる。
 次に、図7及び図8を参照し、可視化処理の別の例について説明する。図7は、キャビン10内から見たショベルの前方の地面を示し、図5に対応する。図8は、可視化処理の別の例のフローチャートであり、図6に対応する。
 図7に示された状態は、主に、ドットハッチング領域PRに埋設物領域BPが含まれる点で、図5に示された状態と異なるがその他の点で共通する。また、図8のフローチャートは、ステップST1A及びステップST3Aを含む点で、図6のフローチャートと異なるがその他の点で共通する。そのため、共通部分の説明を省略し、相違部分を詳説する。
 地形データ投影部508は、特定の1つの光線に対応する地点の3次元座標を算出した後、その地点の真下に埋設物が存在するか否かを判定する(ステップST1A)。例えば、地形データ投影部508は、設計データに基づいてその地点の真下に埋設物が存在するか否かを判定する。
 埋設物が存在しないと判定した場合(ステップST1AのNO)、地形データ投影部508は、ステップST2以降の処理を実行する。
 埋設物が存在すると判定した場合(ステップST1AのYES)、地形データ投影部508は、その地点を照射する光線の色を所定の色に設定する(ステップST3A)。例えば、地形データ投影部508は、その地点と目標面TPとの鉛直距離にかかわらず、その地点を照射する光線の色として地中埋設物を表す色(例えば灰色)を選択する。図7の埋設物領域BPは、地中埋設物を表す色が地面に投影された状態を示す。
 地形データ投影部508は、地中埋設物を表す色(画像)と共に、文字情報を投影させてもよい。図7は、ドットハッチング領域PRに文字情報「地中○○m」及び「残り○○m」が投影されている状態を示す。「地中○○m」は地中埋設物の埋設深さを表す。「残り○○m」は、埋設深さまでの距離、すなわち、現在の地面と埋設深さとの距離を表す。地形データ投影部508は、所定位置に文字情報を投影させてもよく、ドットハッチング領域PRの比較的平坦な部分を選択して文字情報を投影させてもよい。地中埋設物を表す画像のできるだけ近い位置に文字情報を投影させるようにしてもよい。
 このように、地形データ投影部508は、地中埋設物を可視化することで、ショベルの操作者にその存在を気付かせることができる。ショベルの操作者は、バケット6の爪先から視線を外すことなく、地中埋設物の位置を認識できる。そのため、ショベルの操作者は、地中埋設物の損傷を回避しながら掘削作業を継続できる。
 次に、図9を参照し、可視化処理の更に別の例について説明する。図9は、ショベルPSと投影装置S9の関係を示す図である。図9のショベルPSは、投影装置S9がショベルPSの外部に設置されている点で図1のショベルと異なるがその他の点で共通する。そのため、共通部分の説明を省略し、相違部分を詳説する。
 図9の例では、投影装置S9は、工事現場に設置された鉄塔に取り付けられている。ショベルPSは、通信装置S7を用い、通信ネットワークCNを通じて投影装置S9との間で情報を無線で送受信する。通信ネットワークCNを介さずに投影装置S9との間で直接的に情報を送受信してもよい。
 ショベルPSは、工事現場の鉄塔等に取り付けられている複数台の投影装置S9を同時に制御してもよい。反対に、投影装置S9は、複数台のショベルPSによって制御されてもよい。
 この構成により、ショベルPSは、図1~図8を参照して説明したショベルと同様の効果を実現できる。また、ショベルPSは、ショベルPSの外部に設置された1又は複数台の投影装置S9を制御して地面の現在の形状と目標面の形状との関係を可視化できる。そのため、より広範囲の地面の現在の形状と目標面の形状との関係を可視化できる。
 次に、図10及び図11を参照し、本発明の実施例に係るショベル(掘削機)について更に説明する。図10はショベルPSの側面図である。図11はショベルPSの正面図である。ショベルPSは図10と図11で姿勢が異なる。
 ショベルPSは、クローラ式の下部走行体1を備えている。
 従来、クローラのフレームにステップが取り付けられているショベルが知られている(実用新案登録第2583666号公報参照。)。
 ステップは、一般的に、フレームと同じ塗料で塗装されている。そのため、フレームとの見分けがつきにくい。
 そのため、クローラ式の下部走行体のフレームとの見分けがつきやすいステップを備えたショベルを提供することが望まれる。
 ショベルPSの下部走行体1には旋回機構2を介して上部旋回体3が搭載されている。上部旋回体3にはブーム4が取り付けられている。ブーム4の先端にはアーム5が取り付けられ、アーム5の先端にはバケット6が取り付けられている。ブーム4、アーム5、及びバケット6は、アタッチメントの一例である掘削アタッチメントを構成している。ブーム4、アーム5、バケット6は、ブームシリンダ7、アームシリンダ8、バケットシリンダ9によりそれぞれ油圧駆動される。上部旋回体3にはエンジン11等の動力源が搭載されている。図11では、明瞭化のため、アーム5、バケット6、ブームシリンダ7、アームシリンダ8、バケットシリンダ9等の図示が省略されている。
 上部旋回体3の左側(-Y側)の前端(+X側端)にはキャビン10が設置されている。キャビン10の前面(+X側面)は下部フロントウィンドウ10a及び上部フロントウィンドウ10bで覆われている。上部フロントウィンドウ10bは開閉可能に構成されていてもよい。キャビン10の頂面(+Z側面)は頂部ウィンドウ10cで覆われている。キャビン10の左前側のピラーの外側には手摺り10dが取り付けられている。
 上部旋回体3の右側(+Y側)の前端(+X側端)には工具箱3aが設置されている。工具箱3aの後側(-X側)には尿素水タンク3bが設置され、尿素水タンク3bの後側には燃料タンク3cが設置されている。図11では、尿素水タンク3bは隠れ線で示されている。上部旋回体3のハウスカバー内に収納されているためである。工具箱3aと、尿素水タンク3bを覆うハウスカバーと、燃料タンク3cとは階段を形成し、作業者が昇降できるように構成されている。そのため、階段の外側(+Y側)にはハンドレール3dが取り付けられている。また、燃料タンク3cの上面にはガードレール3eが取り付けられている。ガードレールは、キャビン10の後側に設置されているハウスカバーの上面に取り付けられていてもよい。
 下部走行体1は、主に、フレーム1a、クローラベルト1b、キャリアローラ1c、トラックローラ1d、ステップ1e、走行用油圧モータ1M等で構成されている。図11は、下部走行体1に関しては、図10の一点鎖線L4を含む平面を+X側から見たときの主要構成要素の状態を示している。
 フレーム1aは、下部走行体1の骨格を形成する部材である。フレーム1aは、左フレーム部1a-L、右フレーム部1a-R、及び、左フレーム部1a-Lと右フレーム部1a-Rを連結する中央フレーム部1a-Cを有する。
 クローラベルト1bは、走行用油圧モータ1Mによって回転駆動される無限軌道(履帯)である。クローラベルト1bは、左クローラベルト1b-L及び右クローラベルト1b-Rを含む。
 キャリアローラ1cは、フレーム1aの上側でフレーム1aとクローラベルト1bとの間に配置される従動ローラである。トラックローラ1dは、フレーム1aの下側でフレーム1aとクローラベルト1bとの間に配置される従動ローラである。
 ステップ1eは、作業者が下部走行体1を登り降りする際に利用する部材である。本実施例では、ステップ1eは、左前ステップ1e-FL、左後ステップ1e-BL、右前ステップ1e-FR、及び、右後ステップ1e-BR(図示せず。)を含む。
 左前ステップ1e-FL及び左後ステップ1e-BLは、左フレーム部1a-Lの左側の側面に溶接されている。左前ステップ1e-FLは、図11に示すように、左クローラベルト1b-Lの幅Wcからはみ出ないように、すなわち、左クローラベルト1b-Lの左端から突出しないように構成されている。左前ステップ1e-FLの高さHsは、例えば、左クローラベルト1b-Lの高さHcのほぼ半分である。左後ステップ1e-BL、右前ステップ1e-FR及び右後ステップ1e-BRについても同様である。
 作業者は、例えば、右前ステップ1e-FR、右クローラベルト1b-Rの上面、ステップ3f、工具箱3aの上面、尿素水タンク3bを覆うハウスカバーの上面、及び、燃料タンク3cの上面を順番に利用して上部旋回体3の頂部に至ることができる。ステップ3fは、工具箱3aの前方で旋回フレームのところに取り付けられた踏み台である。順番が逆であることを除き、上部旋回体3の頂部から地面に降りるときも同様である。また、作業者は、例えば、左前ステップ1e-FL、及び、左クローラベルト1b-Lの上面を順番に利用してキャビン10内に至ることができる。順番が逆であることを除き、キャビン10内から地面に降りるときも同様である。
 走行用油圧モータ1Mは、フレーム1aの後端(-X側端)に取り付けられている。走行用油圧モータ1Mは、左走行用油圧モータ1M-L及び右走行用油圧モータ1M-R(図示せず。)を含む。左走行用油圧モータ1M-Lは、左フレーム部1a-Lの後端に取り付けられている。左クローラベルト1b-Lは、左走行用油圧モータ1M-Lの回転軸に結合された駆動スプロケット、及び、左フレーム部1a-Lの前端に回転可能に取り付けられた左従動スプロケット1S-Lのそれぞれと噛み合っている。この構成により、図10において走行用油圧モータ1Mが反時計回りに回転するとクローラベルト1bも反時計回りに回転してショベルPSが前進する。反対に、走行用油圧モータ1Mが時計回りに回転するとクローラベルト1bも時計回りに回転してショベルPSが後退する。
 次に、図12を参照し、ステップ1eの詳細について説明する。図12は、下部走行体1を左斜め上前方から見たときの下部走行体1の斜視図である。
 図12の例では、ステップ1eは、1枚の金属板をU字状に折り曲げて形成されている。そして、その両端がフレーム1aに溶接されている。ステップ1eは、複数の金属板を組み合わせて形成されていてもよい。ステップ1eは、ボルトでフレーム1aに締結されていてもよい。
 ステップ1eは、作業者(特に下部走行体1の上からステップ1eを用いて地面に降りようとする作業者)がフレーム1aとステップ1eとを見分けられるよう、フレーム1aとは色の性質が異なるように塗装されている。色の性質は、例えば、色相、明度及び彩度の三属性で表される。「色の性質が異なる」とは、例えば、色を定量的に表す表色系において各属性の段階が異なることを意味する。例えば、マンセル表色系では、色相が100段階で表され、明度が11段階で表され、彩度が14段階で表される。
 ステップ1eは、例えば、その色が色相、明度及び彩度の少なくとも1つにおいてフレーム1aの色と異なるように塗装されている。ステップ1eは、無彩色塗料で塗装されていてもよく、有彩色塗料で塗装されていてもよい。ステップ1eは、蛍光塗料、反射塗料、反射防止塗料、蓄光塗料等で塗装されていてもよい。フレーム1aについても同様である。
 ステップ1eの色の明度は、望ましくは、フレーム1aの色の明度より高い。フレーム1aの色の明度とステップ1eの色の明度は、望ましくは2段階以上異なり、更に望ましくは4段階以上異なる。
 フレーム1aの色が所定の明度(例えば明度「5」)以下の場合、ステップ1eはその色が所定の明度(例えば明度「6」)以上となるように塗装されてもよい。或いは、フレーム1aの色が所定の明度(例えば明度「6」)以上の場合、ステップ1eはその色が所定の明度(例えば明度「5」)以下となるように塗装されてもよい。このように、明度に差をつけることでフレーム1aからステップ1eを見分けやすくすることができる。
 ステップ1eの色の色相は、上部旋回体3の色の色相と同じであってもよく、上部旋回体3の色の色相と異なっていてもよい。ステップ1eの色の色相が上部旋回体3の色の色相と同じである場合、上部旋回体3及びステップ1eの塗装には同じ塗料が使用され得る。すなわち、ステップ1eの色は、色相、明度及び彩度の全てにおいて、上部旋回体3の色と同じであってもよい。
 ステップ1eの色の色相は、望ましくは識別性の高い色であり、例えば、黄色又は黄緑色である。ステップ1eの色は、フレーム1aの色の補色であってもよく、上部旋回体3の色の補色であってもよい。ステップ1eの色は、ショベルの使用環境に応じて決められてもよい。ショベルの使用環境は、例えば、スクラップヤード、道路、森林地帯、山岳地帯等を含む。
 ステップ1eの色は、ステップ1eの側面及び上面の塗装色の少なくとも一方を含む。すなわち、ステップ1eは、その側面及び上面の少なくとも一方において、フレーム1aとは色の性質が異なるように塗装されている。下部走行体1を登り降りする作業者がステップ1eを容易に見つけられるようにするためである。ステップ1eの側面の色は、色相、明度及び彩度の少なくとも1つにおいてステップ1eの上面の色と異なっていてもよい。図12は、左前ステップ1e-FLの上面UP及び側面SPのそれぞれが異なる色で塗装されている状態を示している。
 ステップ1eの側面は、基本的に1色で塗られるが、色相、明度及び彩度の少なくとも1つが異なる複数の色で塗られていてもよい。例えば、夜間に目立つ色と昼間に目立つ色の2色で塗り分けられていてもよい。ステップ1eの上面についても同様である。
 左前ステップ1e-FLの色は、基本的に左後ステップ1e-BLの色と同じであるが、色相、明度及び彩度の少なくとも1つにおいて左後ステップ1e-BLの色と異なるように塗装されていてもよい。また、左前ステップ1e-FL及び左後ステップ1e-BLの色は、基本的に右前ステップ1e-FR及び右後ステップ1e-BRの色と同じであるが、色相、明度及び彩度の少なくとも1つにおいて右前ステップ1e-FR及び右後ステップ1e-BRの色と異なるように塗装されていてもよい。この配色により、作業者は下部走行体1の向きをより容易に判別できる。
 ステップ1eの色は、基本的に、ステップ1e自体の色を意味するが、ステップ1eに貼付されるシールの色、ステップ1eに固定される別部材の色等を意味する場合もある。フレーム1aについても同様である。
 次に、図13A及び図13Bを参照し、ステップ1eの別の構成例について説明する。図13A及び図13Bはステップ1eの別の構成例の斜視図である。具体的には、左前ステップ1e-FLの斜視図である。
 図13Aの左前ステップ1e-FLは、その上面UPaに滑り止め加工が施されている点で図12の左前ステップ1e-FLと異なる。具体的には、表面が波状面となるように構成されている。
 図13Bの左前ステップ1e-FLは、フレーム1aと左前ステップ1e-FLとの間に形成されている穴が金属板UPbで塞がれている点で図12の左前ステップ1e-FLと異なる。金属板UPbは、図13Aの場合と同様に、滑り止め加工が施されていてもよい。
 以上のように、ショベルPSは、フレーム1aとは異なる色のステップ1eを備えている。そのため、フレーム1aとの見分けがつきやすいステップ1eを提供できている。作業者は、例えばキャビン10から出て降車する際にステップ1eを容易に見分けることができ、ステップ1eを踏み外すこともない。
 以上、本発明の好ましい実施例が説明された。しかしながら、本発明は、上述した実施例に限定されることはない。上述した実施例は、本発明の範囲を逸脱することなしに、種々の変形、置換等が適用され得る。また、上述の実施例を参照して説明された特徴のそれぞれは、技術的に矛盾しない限り、適宜に組み合わされてもよい。
 例えば、上述の実施例では、地形データ投影部508は、地中埋設物を灰色一色で可視化しているが、地中埋設物までの鉛直距離の大きさに応じて色、照度等を変えてもよい。
 また、上述の実施例では、投影装置S9は、ショベルPSに取り付けられている。しかしながら、投影装置S9は、図14に示すように、ショベルPSの上空を飛行する飛行体DRに取り付けられている投影装置S9Dであってもよい。飛行体DRは、例えば、遠隔操作又は自動操縦により飛行させることができる自律式飛行体であり、例えば、マルチコプタ(ドローン)、飛行船等を含む。図14の例では、飛行体DRは、通信装置S7D、測位装置S8D及び投影装置S9Dを搭載したクワッドコプタである。図14のドットハッチング領域PRは投影装置S9Dの投影範囲を示す。
 投影装置S9は、図15に示すように、ショベルPSの外部に設置された支持台TRに取り付けられている投影装置S9Tであってもよい。支持台TRは、例えば、地面に固定された支柱、又は、持ち運び可能な三脚等である。図15の例では、支持台TRは、通信装置S7T、測位装置S8T及び投影装置S9Tが取り付けられた三脚である。図15のドットハッチング領域PRは投影装置S9Tの投影範囲を示す。
 図14及び図15は、投影装置S9がショベルPSから離れた位置に設置される事例を示している。この場合、投影装置S9を制御して地面で可視化する情報を変化させる制御装置は、投影装置S9内に配置されていてもよい。また、投影装置S9内に通信手段が配置されていてもよい。この場合、投影装置S9の制御装置は、通信手段を介して、ショベルPS等の建設機械内に配置されたコントローラ30(制御装置)から、施工に関する情報、及び、操作状態に関する情報等を受信してもよい。なお、本発明を用いることができる建設機械には、ショベル(油圧ショベル)、ブルドーザ、ホイールローダ等が含まれる。
 投影装置S9は、アタッチメントに光を投影できるように構成されていてもよい。投影装置S9は、例えば図16に示すように、掘削アタッチメントの腹側にある投影面に光を投影できるように構成されていてもよい。投影面は、例えば、バケット6の背面、バケット6に取り込まれた土砂等の被掘削物EXの表面、及び、アーム5の腹面等の少なくとも1つを含む。ショベルPSの操作者は、例えば、掘削アタッチメントを動かして被掘削物EXをダンプトラックの荷台に積み込む際に、運転席から掘削アタッチメントの腹側を見ることで、投影面に投影された情報を視認できる。この場合、マシンガイダンス装置50は、掘削アタッチメントの姿勢の変化に応じて投影面の配置を変更してもよい。投影面に投影される情報は、例えば図17に示すように、バケット取り込み重量、又は、積み込み残量等の少なくとも1つを含む。バケット取り込み重量は、バケット6に取り込まれた被掘削物EXの重量である。バケット取り込み重量は、例えば、ブームシリンダ圧力センサ、アームシリンダ圧力センサ及びバケットシリンダ圧力センサのそれぞれが検出する負荷に基づいて算出されてもよい。積み込み残量は、ダンプトラックの最大積載量からダンプトラックの荷台に既に積み込まれている被掘削物EXの重量を差し引いた値である。図17は、バケット6内に取り込まれた被掘削物EXの表面とアーム5の腹面のそれぞれに、バケット取り込み重量及び積み込み残量が投影された状態を示している。また、図17は、バケット取り込み重量が150kgであり、積み込み残量が±0kgであることを示している。バケット取り込み重量は、例えば、掘削終了後にブーム上げ旋回操作が行われている際に算出され、その後、投影されてもよい。また、積み込み残量は、例えば、ダンプトラック毎に計算される、積み込み開始からのバケット取り込み重量の累計とダンプトラックの最大積載重量との差に基づいて算出されてもよい。
 また、投影装置S9は、掘削作業以外の作業を支援するために利用されてもよい。例えば、投影装置S9は、図18に示すように、道路敷設作業を支援するために利用されてもよい。図18は、道路敷設作業が行われる際の可視化処理に関する。道路敷設作業では、目標面TPは、現在の地面CPよりも上方に設定されている。図18の例では、道路は、上層路盤、下層路盤、路床及び路体の4層を含むように構成されている。そのため、目標面TPは、上層路盤の目標面TP1、下層路盤の目標面TP2、路床の目標面TP3、及び、路体の目標面TP4を含む。図18の例では、ショベルPSは、上層路盤の目標面TP1を形成するための盛土作業と、下層路盤の目標面TP2を仕上げるための転圧作業とを行っている。すなわち、路床及び路体のそれぞれのための盛土作業と転圧作業は既に完了している。図18における地点P1、P2、P3は、図4の場合と同様に、光線L1、L2、L3が投影される地面CP上の点であり、何れも目標面TP2上にある。また、ドットハッチング領域PRは投影装置S9の投影範囲を示す。
 この場合、投影装置S9が投影する情報は、例えば図19に示すように、転圧力、層の目標厚さ、層を形成するために必要な土量を含む。図19は、上層路盤の目標厚さが30cmであること、上層路盤を完成させるために必要な土量が「△△m」であること、及び、下層路盤の形成に必要な転圧力が「○トン」であることを示している。領域PR1は、現在の地面CPの高さが下層路盤の目標面TP2の高さよりも高い(浅い)状態を示している。領域PR2は、現在の地面CPの高さが下層路盤の目標面TP2の高さと等しい状態を示している。また、領域PR4は、下層路盤のうちの転圧が不足している範囲を示している。このようにして、マシンガイダンス装置50は、下層路盤の形成に必要な転圧力の値ばかりでなく、転圧が不十分な範囲をも操作者に知らせることができる。また、マシンガイダンス装置50は、下層路盤に関する転圧作業が完了したとき(例えば転圧が不十分な範囲が消失したとき)に、上層路盤に関する盛土作業を開始すべき旨を操作者に知らせるようにしてもよい。或いは、マシンガイダンス装置50は、道路の補強のために丸太等の補強材が埋設される場合には、投影装置S9を用いて埋設位置を地面に投影するように構成されていてもよい。このように、マシンガイダンス装置50は、作業毎に異なる有用な情報を地面に投影させることができる。作業毎に異なる有用な情報は、例えば、作業の進捗に応じて変化する指示情報又は数値情報等の少なくとも1つを含んでいてもよい。
 投影装置S9は、ショベルPSの機体の前方ばかりでなく、機体の側方及び後方等の少なくとも1つを含む複数の方向に向けても光を投影できるように構成されていてもよい。投影装置S9は、例えば図20及び図21に示すように、前方投影装置S9F、左方投影装置S9L、右方投影装置S9R及び後方投影装置S9Bを含んでいてもよい。そして、投影装置S9は、ショベルPSの周囲で作業している作業者等が、機体から第1距離の範囲内にある進入禁止領域と、機体から第1距離より大きい第2距離の範囲内にある注意領域と、注意領域の外側にある作業領域とを区別できるように地面に光を照射してもよい。
 図20及び図21のそれぞれにおける濃い梨地模様は進入禁止領域PRaを表し、薄い梨地模様は注意領域PRbを表す。作業領域は、注意領域PRbの外側の範囲に相当する。図20及び図21の例では、第1距離及び第2距離は何れも旋回軸からの距離である。但し、第1距離及び第2距離は何れも上部旋回体3の側端面からの距離等であってもよい。また、図20及び図21の例では、進入禁止領域PRaは赤色の光線で照射され、注意領域PRbは緑色の光線で照射され、作業領域は照射されない。但し、注意領域PRbは、黄色の光線で照射されてもよい。投影装置S9は、例えば、エンジン11がONのときに、進入禁止領域PRa及び注意領域PRbを照射するように構成されている。そのため、作業者等は、周囲の騒音のためにエンジン音が聞こえないような作業現場であっても、ショベルPSの接近度合いを容易に把握できる。但し、投影装置S9は、ゲートロック弁D6が開状態のときに、進入禁止領域PRa及び注意領域PRbを照射するように構成されていてもよい。また、投影装置S9は、ショベルPSが操作状態であることを知らせる文字情報又は図形情報を地面に投影するように構成されていてもよい。
 投影装置S9は、操作装置26の操作内容に応じてショベルPSの周囲の地面の所定領域を照射するように構成されていてもよい。例えば、投影装置S9は、旋回操作レバーが右旋回方向に操作された場合、図22に示すように、右前領域PRc及び左後領域PRdを所定の色の光で照射するように構成されていてもよい。右前領域PRcは、右旋回操作が行われた場合に掘削アタッチメントと接触する物体が存在するおそれがある範囲に対応する。左後領域PRdは、右旋回操作が行われた場合にカウンタウェイトと接触する物体が存在するおそれがある範囲に対応する。なお、図22の破線で示す図形は、右旋回中の上部旋回体3を表している。また、右前領域PRcのサイズは、掘削アタッチメントの姿勢、旋回操作レバーの傾倒角度等の変化に応じて変化するように構成されていてもよい。左後領域PRdについても同様である。
 投影装置S9は、ショベルPSの走行の際に、下部走行体1の前方及び後方のそれぞれにおける地面に光を投影するように構成されていてもよい。例えば、投影装置S9は、走行レバーが操作された場合、図23に示すように、前領域PRe及び後領域PRfを照射するように構成されていてもよい。前領域PReは、前進操作が行われた場合に下部走行体1と接触する物体が存在するおそれがある範囲に対応する。後領域PRfは、後進操作が行われた場合に下部走行体1と接触する物体が存在するおそれがある範囲に対応する。投影装置S9は、後進操作が行われた場合に限り、後領域PRfを照射するように構成されていてもよい。また、前領域PReのサイズは、走行レバーの傾倒角度等の変化に応じて変化するように構成されていてもよい。後領域PRfについても同様である。なお、投影装置S9を構成する後方投影装置S9B及び前方投影装置S9Fは、電気回路で直列に接続されていてもよい。この場合、ショベルPSの操作者は、例えば、前方投影装置S9Fが投影する光を視認することで、後方投影装置S9Bが正常に動作していることを確認できる。後方投影装置S9Bで電気回路が遮断された場合、前方投影装置S9Fは、光を投影できないためである。
 本願は、2017年3月7日に出願した日本国特許出願2017-043248号、及び、2017年3月27日に出願した日本国特許出願2017-061957号に基づく優先権を主張するものであり、これらの日本国特許出願の全内容を本願に参照により援用する。
 1・・・下部走行体 1a・・・フレーム 1b・・・クローラベルト 1c・・・キャリアローラ 1d・・・トラックローラ 1e・・・ステップ 1M・・・走行用油圧モータ 2・・・旋回機構 3・・・上部旋回体 3a・・・工具箱 3b・・・尿素水タンク 3c・・・燃料タンク 3d・・・ハンドレール 3e・・・ガードレール 3f・・・ステップ 4・・・ブーム 5・・・アーム 6・・・バケット 7・・・ブームシリンダ 8・・・アームシリンダ 9・・・バケットシリンダ 10・・・キャビン 10a・・・下部フロントウィンドウ 10b・・・上部フロントウィンドウ 10c・・・頂部ウィンドウ 10d・・・手摺り 11・・・エンジン 14・・・メインポンプ 15・・・パイロットポンプ 17・・・コントロールバルブ 26・・・操作装置 29・・・圧力センサ 30・・・コントローラ 30a・・・一時記憶部 50・・・マシンガイダンス装置 55・・・燃料タンク55 55a・・・燃料残量センサ 70・・・蓄電池 72・・・電装品 75・・・エンジン回転数調整ダイヤル 501・・・位置算出部 502・・・比較部 503・・・通知部 504・・・ステレオペア画像取得部 505・・・地形データ生成部 506・・・座標変換部 507・・・地形データ表示部 508・・・地形データ投影部 S1・・・ブーム角度センサ S2・・・アーム角度センサ S3・・・バケット角度センサ S4・・・機体傾斜センサ S5・・・旋回角速度センサ S6・・・ステレオカメラ S7、S7D、S7T・・・通信装置 S8、S8D、S8T・・・測位装置 S9、S9D、S9T・・・投影装置 D1・・・入力装置 D2・・・音声出力装置 D3・・・表示装置 D3a・・・変換処理部 D4・・・記憶装置 D5・・・ゲートロックレバー D6・・・ゲートロック弁 D7・・・エンジンコントローラユニット DR・・・飛行体 PS・・・ショベル TR・・・支持台

Claims (14)

  1.  下部走行体と、
     前記下部走行体に旋回可能に搭載される上部旋回体と、
     地面に光を投影する投影装置を制御する制御装置と、を備え、
     前記制御装置は、前記上部旋回体に取り付けられ、且つ、前記投影装置を制御して前記地面で可視化する情報を変化させる、
     ショベル。
  2.  前記制御装置は、前記地面と目標面との距離に応じて前記投影装置が投影する光の色又は照度を変えるように構成されている、
     請求項1に記載のショベル。
  3.  前記制御装置は、所定時点における前記地面の既知の形状と前記所定時点以降のエンドアタッチメントの移動軌跡とに基づいて前記地面の現在の形状を導き出すように構成されている、
     請求項1に記載のショベル。
  4.  前記制御装置は、前記地面を撮像するステレオカメラの出力に基づいて前記地面の現在の形状を導き出すように構成されている、
     請求項1に記載のショベル。
  5.  前記制御装置は、前記投影装置を制御して地中埋設物を可視化するように構成されている、
     請求項1に記載のショベル。
  6.  クローラ式の下部走行体と、
     前記下部走行体に搭載される上部旋回体と、
     前記上部旋回体に取り付けられるアタッチメントと、
     前記下部走行体の履帯の幅内に収まるように前記下部走行体のフレームに取り付けられるステップと、を備え、
     前記ステップの色は、色相、明度及び彩度の少なくとも1つにおいて、前記フレームの色と異なる、
     を備えるショベル。
  7.  前記ステップの色の明度は、前記フレームの色の明度より高い、
     請求項6に記載のショベル。
  8.  前記フレームの色の明度と前記ステップの色の明度は2段階以上異なる、
     請求項6に記載のショベル。
  9.  前記ステップの色の色相は、前記上部旋回体の色の色相と同じである、
     請求項6に記載のショベル。
  10.  前記ステップの色の色相は、前記上部旋回体の色の色相と異なる、
     請求項6に記載のショベル。
  11.  前記ステップの色の色相は、黄色又は黄緑色である、
     請求項6に記載のショベル。
  12.  前記ステップの色は、前記ステップの側面及び上面の塗装色の少なくとも一方を含む、
     請求項6に記載のショベル。
  13.  前記制御装置は、前記投影装置を制御して前記地面で可視化する情報と同じ情報をキャビン内の表示装置で表示させる、
     請求項1に記載のショベル。
  14.  建設機械の周囲に光を投影する建設機械の作業支援システムであって、
     制御装置と、
     前記制御装置からの信号に基づいて、前記建設機械の周囲の地面で可視化する情報を変化させる投影装置と、を有する、
     建設機械の作業支援システム。
PCT/JP2018/008724 2017-03-07 2018-03-07 ショベル及び建設機械の作業支援システム WO2018164172A1 (ja)

Priority Applications (8)

Application Number Priority Date Filing Date Title
JP2019504630A JP6957597B2 (ja) 2017-03-07 2018-03-07 ショベル及びショベルの作業支援システム
CN201880016335.9A CN110382793B (zh) 2017-03-07 2018-03-07 挖土机及施工机械的作业支援系统
CN202210305466.7A CN114482157A (zh) 2017-03-07 2018-03-07 挖土机及施工机械的作业支援系统
KR1020197025899A KR102455260B1 (ko) 2017-03-07 2018-03-07 쇼벨 및 건설기계의 작업지원시스템
EP18763416.7A EP3594415B1 (en) 2017-03-07 2018-03-07 Shovel and construction machinery work assist system
EP21206892.8A EP3974586B1 (en) 2017-03-07 2018-03-07 Work support system for a construction machine
US16/562,637 US11613873B2 (en) 2017-03-07 2019-09-06 Shovel and work support system for construction machine
US18/175,952 US12031301B2 (en) 2017-03-07 2023-02-28 Shovel and work support system for construction machine

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JP2017-043248 2017-03-07
JP2017043248 2017-03-07
JP2017-061957 2017-03-27
JP2017061957 2017-03-27

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US16/562,637 Continuation US11613873B2 (en) 2017-03-07 2019-09-06 Shovel and work support system for construction machine

Publications (1)

Publication Number Publication Date
WO2018164172A1 true WO2018164172A1 (ja) 2018-09-13

Family

ID=63447663

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2018/008724 WO2018164172A1 (ja) 2017-03-07 2018-03-07 ショベル及び建設機械の作業支援システム

Country Status (6)

Country Link
US (2) US11613873B2 (ja)
EP (2) EP3594415B1 (ja)
JP (1) JP6957597B2 (ja)
KR (1) KR102455260B1 (ja)
CN (2) CN114482157A (ja)
WO (1) WO2018164172A1 (ja)

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2020045688A (ja) * 2018-09-19 2020-03-26 日立建機株式会社 作業機械
WO2020066475A1 (ja) * 2018-09-26 2020-04-02 コベルコ建機株式会社 作業機械情報表示システム
JP2020067729A (ja) * 2018-10-23 2020-04-30 東京ガスiネット株式会社 情報処理システム及びプログラム
JP2020098451A (ja) * 2018-12-18 2020-06-25 川崎重工業株式会社 情報投影システム、制御装置、及び情報投影方法
JP2020187065A (ja) * 2019-05-16 2020-11-19 キヤノン株式会社 電子機器及びその制御方法、プログラム
KR20210114024A (ko) * 2019-09-25 2021-09-17 히다찌 겐끼 가부시키가이샤 작업 기계
US11218480B2 (en) 2015-09-21 2022-01-04 Payfone, Inc. Authenticator centralization and protection based on authenticator type and authentication policy
US11223948B2 (en) 2015-04-15 2022-01-11 Payfone, Inc. Anonymous authentication and remote wireless token access
JP7076020B1 (ja) 2021-02-02 2022-05-26 日立建機株式会社 自動作業システム
JP7572296B2 (ja) 2021-04-20 2024-10-23 日本車輌製造株式会社 建設機械の表示システム

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3399111B1 (en) 2015-12-28 2020-04-15 Sumitomo (S.H.I.) Construction Machinery Co., Ltd. Shovel
US11874659B2 (en) 2017-06-09 2024-01-16 Volvo Construction Equipment Ab Information system for a working machine
US20210140147A1 (en) * 2017-06-13 2021-05-13 Volvo Construction Equipment Ab A working machine provided with an image projection arrangement
FR3070015B1 (fr) * 2017-08-09 2020-02-14 Andre Constant Ligot Philippe Dispositif mobile de projection pour scenographie lumineuse
JP7372029B2 (ja) * 2018-06-29 2023-10-31 株式会社小松製作所 表示制御装置、表示制御システムおよび表示制御方法
KR20220097482A (ko) * 2020-03-16 2022-07-07 가부시키가이샤 고마쓰 세이사쿠쇼 작업 기계 및 작업 기계의 제어 방법
JP7423391B2 (ja) * 2020-04-03 2024-01-31 株式会社小松製作所 表示システム、プログラムおよび表示システムの制御方法
JP7349956B2 (ja) * 2020-04-14 2023-09-25 株式会社小松製作所 施工方法及び施工システム
KR102417984B1 (ko) * 2020-05-11 2022-07-08 한국생산기술연구원 굴삭기의 운전자 보조시스템 및 이를 이용한 굴삭기 제어 방법
US11449068B2 (en) 2020-05-11 2022-09-20 Deere & Company Mobile work machine state detection and visualization system
CN111851614A (zh) * 2020-07-03 2020-10-30 中联重科股份有限公司 用于为工程机械作业照明的方法、装置和系统及工程机械
JP7472746B2 (ja) * 2020-09-30 2024-04-23 コベルコ建機株式会社 作業支援装置
US20230060815A1 (en) * 2021-08-27 2023-03-02 Caterpillar Inc. Loading Machine with Visual Reference System

Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0671545U (ja) * 1993-03-17 1994-10-07 油谷重工株式会社 建設機械の作業灯装置
JP2583666B2 (ja) 1990-11-19 1997-02-19 三井東圧化学株式会社 ポリアミド樹脂およびその樹脂組成物
JP2002352224A (ja) * 2001-05-29 2002-12-06 Topcon Corp 画像測定表示装置、画像測定表示システム、施工管理方法、施工状態監視システム
JP2003213733A (ja) * 2002-01-22 2003-07-30 Komatsu Ltd 油圧ショベルおよびそれを用いる掘削方法
JP2007236243A (ja) * 2006-03-07 2007-09-20 Yanmar Co Ltd 田植機
JP2008033071A (ja) * 2006-07-31 2008-02-14 Nippon Oyo Kogaku Kk 路面プロジェクタ装置
JP2009013777A (ja) * 2007-07-05 2009-01-22 Wirtgen Gmbh 自動路面切削装置、とくには大型の切削装置
JP2012172425A (ja) 2011-02-22 2012-09-10 Komatsu Ltd 油圧ショベルの表示システム及びその制御方法
WO2014125640A1 (ja) * 2013-02-18 2014-08-21 株式会社小松製作所 油圧ショベル
WO2015141080A1 (ja) * 2014-03-18 2015-09-24 アドバンストヘルスケア株式会社 プロジェクタシステム及びキャリブレーションボード
WO2016111148A1 (ja) * 2015-12-18 2016-07-14 株式会社小松製作所 施工情報表示装置および施工情報の表示方法
JP2016160741A (ja) * 2015-03-05 2016-09-05 株式会社小松製作所 作業機械の画像表示システム、作業機械の遠隔操作システム及び作業機械
JP2017043248A (ja) 2015-08-27 2017-03-02 井関農機株式会社 作業車両
JP2017061957A (ja) 2015-09-24 2017-03-30 住友理工株式会社 クイックコネクタ

Family Cites Families (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH028847U (ja) 1988-07-01 1990-01-19
JPH0514906U (ja) 1991-07-30 1993-02-26 株式会社堀場製作所 異物有無検査装置
JP2583666Y2 (ja) 1993-05-28 1998-10-27 油谷重工株式会社 建設機械の上部旋回体
JP2004352102A (ja) 2003-05-29 2004-12-16 Hitachi Constr Mach Co Ltd クローラ式作業機械の昇降用ステップ装置
JP3917973B2 (ja) * 2003-12-19 2007-05-23 ヤンマー農機株式会社 作業車両のライト
JP4214995B2 (ja) 2004-12-24 2009-01-28 コベルコ建機株式会社 建設機械
JP2007315129A (ja) 2006-05-29 2007-12-06 Shin Caterpillar Mitsubishi Ltd 建設車両の乗降用目印
JP2010018141A (ja) 2008-07-10 2010-01-28 Caterpillar Japan Ltd 建設機械におけるディスプレイ装置
CA2748045C (en) * 2009-01-05 2016-04-26 Gordon Toll Apparatus and method for defining a safety zone for a vehicle, a person or an animal
FR2946022B1 (fr) * 2009-05-26 2013-02-08 Airbus France Systeme de protection de zones dangereuses.
CA2829811A1 (en) * 2010-03-11 2011-09-15 David Mcintosh Overhead hazard warning systems
JP5888956B2 (ja) * 2011-12-13 2016-03-22 住友建機株式会社 ショベル及び該ショベルの周囲画像表示方法
KR101360949B1 (ko) * 2012-03-27 2014-02-12 한국과학기술연구원 차량의 전방에 주행 정보를 조사하기 위한 방법 및 장치
JP6155703B2 (ja) * 2013-03-04 2017-07-05 セイコーエプソン株式会社 光源装置及びプロジェクター
TWI537157B (zh) * 2013-04-09 2016-06-11 開丕股份有限公司 車用警示裝置及方法
US9567102B1 (en) * 2014-01-29 2017-02-14 Stan W. Ross Safety system with projectable warning indicia
ES2561133B1 (es) * 2014-07-24 2016-12-01 Alejandro Rodriguez Barros Retrovisor exterior multifunción con dispositivo emisor laser incorporado
CN106573572B (zh) * 2014-08-19 2019-07-09 三菱电机株式会社 后方路面照射装置和后方路面照射方法
CN107111928B (zh) * 2014-11-17 2020-07-31 洋马动力科技有限公司 远程控制作业机用显示系统
JP6176267B2 (ja) 2015-01-29 2017-08-09 コベルコ建機株式会社 建設機械の昇降用ステップ
US9824490B1 (en) * 2015-06-08 2017-11-21 Bentley Systems, Incorporated Augmentation of a dynamic terrain surface
US9969325B2 (en) * 2015-09-15 2018-05-15 International Business Machines Corporation Projected surface markings
US20180009547A1 (en) * 2016-07-06 2018-01-11 The Boeing Company Laser Projected Engine Hazard Zone Systems And Methods
US9976284B2 (en) * 2016-07-18 2018-05-22 Caterpillar Inc. Control system for headlights of a machine
CN109922991B (zh) * 2016-08-24 2022-10-11 沃尔沃建筑设备公司 用于工程机械的警告系统

Patent Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2583666B2 (ja) 1990-11-19 1997-02-19 三井東圧化学株式会社 ポリアミド樹脂およびその樹脂組成物
JPH0671545U (ja) * 1993-03-17 1994-10-07 油谷重工株式会社 建設機械の作業灯装置
JP2002352224A (ja) * 2001-05-29 2002-12-06 Topcon Corp 画像測定表示装置、画像測定表示システム、施工管理方法、施工状態監視システム
JP2003213733A (ja) * 2002-01-22 2003-07-30 Komatsu Ltd 油圧ショベルおよびそれを用いる掘削方法
JP2007236243A (ja) * 2006-03-07 2007-09-20 Yanmar Co Ltd 田植機
JP2008033071A (ja) * 2006-07-31 2008-02-14 Nippon Oyo Kogaku Kk 路面プロジェクタ装置
JP2009013777A (ja) * 2007-07-05 2009-01-22 Wirtgen Gmbh 自動路面切削装置、とくには大型の切削装置
JP2012172425A (ja) 2011-02-22 2012-09-10 Komatsu Ltd 油圧ショベルの表示システム及びその制御方法
WO2014125640A1 (ja) * 2013-02-18 2014-08-21 株式会社小松製作所 油圧ショベル
WO2015141080A1 (ja) * 2014-03-18 2015-09-24 アドバンストヘルスケア株式会社 プロジェクタシステム及びキャリブレーションボード
JP2016160741A (ja) * 2015-03-05 2016-09-05 株式会社小松製作所 作業機械の画像表示システム、作業機械の遠隔操作システム及び作業機械
JP2017043248A (ja) 2015-08-27 2017-03-02 井関農機株式会社 作業車両
JP2017061957A (ja) 2015-09-24 2017-03-30 住友理工株式会社 クイックコネクタ
WO2016111148A1 (ja) * 2015-12-18 2016-07-14 株式会社小松製作所 施工情報表示装置および施工情報の表示方法

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
"Back Cover", CONSTRUCTION MACHINERY AND EQUIPMENT, vol. 51, no. 6, 1 June 2015 (2015-06-01), pages 6, XP009516893, ISSN: 0385-9878 *
ANONYMOUS: "Cover 607", CONSTRUCTION MACHINERY AND EQUIPMENT, vol. 51, no. 9, 1 September 2015 (2015-09-01), pages 1, XP009516895, ISSN: 0385-9878 *
See also references of EP3594415A4

Cited By (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11223948B2 (en) 2015-04-15 2022-01-11 Payfone, Inc. Anonymous authentication and remote wireless token access
US11218480B2 (en) 2015-09-21 2022-01-04 Payfone, Inc. Authenticator centralization and protection based on authenticator type and authentication policy
US11991175B2 (en) 2015-09-21 2024-05-21 Payfone, Inc. User authentication based on device identifier further identifying software agent
JP2020045688A (ja) * 2018-09-19 2020-03-26 日立建機株式会社 作業機械
JP7065002B2 (ja) 2018-09-19 2022-05-11 日立建機株式会社 作業機械
WO2020066475A1 (ja) * 2018-09-26 2020-04-02 コベルコ建機株式会社 作業機械情報表示システム
JP2020051092A (ja) * 2018-09-26 2020-04-02 コベルコ建機株式会社 作業機械情報表示システム
JP7199198B2 (ja) 2018-10-23 2023-01-05 東京ガスiネット株式会社 情報処理システム及びプログラム
JP2020067729A (ja) * 2018-10-23 2020-04-30 東京ガスiネット株式会社 情報処理システム及びプログラム
JP2020098451A (ja) * 2018-12-18 2020-06-25 川崎重工業株式会社 情報投影システム、制御装置、及び情報投影方法
CN113196165A (zh) * 2018-12-18 2021-07-30 川崎重工业株式会社 信息投影系统、控制装置以及信息投影方法
WO2020130006A1 (ja) * 2018-12-18 2020-06-25 川崎重工業株式会社 情報投影システム、制御装置、及び情報投影方法
JP7414395B2 (ja) 2018-12-18 2024-01-16 川崎重工業株式会社 情報投影システム、制御装置、及び情報投影制御方法
US11808561B2 (en) 2019-05-16 2023-11-07 Canon Kabushiki Kaisha Electronic apparatus for controlling a projector to project an image onto a screen at an actual size length, control method thereof and computer readable storage medium
JP2020187065A (ja) * 2019-05-16 2020-11-19 キヤノン株式会社 電子機器及びその制御方法、プログラム
KR102580728B1 (ko) * 2019-09-25 2023-09-21 히다찌 겐끼 가부시키가이샤 작업 기계
KR20210114024A (ko) * 2019-09-25 2021-09-17 히다찌 겐끼 가부시키가이샤 작업 기계
US12012716B2 (en) 2019-09-25 2024-06-18 Hitachi Construction Machinery Co., Ltd. Work machine
JP2022118445A (ja) * 2021-02-02 2022-08-15 日立建機株式会社 自動作業システム
WO2022168447A1 (ja) * 2021-02-02 2022-08-11 日立建機株式会社 自動作業システム
JP7076020B1 (ja) 2021-02-02 2022-05-26 日立建機株式会社 自動作業システム
JP7572296B2 (ja) 2021-04-20 2024-10-23 日本車輌製造株式会社 建設機械の表示システム

Also Published As

Publication number Publication date
JPWO2018164172A1 (ja) 2020-01-09
US20200018045A1 (en) 2020-01-16
CN114482157A (zh) 2022-05-13
CN110382793B (zh) 2022-04-12
US12031301B2 (en) 2024-07-09
US11613873B2 (en) 2023-03-28
EP3974586B1 (en) 2024-03-13
KR102455260B1 (ko) 2022-10-14
EP3974586A1 (en) 2022-03-30
EP3594415B1 (en) 2021-12-15
EP3594415A1 (en) 2020-01-15
US20230203790A1 (en) 2023-06-29
JP6957597B2 (ja) 2021-11-02
KR20190122699A (ko) 2019-10-30
EP3594415A4 (en) 2020-07-29
CN110382793A (zh) 2019-10-25

Similar Documents

Publication Publication Date Title
JP6957597B2 (ja) ショベル及びショベルの作業支援システム
US11384515B2 (en) Image display system for work machine, remote operation system for work machine, and work machine
JP7330107B2 (ja) ショベル及びショベルの管理システム
JP7507559B2 (ja) ショベル及びショベルの制御方法
US10301798B2 (en) Augmented reality display for material moving machines
JP7571358B2 (ja) 作業機械及び作業機械による作業を支援する支援装置
US10508417B2 (en) Construction information display device and method for displaying construction information
WO2019189888A1 (ja) 建設機械の運転支援システム、建設機械
CN105339561B (zh) 作业机械的姿势运算装置、作业机械及作业机械的姿势运算方法
US20140184643A1 (en) Augmented Reality Worksite
KR20190126792A (ko) 쇼벨과, 쇼벨의 관리장치 및 지원장치
JP6782270B2 (ja) 施工管理システムおよび作業機械
JPWO2019189203A1 (ja) ショベル
KR20210140737A (ko) 쇼벨 및 시공시스템
US20210285184A1 (en) Image display system of work machine, remote operation system of work machine, work machine, and method for displaying image of work machine
US20200150650A1 (en) An information system for a working machine
US20240011252A1 (en) Shovel and shovel control device
WO2022209434A1 (ja) 施工管理システム、データ処理装置、及び施工管理方法
CN117083433A (zh) 施工机械及施工机械用支援装置
JPWO2019117166A1 (ja) ショベル
EP4394137A1 (en) Display device for work machine and work machine
CN117062956A (zh) 挖土机及挖土机的控制装置

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 18763416

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 20197025899

Country of ref document: KR

Kind code of ref document: A

ENP Entry into the national phase

Ref document number: 2019504630

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

ENP Entry into the national phase

Ref document number: 2018763416

Country of ref document: EP

Effective date: 20191007