WO2025115658A1 - 運転支援装置 - Google Patents
運転支援装置 Download PDFInfo
- Publication number
- WO2025115658A1 WO2025115658A1 PCT/JP2024/040695 JP2024040695W WO2025115658A1 WO 2025115658 A1 WO2025115658 A1 WO 2025115658A1 JP 2024040695 W JP2024040695 W JP 2024040695W WO 2025115658 A1 WO2025115658 A1 WO 2025115658A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- foot
- driving
- vehicle
- state
- driver
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W10/00—Conjoint control of vehicle sub-units of different type or different function
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W10/00—Conjoint control of vehicle sub-units of different type or different function
- B60W10/04—Conjoint control of vehicle sub-units of different type or different function including control of propulsion units
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W30/00—Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
- B60W30/14—Adaptive cruise control
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
- B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W50/08—Interaction between the driver and the control system
Definitions
- This disclosure relates to a driving assistance device that is installed in a vehicle to assist the driver of the vehicle in driving.
- Patent Document 1 provides a vehicle control device that can perform vehicle control and driving assistance early and quickly.
- a vehicle control device includes a determination unit and a control unit.
- the determination unit determines whether the driver's foot is approaching a vehicle pedal. Specifically, the determination unit determines whether the driver's foot is approaching each of the brake pedal, clutch pedal, and accelerator pedal based on whether communication has been established by short-range communication with an IC tag using a radio receiver. If it is determined that the driver's foot is approaching the pedal, the control unit controls the device to perform a preparatory operation prior to the operation when the pedal is depressed with the foot.
- the preparatory operation is, for example, turning on the brake lights, preparing for braking by starting to apply pressure to the brake master cylinder of the brake system, and assisting the stroke of the clutch pedal.
- the convenience of the vehicle equipped with the device is improved by more accurately reflecting the driver's state and intention in the driving assistance.
- the determination unit determines whether the driver's foot is close to the pedal based on the radio waves from the IC tag attached to the driver's shoe. Therefore, from the viewpoint of convenience, there is still room for improvement.
- the present disclosure has been made in consideration of the above-mentioned circumstances, etc. That is, the present disclosure provides a technique that enables, for example, a driver's state and intention to be more accurately reflected in driving assistance.
- a driving assistance device is configured to be mounted in a vehicle to assist the driver of the vehicle in driving the vehicle.
- a driving assistance device includes: a foot condition detection unit that detects a foot condition including a condition of the driver's foot and/or leg by using a non-contact sensor; The device is configured to execute a motion control operation and/or an information presentation operation related to a driving assistance operation of the vehicle based on the foot state detected by the foot state detection unit.
- each element may be given a reference symbol in parentheses.
- the reference symbol merely indicates an example of the correspondence between the element and the specific configuration described in the embodiment described below. Therefore, the present disclosure is not limited in any way by the description of the reference symbol.
- FIG. 1 is a schematic diagram showing a state in which the interior of a vehicle cabin of a vehicle to which an in-vehicle interface device according to an embodiment is applied, as viewed from the side; 2 is a perspective view showing the foot space shown in FIG. 1 as viewed obliquely from above.
- FIG. 2 is a block diagram showing a schematic configuration of an in-vehicle system mounted on the vehicle shown in FIG. 1 .
- 4 is a schematic diagram for explaining a motion state of the driver's foot detected by the foot state detection unit shown in FIG. 3 .
- FIG. 4 is a schematic diagram for explaining a motion state of the driver's foot detected by the foot state detection unit shown in FIG. 3 .
- FIG. 4 is a schematic diagram for explaining a motion state of the driver's foot detected by the foot state detection unit shown in FIG. 3 .
- FIG. 1 is a schematic diagram showing a state in which the interior of a vehicle cabin of a vehicle to which an in-vehicle interface
- the vehicle V is a so-called ordinary automobile and has a box-shaped vehicle body V1.
- the directional concepts of "front”, “rear”, “up”, “down”, “right” and “left” are defined as shown in FIG. 1 and FIG. 2.
- "Down” is the same direction as the direction of gravity when the vehicle V is stably placed on a horizontal surface in a runnable state
- "up” is the opposite direction. That is, the up-down direction is a direction parallel to the direction of gravity when the vehicle V is stably placed on a horizontal surface in a runnable state.
- the vehicle V is configured as a so-called "right-hand drive vehicle” that complies with the road traffic law for left-hand traffic in Japan.
- a plurality of passenger seats including a driver's seat V3 are provided in the vehicle cabin V2, which is the internal space of the vehicle body V1.
- the passenger who sits in the driver's seat V3 is hereinafter referred to as the driver D.
- the driver's seat V3 is provided with a seat cushion V31 that has a seating surface for the driver D, a seat back V32 that supports the driver D from behind, and a headrest V33.
- a dashboard V4 is disposed in front of the driver's seat V3.
- a steering wheel V5 is disposed so as to protrude from the dashboard V4 toward the driver's seat V3.
- a pedal V7 and a footrest V8 are disposed in the foot space V6, which is the space below the dashboard V4.
- an accelerator pedal V71 and a brake pedal V72 are provided as the pedals V7.
- the accelerator pedal V71 is disposed to the right of the brake pedal V72.
- the footrest V8 is disposed to the left of the brake pedal V72. That is, the accelerator pedal V71, the brake pedal V72, and the footrest V8 are arranged in this order from right to left.
- a floor mat V10 is laid on the floor V9 at the bottom of the foot space V6.
- FIG 1 shows a state in which the driver D is seated in the driver's seat V3 in a driving position.
- the "driving position” refers to an appropriate seating position in the driver's seat V3 that allows the driver D to accurately operate the steering wheel V5 and pedals V7.
- the driver D's head D1 is supported from behind by the headrest V33, and the torso D2 is in close contact with the seat back V32.
- the driver D's arms D3 extend forward with the elbows slightly bent, and the driver D grasps the steering wheel V5 with the hands D31.
- the driver D's feet D4 are the parts of the legs D5 that extend beyond the ankles D6, and the right foot D41 operates the pedals V7, while the left foot D42 is often placed on the footrest V8.
- the vehicle V in this embodiment has a configuration as a so-called automatic or semi-automatic vehicle that does not require the driver D's left foot D42 to operate the clutch.
- Most of the thigh D52 of the driver D's leg D5, which is closer to the base than the knee D51, is in close contact with the seat cushion V31.
- the shin D53 which is the part between the foot D4 and the knee D51, extends diagonally forward and downward from the knee D51 so that the driver D can easily operate the pedal V7 with the right foot D41 or step on it.
- the vehicle V is equipped with the in-vehicle system 1 shown in FIG. 3.
- the vehicle V equipped with the in-vehicle system 1 may be referred to as the "own vehicle” hereinafter.
- the in-vehicle system 1 is configured to assist the driving of the driver D of the own vehicle by being installed in the own vehicle. That is, the in-vehicle system 1 is configured as a driving assistance system.
- "assisting the driving of the driver D of the own vehicle” or “driving assistance” refers to assisting and/or automating a part or all of the driving operation of the own vehicle by the driver D by the in-vehicle system 1.
- the "driving assistance” in this disclosure is a broader concept than “driving assistance” as a name given to the driving automation level of level 1 specified in the standard "SAE J3016" published by SAE International.
- SAE is an abbreviation for Society Of Automotive Engineers.
- the vehicle is configured to be able to implement driving automation levels 1 to 4 defined in “SAE J3016” based on the driving conditions and a selection operation by the driver D. That is, the in-vehicle system 1 is configured to function as a driving automation system in the vehicle when mounted on the vehicle.
- the "driving automation system” is a system for achieving a driving automation level corresponding to at least one of levels 1 to 5 defined in "SAE J3016". The contents of each level defined in “SAE J3016" are explained below.
- Level X in “SAE J3016” is hereinafter simply referred to as "SAE Level X". X is any of 0 to 5.
- driver D is a driver who is in charge of or performs the dynamic driving task.
- the "dynamic driving task” refers to all operational and tactical functions that need to be performed in real time when operating a vehicle in road traffic, excluding strategic functions. Driving behavior in general can be categorized into three types of functions: strategic, tactical, and operational.
- the "strategic” functions include planning the route, selecting intermediate destinations, etc., and specifically include deciding or selecting the route plan, such as "whether to go or not, when, where, and how to go.”
- the “tactical” functions relate to vehicle operation in traffic situations, such as deciding whether and when to overtake or change lanes during the route, selecting an appropriate speed, and checking mirrors.
- the "operational” functions relate to instantaneous reactions, such as making minor corrections to steering, braking, accelerating, and accelerating operations to maintain the position of the road lane or to avoid sudden obstacles or dangerous events in the vehicle's path.
- OEDR is an abbreviation for Object and Event Detection and Response, and is also referred to as “detection and response of objects and events.”
- OEDR includes monitoring of the driving environment. Monitoring of the driving environment includes detection, recognition, and classification of objects and events. Monitoring of the driving environment also includes preparation to respond to objects and events as necessary.
- a “limited domain” is a specific condition in which a driving automation system or its functions are designed to operate, and is also referred to as an operational design domain or ODD. ODD stands for Operational Design Domain.
- a limited domain includes at least one of multiple constraints, such as geographical, environmental, speed, and time.
- SAE Level 0 Manual driving...Driver D performs all dynamic driving tasks.
- SAE Level 1 Driving assistance: The driving automation system continuously performs either the longitudinal vehicle motion control subtask or the lateral vehicle motion control subtask of the dynamic driving task in a specific limited area.
- the longitudinal vehicle motion control subtask is starting, accelerating/decelerating, and stopping.
- the lateral vehicle motion control subtask is steering.
- Level 2 Advanced driving assistance: The driving automation system continuously performs the longitudinal vehicle motion control subtask and the lateral vehicle motion control subtask of the dynamic driving task in a specific limited area.
- the driver D is expected to supervise the driving automation system by performing the OEDR, which is a subtask of the dynamic driving task.
- SAE Level 3 Conditional Autonomous Driving: The driving automation system continuously performs all dynamic driving tasks in specific limited areas. In principle, driver D is not obligated to perform OEDR such as periphery monitoring. Periphery monitoring is monitoring the traffic environment around the vehicle. However, if it becomes difficult to continue the driving automation level, the driving automation system will request driver D to take over driving with sufficient time to spare. Driver D must respond to the request appropriately.
- SAE Level 4 Highly automated driving: The driving automation system continuously performs all dynamic driving tasks in specific limited areas. If it becomes difficult to continue the driving automation level in the limited areas, the driving automation system will take action.
- SAE Level 5 Fully automated driving: The driving automation system performs all dynamic driving tasks continuously, without being limited to specific restricted areas. If it becomes difficult to continue the driving automation level, the driving automation system will also respond without being limited to specific restricted areas.
- a change to a higher driving automation level is referred to as an "increase" in the driving automation level.
- a change to a lower driving automation level is referred to as a "decrease" in the driving automation level. Therefore, for example, even if there is no level change in SAE Level 1 or 2, the driving automation level may increase or decrease depending on an increase or decrease in the dynamic driving tasks the driving automation system is responsible for, i.e., executes.
- the in-vehicle system 1 is configured to be capable of executing various driving controls when driving the vehicle and various associated notification or warning operations.
- the in-vehicle system 1 is configured to be capable of executing SAE level 3 or 4 autonomous driving, SAE level 2 advanced driving assistance, and various ADAS-related controls included in SAE level 1.
- ADAS is an abbreviation for Advanced Driver-Assistance Systems. Therefore, the in-vehicle system 1 according to this embodiment can be referred to as an "autonomous driving system" while performing SAE level 3 or 4 autonomous driving.
- SAE level 3 or 4 autonomous driving will be collectively referred to simply as “autonomous driving” unless otherwise specified.
- the advanced driving assistance that can be performed by the in-vehicle system 1 according to this embodiment includes so-called "hands-off driving".
- hands-off driving the in-vehicle system 1 automatically controls starting, steering, accelerating/decelerating, changing lanes, and stopping, provided that the driver D responds appropriately to requests for intervention from the in-vehicle system 1.
- Hands-off driving does not require the driver D to be in a hands-on state, but does require the driver D to monitor the road conditions, traffic conditions, and obstacle presence status around the vehicle.
- the "hands-on state” is a state in which the driver D can interfere with the steering of the vehicle, i.e., the lateral vehicle motion control subtask, and is typically a state in which the driver D can instantly operate the steering wheel V5 with his/her hands D31 while sitting in the driver's seat V3 in a driving position.
- a hands-on state the driver D normally holds the handlebars V5 with his/her hands D31, but a state in which the driver D's hands D31 are placed on the handlebars V5, i.e., the state in which the driver D's hands D31 are touching the handlebars V5 in a state in which they can be immediately grasped, can also be considered a "hands-on state.”
- An "obstacle” is an object with which the vehicle must avoid colliding, and includes other vehicles, pedestrians, lying people, buildings, barricades, poles, cones, etc.
- An "other vehicle” includes a cyclist, i.e., a two-wheeled or three-wheeled vehicle with a rider.
- leg-on state refers to a state in which the foot D4 of the driver D in a driving posture is placed in a position where the pedal V7 can be immediately depressed, typically the right foot D41 is placed on the pedal V7.
- the "leg-on state” includes a state in which the foot D4 of the driver D is depressing the pedal V7 and a state in which the foot D4 is not depressing the pedal V7 but is lightly touching the pedal V7.
- the "leg-off state” refers to a state in which the foot D4 of the driver D is not placed in a position where the pedal V7 can be immediately depressed, typically the right foot D41 is not placed on the pedal V7.
- the leg-off state is permitted, and the right foot D41 can be placed, for example, in front of or to the right of the accelerator pedal V71, or raised upward using an ottoman (not shown).
- ACC is an abbreviation for adaptive cruise control.
- ACC is a control that performs constant-speed driving control to make the vehicle travel at a constant target speed when there is no preceding vehicle ahead of the vehicle, and performs following driving control to make the vehicle follow the preceding vehicle at a speed equal to or slower than the target speed when there is a preceding vehicle ahead.
- the in-vehicle system 1 has a configuration as an in-vehicle network including an in-vehicle communication line 10 and a plurality of nodes connected to each other via the in-vehicle communication line 10.
- the in-vehicle system 1 is configured to comply with a predetermined communication standard such as CAN (international registered trademark: international registration number 1048262A).
- CAN international registered trademark
- Controller Area Network is considered to be an abbreviation of Controller Area Network.
- the in-vehicle system 1 includes a vehicle state sensor 11, an external state sensor 12, a surrounding monitoring sensor 13, a locator 14, a communication module 15, a driver state detection unit 16, a driving control device 17, an air conditioning device 18, an in-vehicle lighting device 19, and an HMI device 20.
- HMI is an abbreviation of human machine interface.
- the HMI device 20 includes an output device 21, an input device 22, and an HMI control device 23.
- the vehicle condition sensor 11 to the interior lighting device 19 and the HMI control device are connected to the in-vehicle communication line 10.
- the output device and the input device 22 are connected to the HMI control device .
- the vehicle state sensor 11 is provided to generate outputs corresponding to various quantities related to the driving state of the vehicle.
- the "various quantities related to the driving state” include various quantities related to the driving operation state by the driver D or the driving automation system, such as, for example, the accelerator opening, the braking operation amount, the shift position, and the steering angle.
- the "various quantities related to the driving state” also include physical quantities related to the behavior of the vehicle, such as, for example, the vehicle speed, the angular velocity, the forward/rearward acceleration, and the left/right acceleration.
- vehicle state sensor 11 in addition to the accelerator pedal sensor 111 and the brake pedal sensor 112, well-known sensors necessary for vehicle driving control, such as a steering angle sensor, a wheel speed sensor, an angular velocity sensor, and an acceleration sensor, are provided.
- vehicle state sensor 11 is provided so as to be able to provide detection outputs to each part, such as the driving control device 17, via the in-vehicle communication line 10.
- the external environment condition sensor 12 is configured to generate an output corresponding to various quantities related primarily to the natural environment within the driving environment of the vehicle.
- Various quantities related to the natural environment include physical quantities such as outside air temperature, rainfall, and illuminance.
- the external environment condition sensor 12 is a general term for well-known sensors such as an outside air temperature sensor, raindrop sensor, and illuminance sensor for the sake of simplicity of illustration and explanation.
- the external environment condition sensor 12 is configured to be able to provide detection outputs to various parts of the driving control device 17, etc., via the in-vehicle communication line 10.
- the perimeter monitoring sensor 13 is configured to detect the driving environment of the vehicle other than those that can be detected primarily by the external condition sensor 12. Specifically, the perimeter monitoring sensor 13 is configured to detect moving and stationary objects within a predetermined detection range around the vehicle. “Moving objects” include pedestrians, cyclists, animals, and other moving vehicles. “Stationary objects” include objects that have fallen on the road, guardrails, curbs, parked vehicles, road signs, road markings, as well as roadside structures (e.g., walls, buildings, etc.). The perimeter monitoring sensor 13 may also be referred to as an "ADAS sensor.”
- the perimeter monitoring sensor 13 has a camera 131 and an object detection sensor 132 as components for detecting moving objects and stationary objects.
- the camera 131 is provided to capture images of the surroundings of the vehicle.
- the camera 131 is a digital camera device and has an image sensor such as a CCD or CMOS.
- CCD stands for Charge Coupled Device.
- CMOS stands for Complementary Metal-Oxide-Semiconductor.
- the object detection sensor 132 is a millimeter wave radar sensor, a sub-millimeter wave radar sensor, or a laser radar sensor that transmits and receives radar waves, and is attached to the front part of the vehicle body V1 of the vehicle.
- the object detection sensor 132 is configured to output a signal corresponding to the position and relative speed of a reflection point.
- a "reflection point” is a point on the surface of an object present around the vehicle that is estimated to have reflected the radar wave.
- a “relative speed” is the relative speed of the reflection point, i.e., the object that reflected the radar wave, relative to the vehicle.
- the locator 14 is configured to acquire highly accurate position information of the vehicle by so-called composite positioning.
- the locator 14 has a GNSS receiver 141, an inertial acquisition unit 142, a high-precision map DB 143, and a locator ECU 144.
- GNSS stands for Global Navigation Satellite System.
- DB stands for database.
- ECU stands for Electronic Control Unit.
- the "high-precision position information" is, for example, position information having a position accuracy that can be used for a driving automation level of SAE level 2 or higher, specifically, an error of less than 10 cm.
- the GNSS receiver 141 is configured to receive positioning signals transmitted from multiple positioning satellites, i.e., artificial satellites.
- the GNSS receiver 141 is configured to be able to receive positioning signals from positioning satellites in at least one of the satellite positioning systems, such as GPS, QZSS, GLONASS, Galileo, IRNSS, and the Beidou satellite navigation system.
- GPS is an abbreviation for Global Positioning System.
- QZSS is an abbreviation for Quasi-Zenith Satellite System.
- GLONASS is an abbreviation for Global Navigation Satellite System.
- IRNSS is an abbreviation for Indian Regional Navigation Satellite System.
- the inertia acquisition unit 142 is configured to acquire the acceleration and angular velocity acting on the vehicle.
- the inertia acquisition unit 142 is provided as a three-axis gyro sensor and a three-axis acceleration sensor built into a box-shaped housing in the locator 14.
- the high-precision map DB 143 is mainly composed of a non-volatile rewritable memory so that the high-precision map information can be rewritten and the stored contents can be retained even when the power is cut off.
- the non-volatile rewritable memory include a hard disk, an EEPROM, and a flash ROM.
- EEPROM stands for Electronically Erasable and Programmable ROM.
- ROM stands for Read Only Memory.
- the high-precision map information can also be called high-precision map data.
- the high-precision map information contains map information with higher accuracy than the map information used in conventional car navigation systems that can handle position errors of about several meters.
- the high-precision map DB 143 stores information that can be used for driving automation levels of SAE level 2 or higher, such as three-dimensional road shape information, lane number information, and regulation information, in accordance with predetermined standards such as the ADASIS standard.
- ADASIS stands for Advanced Driver Assistance Systems Interface Specification.
- the locator ECU 144 is configured as a so-called in-vehicle microcomputer equipped with a CPU, ROM, RAM, input/output interface, etc. (not shown).
- CPU stands for Central Processing Unit.
- RAM stands for Random Access Memory.
- the locator ECU 144 is configured to sequentially calculate the position and direction of the vehicle based on the positioning signal received by the GNSS receiver 141, the acceleration and angular velocity acquired by the inertia acquisition unit 142, the vehicle speed acquired from the vehicle state sensor 11, etc.
- the locator 14 is configured to be able to provide the results of calculations of the position, direction, etc. by the locator ECU 144 to each part of the driving control device 17 and the HMI control device 23 via the in-vehicle communication line 10.
- the communication module 15 is provided to realize V2X communication in the vehicle using wireless communication conforming to a predetermined communication standard.
- V2X is an abbreviation for Vehicle to X or Vehicle to everything.
- the communication module 15 may also be referred to as a DCM.
- DCM is an abbreviation for Data Communication Module.
- the communication module 15 is configured to acquire the latest high-precision map information from a probe server on a cloud.
- the communication module 15 stores the acquired latest high-precision map information in the high-precision map DB 143 by cooperating with the locator ECU 144.
- the communication module 15 is configured to acquire traffic information including information on traffic conditions (e.g., congestion information, etc.) from the above-mentioned probe server and/or a predetermined database.
- the communication module 15 is also configured to acquire the lighting state of a traffic light at an intersection at the vehicle's destination and the timing of its change from the above-mentioned probe server and/or a predetermined database.
- the driver state detection unit 16 is provided to detect the driver state.
- the "driver state” is the state of the driver D of the vehicle, and includes at least one of the line of sight, posture, behavior, psychological state, and the like.
- the driver state detection unit 16 is configured to detect the face direction, line of sight, seating posture, grip state of the steering wheel V5, and the like of the driver D.
- the driver state detection unit 16 is provided so as to be able to provide the detection result of the driver state to each unit such as the driving control device 17 and the HMI control device 23 via the in-vehicle communication line 10.
- the driving control device 17 is configured to execute driving control such as acceleration/deceleration and steering of the vehicle based on signals and information acquired from the vehicle state sensor 11, the external environment state sensor 12, the surrounding monitoring sensor 13, the locator 14, etc.
- the driving control device 17 is configured as an "automatic driving ECU” or a “driving assistance ECU.” That is, the driving control device 17 is configured to realize an automatic driving function and a driving assistance function by executing a predetermined driving control operation.
- the "predetermined driving control operation” includes a vehicle control operation, i.e., a dynamic driving task execution operation, corresponding to SAE Levels 1 to 3.
- the driving control device 17 has a configuration as a so-called on-board microcomputer, including a CPU, ROM, non-volatile rewritable memory, RAM, an input/output interface, etc. (not shown). Specifically, the driving control device 17 has an information acquisition unit 170, an automation level determination unit 171, a detection system control unit 172, a drive system control unit 173, and a braking system control unit 174 as functional configurations or functional units realized on the on-board microcomputer.
- the information acquisition unit 170 is configured to acquire signals and information output from the vehicle state sensor 11, the external state sensor 12, the surrounding monitoring sensor 13, the locator 14, the communication module 15, and the driver state detection unit 16.
- the information acquisition unit 170 also transmits and receives signals and information to and from the HMI control unit 23.
- the driving control unit 17 operates the automation level determination unit 171, the detection system control unit 172, the drive system control unit 173, and the braking system control unit 174 based on the signals and information acquired by the information acquisition unit 170 from each of these units.
- the automation level determination unit 171 is configured to set the driving automation level of the vehicle to one of SAE levels 0 to 3.
- the automation level determination unit 171 is also configured to switch between starting and stopping functions such as ACC.
- the automation level determination unit 171 is configured to determine the driving mode related to driving automation.
- the driving control device 17 is configured to be able to provide the results of the driving mode determination by the automation level determination unit 171 to each component such as the HMI control device 23 via the in-vehicle communication line 10.
- the detection system control unit 172 controls the object detection operation by the periphery monitoring sensor 13, and is adapted to recognize the presence of objects around the vehicle based on the object detection results using the periphery monitoring sensor 13.
- the drive system control unit 173 controls the operation of the drive system, i.e., the power train, in the vehicle. That is, the drive system control unit 173 controls the operation of the drive source, which is the engine and/or motor, and the operation of the power transmission mechanism (e.g., a transmission mechanism, etc.) between the drive source and the wheels.
- the brake system control unit 174 controls the operation of the brake mechanism of the vehicle. That is, the brake system control unit 174 controls the brake pressure, which is the pressure of the working fluid in the friction brake mechanism, and the braking force. Furthermore, if the vehicle is equipped with a regenerative brake mechanism, the brake system control unit 174 controls the utilization state of the regenerative brake mechanism, i.e., on/off and effectiveness.
- the air conditioner 18 is provided to adjust the temperature inside the vehicle compartment V2. That is, the air conditioner 18 is configured to perform a heating function of heating the vehicle compartment V2 and a cooling function of supplying cool air into the vehicle compartment V2.
- the interior lighting device 19 is configured to be able to variably set the lighting state in the vehicle compartment V2.
- the interior lighting device 19 includes a so-called ambient light.
- the ambient light is provided on the ceiling, door trim, etc. in the vehicle compartment V2, and is configured to be able to change the light emission state including the light emission color. That is, the interior lighting device 19 is configured as an interior device that affects the vision of the driver D.
- the HMI device 20 is configured to receive input operations from occupants such as the driver D other than accelerator and brake operations using the pedal V7, and to audiovisually output various information or content to the occupant.
- the output device 21 includes an instrument panel 211, a console display device 212, a HUD device 213, an AV device 214, and a speaker 215.
- HUD is an abbreviation for head-up display.
- the input device 22 includes a meter switch 221, a console switch 222, a handle switch 223, a microphone 224, and a foot state sensor 225.
- the instrument panel 211 is provided on the dashboard V4 and includes a meter display that displays vehicle driving conditions such as vehicle speed and cooling water temperature, and an information display that displays various information such as radio stations and mileage.
- the console display device 212 is provided on a center console (not shown) and is configured to display a navigation map display, a second task display, and a set temperature and set air volume of the air conditioning device 18.
- the second task is a task other than driving operation performed by the driver D, and includes, for example, reading, operating a mobile communication terminal, watching video content, etc.
- "Video content” is, for example, movies, concert videos, music videos, television broadcasts, etc.
- the second task is also called "non-driving task" or "secondary activity”.
- the HUD device 213 is configured to display a display image including letters and/or symbols in front of the driver D. That is, the HUD device 213 is configured to form a virtual display image in front of the driver D using AR technology, so that the display image is superimposed on the foreground including the road surface ahead of the vehicle. AR is an abbreviation for Augmented Reality.
- the AV device 214 is configured to be able to output music content and/or video content using the console display device 212 and the speaker 215.
- the speaker 215 performs the audio output function of the AV device 214, and is also provided to perform the audio output function for various kinds of guidance, notifications, or warnings while driving. In this way, the output device 21 is configured as an in-vehicle device that affects the vision and/or hearing of the driver D.
- the meter switch 221 is provided to be able to accept various operations related to the display state or contents of the display on the instrument panel 211, such as a trip meter reset operation.
- the console switch 222 is arranged around the console display device 212, and is provided to be able to accept operations for the air conditioning unit 18, AV device 214, etc.
- the handlebar switch 223 is arranged on the spokes of the handlebar V5, etc.
- the handlebar switch 223 is provided to be able to accept various operations related to the display state or contents of the display on the instrument panel 211 (such as changing the display items), and various operations such as volume operations on the AV device 214.
- the microphone 224 is provided to enable voice input by the driver D's voice.
- the foot condition sensor 225 is a non-contact sensor for detecting the foot condition, including the condition of the driver D's feet D4 and/or legs D5, and is provided at the top of the foot space V6.
- the foot condition sensor 225 is a so-called foot camera that captures the foot space V6 from above, and is positioned so that it includes at least the pedal V7 and its surroundings in its field of view.
- the foot condition sensor 225 is provided so as to be able to detect the position, movement, and gestures of the foot D4.
- FIG. 4 and 5 show schematic diagrams of the movement directions of the foot D4 that constitute the movement or gesture of the foot D4.
- the foot D4 can move in a stepping direction DS along the direction in which the shin D53 extends by the extension of the leg D5.
- the foot D4 can also move in a dorsi-plantar flexion direction DR along the rotation direction centered on the ankle D6. That is, the foot D4 can rotate in a dorsi-flexion direction in which the tip of the toe approaches the knee D51, and in a plantar flexion direction in which the toe moves away from the knee D51.
- the foot D4 can also move along a foot length direction DL by rotating the shin D53 along the front-to-back direction centered on the knee D51.
- the foot length direction DL is a direction that defines the length size of the foot D4 along the direction from the heel to the toes, and is perpendicular to the foot width direction DW.
- the foot length direction DL is a direction along the front-rear direction in a plan view seen from above vertically, and specifically, it is parallel to the front-rear direction or intersects with the front-rear direction at a small angle of about 20 degrees or less.
- the foot D4 can also move in the foot width direction DW.
- the foot width direction DW is the width direction of the foot D4, and it is parallel to the left-right direction or intersects with the left-right direction at a small angle of about 20 degrees or less in a plan view seen from above vertically. That is, the foot width direction DW is a direction along the left-right direction. Furthermore, as shown in FIG. 5, which shows the foot D4 viewed from above or diagonally above with a line of sight along the stepping direction DS, the foot D4 can move in a first inclined direction DD1 and a second inclined direction DD2 that intersect with the foot length direction DL and the foot width direction DW. As shown in FIG.
- the first inclination direction DD1 is the direction from the origin toward the first or third quadrant
- the second inclination direction DD2 is the direction from the origin toward the second or fourth quadrant.
- the foot condition sensor 225 is arranged to be capable of detecting the condition of the driver D's foot D4 and leg D5 and the surrounding conditions in the foot space V6.
- the “condition” of the foot D4 includes movement, orientation, footwear condition, etc.
- the “footwear condition” includes the presence or absence of footwear and, if footwear is worn, the type of footwear.
- the “type” of footwear includes sneakers, sandals, slippers, high heels, etc.
- the “condition” of the leg D5 includes movement, orientation, bending state of the joints, etc. In other words, the condition of the leg D5 includes the position, orientation, movement, and combinations thereof of the knee D51, thigh D52, and shin D53 in the leg D5.
- the "surrounding conditions" of the driver D's foot D4 and leg D5 include movement-impeding conditions that are impeding the movement of the foot D4.
- the movement-impeding conditions include the presence of an obstacle in the foot space V6, a defect in the floor mat V10, or the presence of an object adhering to the pedal V7.
- Defects with the floor mat V10 include the floor mat V10 being out of position, curled up, or out of specification (i.e., the shape or size is not suitable for the floor V9), etc.
- the "foot state” includes the state of the foot D4, that is, the position, movement, and combinations thereof of the foot D4.
- the foot state includes, for example, whether the foot D4 is on the accelerator pedal V71, on the brake pedal V72, or moving toward the accelerator pedal V71 or the brake pedal V72.
- the foot state also includes, for example, whether the foot D4 is moving from one of the accelerator pedal V71 and the brake pedal V72 to the other.
- the foot state also includes, for example, the contact position of the foot D4 on the pedal V7, that is, which position on the pedal V7 the foot D4 is stepping on.
- the foot state also includes, for example, whether the foot D4 is not wearing footwear, and if so, what type of footwear the foot is wearing.
- the foot state also includes, for example, a health state estimated from the image processing result of the foot D4.
- the "health state" of the foot D4 includes an injury or disability state.
- the “foot state” also includes the state of the leg D5, that is, the position, bending, movement, and combinations thereof of the leg D5. Specifically, the foot state includes, for example, the orientation of the shin D53. The foot state also includes, for example, a health state estimated or determined from the movement and bending of the leg D5. The "health state” of the leg D5 includes muscle pain, injury, and disability. The “foot state” also includes a combination of the state of the foot D4 and the state of the leg D5, and the state of the driver D estimated from this. Specifically, the foot state includes whether the seat position is correct, whether the foot D4 can reach the pedal V7 sufficiently, whether the driver is leaning back, etc. These can be estimated or determined based on the position and orientation of the foot D4 and the shin D53, for example.
- the HMI control device 23 has a configuration as a so-called HCU that controls the operations of the output device 21 and the input device 22 included in the HMI device 20.
- HCU is an abbreviation for HMI Control Unit.
- the HMI control device 23 has a configuration as a so-called in-vehicle microcomputer that includes a CPU, ROM, non-volatile rewritable memory, RAM, input/output interface, etc. (not shown).
- the HMI control device 23 has an input information acquisition unit 231, an operation content determination unit 232, a foot situation determination unit 233, and a control content determination unit 234 as functional configurations or functional units realized on the microcomputer.
- the input information acquisition unit 231 is adapted to acquire input information from the vehicle state sensor 11, the driving control device 17, etc. That is, the input information acquisition unit 231 is adapted to acquire information related to the driving state such as the vehicle speed, information related to the driving environment such as the outside temperature and obstacles, information related to the driving automation level or the driving mode, etc., to be displayed on the instrument panel 211, etc., in the output device 21.
- the input information acquisition unit 231 is also adapted to acquire input information from the input device 22.
- the input information acquisition unit 231 has a foot state detection unit 2311.
- the foot state detection unit 2311 is adapted to detect the foot state including the state of the driver D's foot D4 and/or leg D5 using the foot state sensor 225. That is, the foot state detection unit 2311 is adapted to recognize the position of the driver D's foot D4 and the movement or gesture of the foot D4 based on the image signal acquired from the foot state sensor 225.
- the operation content determination unit 232 is configured to determine the content of the input operation by the driver D's foot D4 based on the foot state detected by the foot state detection unit 2311.
- the foot condition determination unit 233 is configured to determine the condition around the driver D's foot D4 in the foot space V6. Specifically, the foot condition determination unit 233 is configured to determine whether or not a motion obstruction condition is occurring in the foot space V6.
- the control content determination unit 234 is configured to determine the control content of the vehicle based on the results of the determination by the operation content determination unit 232 and the foot condition determination unit 233. Specifically, the control content determination unit 234 is configured to determine the content of the operation control of each part of the vehicle based on the content of the input operation determined by the operation content determination unit 232. Furthermore, when the foot condition determination unit 233 determines that an operation obstruction condition has occurred, the control content determination unit 234 is configured to issue a warning to the driver D using the output device 21.
- the driving control device 17 controls the driving of the vehicle based on signals or information received from the vehicle state sensor 11, the external state sensor 12, the surroundings monitoring sensor 13, the locator 14, the driver state detection unit 16, and the HMI control unit 23.
- the drive system control unit 173 controls the operation of the drive source and the power transmission mechanism based on an input signal from the accelerator pedal sensor 111.
- the braking system control unit 174 controls the operation of the braking mechanism based on an input signal from the brake pedal sensor 112.
- the air conditioning unit 18, the interior lighting unit 19, and the AV unit 214 operate based on input operations from the input device 22.
- the driving control device 17 determines the execution of a selectable driving automation level according to the current position, vehicle speed, driver state, etc. of the vehicle. For example, when the in-vehicle system 1 is started without any input operation from the driver D and without any initial settings, the driving control device 17 determines the driving automation level to SAE level 1, which allows emergency automatic braking and collision mitigation control.
- the "initial settings" referred to here include the setting state of the driving automation level or driving mode saved for the next start-up when the in-vehicle system 1 was stopped last time. Therefore, for example, when automatic driving was being performed immediately before the in-vehicle system 1 was stopped last time, the driving control device 17 can determine the driving automation level to automatic driving at the time of this start-up. Also, for example, when the vehicle enters the ODD of automatic driving from outside the ODD and the driver D inputs an operation to approve the transition to automatic driving, the driving control device 17 transitions the driving automation level from the current SAE level 2 or lower to automatic driving.
- the vehicle is a so-called automatic or semi-automatic vehicle that does not require the driver D to operate the clutch with his/her left foot D42. Therefore, the driver D's left foot D42 can be moved more freely than the right foot D41 within a range that does not interfere with driving. In addition, during ACC or automatic driving, the driver D's right foot D41 can also be moved relatively freely, except when an override operation by stepping on the pedal V7 is required. In contrast, the driver D's hands D31 are required to grasp the steering wheel V5 or to place them on the steering wheel V5 to the extent that they can be grasped immediately at SAE level 2 or lower. Therefore, the driver D's feet D4, especially the left foot D42, which is unlikely to operate the pedal V7 for acceleration/deceleration operation, are suitable for performing input operations to express the driver D's intention or will.
- the foot condition detection unit 2311 detects the foot condition including the movement of the driver D's foot D4 using the foot condition sensor 225, which is a non-contact sensor. Specifically, for example, the foot condition detection unit 2311 detects gestures including the movement in the foot length direction DL along the front-rear direction and/or the foot width direction DW along the left-right direction. Typically, the foot condition detection unit 2311 detects the movement of the driver D's left foot D42 or a gesture resulting therefrom. Also, during ACC or automatic driving, the foot condition detection unit 2311 detects the movement of the driver D's right foot D41 or a gesture resulting therefrom.
- the foot condition detection unit 2311 detects the movement of the driver D's foot D4 in the stepping direction DS and dorsi-plantar flexion direction DR as shown in FIG. 4. Also, for example, the foot state detection unit 2311 detects the movement of the driver D's foot D4 in the foot length direction DL, foot width direction DW, first inclination direction DD1, and second inclination direction DD2, as shown in FIG. 5.
- the operation content determination unit 232 determines the content of the input operation based on the foot state detected by the foot state detection unit 2311. Specifically, the operation content determination unit 232 reads out the vehicle control content that corresponds to the actually detected foot state, for example, using a lookup table that describes the correspondence between the foot state and the vehicle control content. Then, the control content decision unit 234 decides the control content of the host vehicle based on the result of the determination by the operation content determination unit 232.
- the input operation using the driver D's foot D4 can be used, for example, to select a function related to driving assistance of the vehicle.
- the reciprocating movement of the driver D's left foot D42 in the first tilt direction DD1 can be associated with the operation of ACC
- the reciprocating movement in the second tilt direction DD2 can be associated with the end of ACC.
- the reciprocating movement of the driver D's left foot D42 in the foot length direction DL can be associated with a vehicle-to-vehicle shortening instruction
- the reciprocating movement in the foot width direction DW can be associated with a vehicle-to-vehicle extending instruction.
- EPB is an abbreviation for electronic parking brake.
- EPB is a function that realizes a brake holding state to maintain a stopped state.
- the input operation using the driver D's foot D4 can be used, for example, to operate the air conditioner 18.
- the action or gesture of moving the driver D's left foot D42 in a clockwise circular motion can be associated with turning on the air conditioner 18, while the opposite action or gesture can be associated with turning it off.
- engine vehicles it is usually necessary to start the engine in order to turn on the air conditioner 18.
- hybrid vehicles or plug-in hybrid vehicles even if the remaining battery charge falls below a predetermined remaining charge, it is usually necessary to start the engine in order to turn on the air conditioner 18.
- the input operation using the driver D's foot D4 can be used for operations corresponding to the operation of the interior lighting device 19 or the output device 21, for example.
- the luminance and color changes in the interior lighting device 19 or the LED or organic EL light-emitting element provided on the instrument panel 211 can be caused to occur, thereby enhancing the interior presentation effect.
- LED stands for Light-Emitting Diode.
- EL stands for Electro-Luminescence. It is also possible to perform volume control using the movement of the driver D's left foot D42.
- the movement or gesture of the driver D's right foot D41 can be used for operations for starting, selecting, switching, and ending the second task content.
- the state of the foot space V6 is important when performing input operations using various foot states as described above. That is, for example, the presence of an obstacle, a defect in the floor mat V10, or the presence of something stuck to the pedal V7 can hinder such input operations. Therefore, the foot condition determination unit 233 determines whether or not such a motion-hindering condition has occurred in the foot space V6. Then, when the foot condition determination unit 233 determines that a motion-hindering condition has occurred, the control content determination unit 234 issues a warning to the driver D using the output device 21. Such a warning can be issued, for example, using the instrument panel 211, the HUD device 213, or the speaker 215.
- Patent Document 1 discloses a technology for determining whether the driver D's foot D4 is in proximity to the pedal V7, and for controlling the system to perform a preparatory operation prior to the operation when the pedal V7 is depressed by the foot D4 when it is determined that the foot D4 is in proximity to the pedal V7.
- this technology determines whether the driver D's foot D4 is in proximity to the pedal V7 by whether communication is established by short-range communication with an IC tag using a radio receiver. Therefore, while this technology can determine whether a predetermined proximity state between the pedal V7 and the foot D4 has been achieved, it does not detect or recognize the actual movement of the driver D's foot D4, and cannot determine the posture or footwear state of the foot D4.
- the in-vehicle system 1 is configured to execute a motion control operation and/or an information presentation operation related to the driving assistance operation of the vehicle based on the foot state detected by the foot state detection unit 2311.
- this embodiment provides a technology that detects or recognizes various variations in the state of the driver's feet, making it possible to more accurately reflect the state and intentions of the driver D in driving assistance.
- the driving control device 17 executes a braking control operation or a drive control operation as a driving control operation based on the detected foot state of the driver D.
- the HMI device 20 as an information presentation device, i.e., the output device 21, executes an information presentation operation such as a warning under the control of the HMI control device 23 based on the detected foot state.
- the HMI device 20 can recognize whether the driver D has confirmed the contents of the warning by detecting a predetermined gesture made by the driver D's foot movement.
- the driving control device 17 executes the braking control operation based on the footwear state of the driver D's foot D4. That is, the driving control device 17 estimates the maximum braking amount and reaction speed depending on whether the driver D is wearing footwear or not and what type of footwear the driver D is wearing, and reflects them in the braking control. More specifically, for example, the maximum braking amount is smaller and the reaction speed is slower when the driver D is wearing high heels than when the driver D is wearing sneakers. Therefore, the driving control device 17 makes the rise of the braking amount faster and larger when the driver D is wearing high heels than when the driver D is wearing sneakers.
- the in-vehicle system 1 executes a braking control operation and a warning operation as an information presentation operation based on the position or orientation of the driver D's foot D4 or shin D53. More specifically, for example, when the seat position is not correct and the foot D4 does not reach the vehicle properly, the HMI control device 23 displays a warning on the instrument panel 211 or the HUD device 213, and notifies the driver by voice through the speaker 215.
- the driving control device 17 also changes the degree of braking from normal. That is, when the seat position is not correct and the foot D4 does not reach the vehicle properly, the brake pedal force detected by the brake pedal sensor 112 tends to be small. For this reason, in this case, the driving control device 17 increases the amount of braking compared to normal, that is, when the brake pedal V72 is pressed properly. The driving control device 17 also speeds up the braking effect when the driver D is "leaning back".
- the brake amount and the accelerator amount are changed depending on the contact position of the driver D's foot D4 on the pedal V7, that is, depending on which position on the pedal V7 the foot D4 is stepping on.
- the driver tends to step on the upper part of the accelerator pedal V71 because he or she wants to apply more force to the accelerator pedal V71.
- the driver steps on the lower part of the accelerator pedal V71, the stepping force is not easily transmitted to the accelerator pedal V71. In this way, depending on the situation, the driver may step on the upper part or the lower part of the vertically elongated accelerator pedal V71.
- the driving control device 17 changes the acceleration mode depending on the way the accelerator pedal V71 is stepped on. Specifically, for example, when the driver steps on the lower part of the accelerator pedal V71, it is preferable to control the accelerator amount in a direction that assists the accelerator amount. On the other hand, when the driver steps on the upper part of the accelerator pedal V71, it is preferable to reduce the accelerator amount if it is recognized that the accelerator operation is hasty, and to control the accelerator amount in a direction that assists the accelerator amount if not. In addition, since the brake pedal V72 cannot transmit sufficient pressure if the pedal is pressed poorly, it is preferable to control the brake pressure to be higher than normal when the pedal is pressed poorly and to notify the driver D that the pedal is pressed poorly. Furthermore, when the brake pedal V72 is pressed with the "arch of the foot” or pressed relatively quickly and strongly with the left foot D42, it is assumed that the driver has a strong intention to brake, and therefore it is preferable to control the brake pressure to be higher.
- the driving control device 17 executes a braking control operation or a drive control operation based on the health condition of the foot D4 or the leg D5 as the detected foot condition. That is, when there is a physical discomfort in the foot D4 or the leg D5, the driving control device 17 changes the threshold value in the driving support process from the normal time. This makes it possible to increase the degree of assist of the brake or accelerator, set a wider distance between vehicles, set a lower vehicle speed, or advance the start timing of the pre-crash safety system compared to the normal time.
- the HMI device 20 executes an attention-calling start operation as an information presentation operation based on the health condition of the foot D4 or the leg D5 as the detected foot condition. Specifically, for example, when there is a physical discomfort in the foot D4 or the leg D5, the HMI device 20 can call attention to keep a wider distance between vehicles or recommend using ACC or automatic driving.
- the driver D's intention to accelerate or brake can be estimated. Specifically, for example, by tracking and estimating that the foot D4 is moving toward the brake pedal V72 immediately after the accelerator pedal V71 is released, the driver D's intention to brake can be estimated. Therefore, in this specific example, the driving control device 17 executes a braking control operation or a drive control operation based on the movement of the right foot D41 of the driver D toward the accelerator pedal V71 or the brake pedal V72 as the detected foot state.
- the driving control device 17 applies brake pressure assuming that the intention to brake is strong. This makes it possible to more accurately and early output the intention to accelerate or brake to the vehicle control.
- the driver D may hesitate to use it because he/she feels uncomfortable about the timing of deceleration start.
- the driver D may feel uneasy and place his/her foot D4 on the brake pedal V72 because the ACC is canceled when the driver depresses the brake pedal V72.
- the driver D may feel uneasy and uneasy by adjusting the vehicle distance, the vehicle speed, and the deceleration start timing according to the state of the driver D's foot D4, etc.
- the driving control device 17 controls the deceleration mode, the vehicle distance, or the vehicle speed in the vehicle distance control based on the detected foot state.
- the driving control device 17 executes at least one of a process of accelerating the deceleration start timing, a process of widening the vehicle distance, and a process of lowering the vehicle speed. Which of these processes is executed can be selected according to the surrounding situation including the front of the vehicle.
- Example 7 when vehicle motion control is performed based on the detection result of the foot state, the driver D may feel discomfort or anxiety depending on the situation. Specifically, for example, in a situation during ACC, when deceleration is started by detecting that the driver D's foot D4 is moving toward the brake pedal V72, the driver D may have difficulty determining the reason for this deceleration. Therefore, when a driving control operation is performed based on the foot state, the HMI device 20 executes a notification operation to inform the driver D of the execution. This further improves the convenience of the in-vehicle system 1.
- the HMI device 20 executes a warning operation to the effect that the condition for ending the driving assistance state that does not require pedal operation by the driver D and transferring the acceleration/deceleration operation and/or braking operation to the driver D is not satisfied. This allows the driving change or driving authority transfer to be performed stably.
- vehicle control based on the detection result of foot movement can also be performed taking into account the detection result of objects around the vehicle.
- the cross traffic support is a function that notifies the driver D of the detection or suppresses starting or acceleration when a moving object such as another vehicle or pedestrian approaching from the left or right is detected when exiting a parking lot by forward driving or reverse driving or entering an intersection.
- a cross traffic alert When only the notification function is provided, it may be called a cross traffic alert.
- the moving object such as another vehicle or pedestrian approaching from the left or right is hereinafter referred to as "cross traffic".
- the driving control device 17 executes vehicle control related to collision prevention, and the HMI device 20 executes a warning operation related to collision prevention, based on the detection state of objects around the vehicle and the movement of the driver D's foot D4 as the detected foot state. Specifically, for example, if the driver D moves his right foot D41 from the brake pedal V72 toward the accelerator pedal V71 while the vehicle is stopped and cross traffic is detected in the planned direction of travel of the vehicle, the HMI device 20 issues an early cross traffic alert. In addition, the driving control device 17 prohibits the release of the EPB while it is in operation, and applies the brakes during creep driving.
- the driving control device 17 executes vehicle control regarding the erroneous accelerator operation based on the detection state of objects around the vehicle and the movement of the driver D's foot D4 as the foot state, and the HMI device 20 executes a warning operation regarding the erroneous accelerator operation. That is, when an erroneous accelerator operation is detected based on the position or movement of the driver D's foot D4 as the foot state, the driving control device 17 prohibits the release of the EPB, and the HMI device 20 executes a warning operation regarding the erroneous accelerator operation.
- the driver D may move the right foot D41 from the brake pedal V72 to the accelerator pedal V71.
- the driver D may move the right foot D41 from the brake pedal V72 to the accelerator pedal V71.
- the driving control device 17 prohibits the release of the EPB, and the HMI device 20 executes an operation to warn about the accelerator erroneous operation. This makes it possible to issue an accelerator erroneous operation countermeasure control earlier than in the conventional technology in which an alarm is issued or vehicle control intervention is performed after the accelerator erroneous operation actually occurs.
- the HMI device 20 executes an accelerator erroneous operation warning operation based on the movement of the driver D's foot D4 as the foot state during parking. Specifically, for example, when the driver D's right foot D41 reciprocates between the accelerator pedal V71 and the brake pedal V72 a predetermined number of times and then the lateral movement stops on the accelerator pedal V71 for a predetermined time, the HMI device 20 executes an accelerator erroneous operation warning operation. In addition, in this case, the driving control device 17 prohibits the release of the EPB. This makes it possible to realize the accelerator erroneous operation countermeasure control better than before.
- the driving control device 17 executes a braking control operation based on the position or posture of the driver D's left foot D42 as the detected foot state. Specifically, the driving control device 17 changes the amount of braking, for example, depending on the position or posture of the left foot D42. That is, for example, when the left foot D42 is placed on the footrest V8, the left leg D5 can brace itself, allowing the right foot D41 to firmly press on the brake pedal V72, but if the position or posture of the left foot D42 is poor, this bracing is not possible. Therefore, the driving control device 17 increases the amount of braking for the same amount of brake operation when the left foot D42 is not on the footrest V8 compared to when it is not on the footrest V8.
- the driving control device 17 changes the presence probability level for objects around the vehicle that may cause a collision based on the detected foot state. Specifically, for example, if the driving control device 17 detects that the driver D is on guard in a situation where there is an object around the vehicle but it is unclear whether it is an obstacle, the driving control device 17 determines that the object is an obstacle. In this way, by taking into account the cognitive state of the driver D when determining whether an object is present, good driving assistance is possible.
- the vehicle V equipped with the in-vehicle system 1 is not limited to a regular car.
- the vehicle V may be a large vehicle such as a cargo truck.
- the vehicle may be a three-wheeled vehicle, or a six- or eight-wheeled vehicle such as a cargo truck.
- the type of the vehicle V may be a conventional vehicle equipped with only an internal combustion engine, an electric vehicle or a fuel cell vehicle without an internal combustion engine, or a so-called hybrid vehicle.
- the shape and structure of the body V1 of the vehicle V are not limited to a box shape, i.e., a substantially rectangular shape in a plan view.
- the vehicle V there are also no particular limitations on the use of the vehicle V, the position of the driver's seat V3 and the steering wheel V5 in the vehicle width direction, the number of passengers, etc. That is, for example, the vehicle may have a configuration as a so-called "left-hand drive vehicle” that complies with the road traffic law of right-hand traffic in the United States, etc. Alternatively, for example, the vehicle may have a configuration in which passenger seats are provided on both the left and right sides of the driver's seat V3.
- the communication standard that constitutes the in-vehicle system 1 may be other than CAN (internationally registered trademark), such as FlexRay (internationally registered trademark). Furthermore, the communication standard that constitutes the in-vehicle system 1 is not limited to one type. For example, the in-vehicle system 1 may have a sub-network line that complies with a communication standard such as LIN. LIN is an abbreviation for Local Interconnect Network.
- the vehicle condition sensor 11, the external condition sensor 12, and the perimeter monitoring sensor 13 are not limited to the above examples.
- the perimeter monitoring sensor 13 may be configured to include a sonar, i.e., an ultrasonic sensor.
- the perimeter monitoring sensor 13 may include two or more types of sensors selected from a millimeter wave radar sensor, a sub-millimeter wave radar sensor, a laser radar sensor, and an ultrasonic sensor. There is no particular limit to the number of each type of sensor that is installed.
- the locator 14 is not limited to the above example.
- the locator 14 does not have to have a built-in gyro sensor and acceleration sensor.
- the inertia acquisition unit 142 may receive output signals from an angular velocity sensor and an acceleration sensor provided outside the locator 14 as the vehicle state sensor 11.
- the driving control device 17 is configured to be able to execute vehicle control operations corresponding to SAE levels 1 to 4.
- the present disclosure is not limited to such an aspect. That is, for example, the present disclosure may be suitably applied to cases where vehicle control operations corresponding to SAE levels 1 to 5 can be executed.
- the driving automation levels or categories in the present disclosure are not limited to those specified in "SAE J3016". Specifically, in "SAE J3016", the higher the driving automation level, the larger the level number.
- the present disclosure is not limited to such an aspect. That is, for example, the present disclosure may be similarly applied to a standard in which the highest driving automation level is "Level 1" and the lower the driving automation level, the larger the level number.
- the output device 21 is not limited to a configuration including an instrument panel 211, a console display device 212, and a HUD device 213. That is, for example, the instrument panel 211 and the console display device 212 may be integrated. Also, the HUD device 213 may be omitted.
- the input device 22 is also not limited to the above specific examples. That is, for example, instead of the meter switch 221 or the console switch 222, or together with these, a touch panel superimposed on the display surface of the instrument panel 211 or the console display device 212 may be used.
- a foot camera is used as the foot condition sensor 225.
- a foot camera may be a visible light camera, an infrared camera, or a combination of both.
- an ultrasonic sensor or the like may be used as the foot condition sensor 225 instead of or in addition to the foot camera.
- the present disclosure is not limited to the specific operation examples shown in the above embodiment.
- the foot length direction DL may be the front-back direction.
- the foot width direction DW may be the left-right direction.
- input operation methods other than those described above may be used depending on the foot state. Specifically, for example, the movement of the knee portion D51 may be used.
- the modified examples are also not limited to the above examples.
- all or part of one of the multiple specific examples may be combined with all or part of another one, provided that there is no technical contradiction.
- all or part of one of the multiple modified examples may be combined with all or part of another one, provided that there is no technical contradiction.
- all or part of the above specific example and all or part of the above modified example may be combined with each other, provided that there is no technical contradiction.
- a driving assistance device (1) that is mounted in a vehicle (V) to assist a driver (D) of the vehicle in driving, a foot condition detection unit (2311) that detects a foot condition including a condition of the driver's foot (D4) and/or leg (D5) using a non-contact sensor (225); Executing a motion control operation and/or an information presentation operation related to a driving assistance operation of the vehicle based on the foot state detected by the foot state detection unit.
- Driving assistance device is mounted in a vehicle (V) to assist a driver (D) of the vehicle in driving, a foot condition detection unit (2311) that detects a foot condition including a condition of the driver's foot (D4) and/or leg (D5) using a non-contact sensor (225); Executing a motion control operation and/or an information presentation operation related to a driving assistance operation of the vehicle based on the foot state detected by the foot state detection unit.
- the vehicle further includes an operation control device (17) that executes a braking control operation or a drive control operation as the motion control operation based on the foot state detected by the foot state detection unit.
- a driving assistance device according to aspect 1.
- the driving control device executes the braking control operation based on a state of footwear on the foot as the foot state detected by the foot state detection unit.
- a driving assistance device according to aspect 2.
- the driving control device executes the braking control operation based on the position or orientation of the foot or shin (D53) as the foot state detected by the foot state detection unit.
- the driving control device executes the braking control operation based on the position or posture of the left foot (D42) as the foot state detected by the foot state detection unit.
- a driving assistance device according to any one of Aspects 2 to 4.
- the driving control device executes the braking control operation or the drive control operation based on a contact position on a pedal (V7) as the foot state detected by the foot state detection unit.
- a driving assistance device according to any one of Aspects 2 to 5.
- the driving control device executes the braking control operation or the drive control operation based on the movement of the right foot (D41) toward the accelerator pedal (V71) or the brake pedal (V72) as the foot state detected by the foot state detection unit.
- a driving assistance device according to any one of Aspects 2 to 6.
- the driving control device executes the braking control operation or the drive control operation based on a health state of the foot or the leg as the foot state detected by the foot state detection unit.
- a driving assistance device according to any one of aspects 2 to 7.
- the braking control operation includes a brake pressure control operation.
- a driving assistance device according to any one of aspects 2 to 8.
- the braking control operation includes control of a deceleration mode in vehicle distance control.
- a driving assistance device according to any one of aspects 2 to 9.
- the driving control device controls a vehicle distance or a vehicle speed based on the position or movement of the foot.
- a driving assistance device according to any one of aspects 2 to 10.
- the information presentation device (21) further includes an information presentation device that executes the information presentation operation based on the foot state detected by the foot state detection unit.
- a driving assistance device according to any one of aspects 1 to 13.
- the information presentation device performs, as the information presentation operation, a notification operation for notifying the driver that the motion control operation has been executed based on the foot state.
- a driving assistance device according to aspect 14.
- the information presentation device executes a warning operation as the information presentation operation based on a position or orientation of the foot or shin (D53) as the foot state detected by the foot state detection unit.
- the information presentation device executes the warning operation to indicate that a condition for terminating a driving assistance state that does not require pedal operation by the driver and transferring an acceleration/deceleration operation and/or a braking operation to the driver is not satisfied.
- a driving assistance device according to aspect 16.
- the information presentation device executes the warning operation regarding collision prevention or erroneous accelerator operation based on a detection state of an object around the vehicle and the foot movement as the foot state. 18.
- the information presentation device executes the warning operation regarding an erroneous accelerator operation based on the foot movement as the foot state in a parking scene.
- a driving assistance device according to any one of aspects 16 to 18.
- the information presentation device executes an attention-calling operation as the information presentation operation based on a health state of the foot or the leg as the foot state detected by the foot state detection unit.
- a driving assistance device according to any one of aspects 14 to 19.
- [Point 21] changing a presence possibility level of an object with a possibility of collision around the vehicle based on the foot state detected by the foot state detection unit;
- a driving assistance device according to any one of aspects 1 to 20.
Landscapes
- Engineering & Computer Science (AREA)
- Transportation (AREA)
- Mechanical Engineering (AREA)
- Automation & Control Theory (AREA)
- Chemical & Material Sciences (AREA)
- Combustion & Propulsion (AREA)
- Physics & Mathematics (AREA)
- Mathematical Physics (AREA)
- Human Computer Interaction (AREA)
- Traffic Control Systems (AREA)
Abstract
運転支援装置(1)は、車両(V)に搭載されることで当該車両のドライバ(D)の運転を支援するように構成されている。本開示の一側面において、かかる運転支援装置は、前記ドライバの足(D4)および/または脚部(D5)の状態を含む足状態を非接触式のセンサ(225)を用いて検知する足状態検知部(2311)を備え、前記足状態検知部により検知した前記足状態に基づいて、当該車両の運転支援動作に関連する運動制御動作および/または情報提示動作を実行するように構成されている。
Description
本出願は、2023年11月27日に出願された日本特許出願番号2023-200003号に基づくもので、ここにその記載内容が参照により組み入れられる。
本開示は、車両に搭載されることで当該車両のドライバの運転を支援する、運転支援装置に関するものである。
特許文献1は、車両制御や運転支援を早期かつ迅速に行うことができる車両制御装置を提供する。かかる車両制御装置は、判定部と制御部とを備えている。判定部は、車両のペダルにドライバの足が近接したか否かを判定する。具体的には、判定部は、ブレーキペダル、クラッチペダル、アクセルペダルのそれぞれにドライバの足が近接したか否かを、電波受信機でICタグとの近距離通信による通信確立がなされたか否かにより判定する。制御部は、ペダルにドライバの足が近接したと判定された場合に、ペダルを足で踏み込んだ場合の動作の前段階の準備動作を行うように制御する。準備動作は、例えば、制動灯の点灯や、ブレーキシステムのブレーキマスタシリンダへの加圧を開始することによる制動準備や、クラッチペダルのストロークアシスト等である。
この種の装置において、ドライバの状態や意図をより的確に運転支援に反映することにより、当該装置を搭載した車両の利便性が向上する。この点、特許文献1に記載された装置において、判定部は、ドライバの靴に設けられたICタグからの電波に基づいて、ペダルにドライバの足が近接したか否かを判定している。このため、利便性の観点からは、まだまだ改善の余地がある。
本開示は、上記に例示した事情等に鑑みてなされたものである。すなわち、本開示は、例えば、ドライバの状態や意図をより的確に運転支援に反映することを可能とする技術を提供するものである。
本開示は、上記に例示した事情等に鑑みてなされたものである。すなわち、本開示は、例えば、ドライバの状態や意図をより的確に運転支援に反映することを可能とする技術を提供するものである。
運転支援装置は、車両に搭載されることで当該車両のドライバの運転を支援するように構成されている。
本開示の一側面において、運転支援装置は、
前記ドライバの足および/または脚部の状態を含む足状態を、非接触式のセンサを用いて検知する、足状態検知部を備え、
前記足状態検知部により検知した前記足状態に基づいて、当該車両の運転支援動作に関連する運動制御動作および/または情報提示動作を実行するように構成されている。
本開示の一側面において、運転支援装置は、
前記ドライバの足および/または脚部の状態を含む足状態を、非接触式のセンサを用いて検知する、足状態検知部を備え、
前記足状態検知部により検知した前記足状態に基づいて、当該車両の運転支援動作に関連する運動制御動作および/または情報提示動作を実行するように構成されている。
なお、出願書類中の各欄において、各要素に括弧付きの参照符号が付されている場合がある。この場合、参照符号は、単に、同要素と後述する実施形態に記載の具体的構成との対応関係の一例を示すものであるにすぎない。よって、本開示は、参照符号の記載によって、何ら限定されるものではない。
(実施形態)
以下、本開示の実施形態を、図面を参照しつつ説明する。なお、一つの実施形態に対して適用可能な各種の変形例の説明は、当該実施形態に関する一連の説明の途中に挿入されると、当該実施形態の理解が妨げられるおそれがある。このため、変形例については、当該実施形態に関する一連の説明の途中ではなく、その後にまとめて説明する。
以下、本開示の実施形態を、図面を参照しつつ説明する。なお、一つの実施形態に対して適用可能な各種の変形例の説明は、当該実施形態に関する一連の説明の途中に挿入されると、当該実施形態の理解が妨げられるおそれがある。このため、変形例については、当該実施形態に関する一連の説明の途中ではなく、その後にまとめて説明する。
(車両の概略構成)
図1を参照すると、本実施形態においては、車両Vは、いわゆる普通自動車であって、箱状の車体V1を有している。以下、説明の簡略化のため、図1や図2に示したように、「前」「後」「上」「下」「右」「左」の方向概念を定義する。「下」は、車両Vを走行可能な状態で水平面上に安定的に載置した場合の、重力作用方向と同一方向であり、「上」はその反対方向である。すなわち、上下方向は、車両Vを走行可能な状態で水平面上に安定的に載置した場合の、重力作用方向と平行な方向である。「前」は、車両Vが水平面上を直進で前進走行する際の進行方向であり、「後」はその反対方向である。「右」は、右手系XYZ座標系においてZ軸正方向を「上」とし且つY軸正方向を「前」とした場合のX軸正方向であり、「左」はその反対方向である。
図1を参照すると、本実施形態においては、車両Vは、いわゆる普通自動車であって、箱状の車体V1を有している。以下、説明の簡略化のため、図1や図2に示したように、「前」「後」「上」「下」「右」「左」の方向概念を定義する。「下」は、車両Vを走行可能な状態で水平面上に安定的に載置した場合の、重力作用方向と同一方向であり、「上」はその反対方向である。すなわち、上下方向は、車両Vを走行可能な状態で水平面上に安定的に載置した場合の、重力作用方向と平行な方向である。「前」は、車両Vが水平面上を直進で前進走行する際の進行方向であり、「後」はその反対方向である。「右」は、右手系XYZ座標系においてZ軸正方向を「上」とし且つY軸正方向を「前」とした場合のX軸正方向であり、「左」はその反対方向である。
本実施形態においては、車両Vは、日本国内における左側通行の道路交通法制に適合した、いわゆる「右ハンドル車」としての構成を有しているものとする。車体V1の内部空間である車室V2内には、運転席V3を含む複数の乗員座席が設けられている。運転席V3に搭乗する乗員を、以下、ドライバDと称する。運転席V3は、ドライバDの着座面を有するシートクッションV31と、ドライバDを背後から支えるシートバックV32およびヘッドレストV33とを備えている。運転席V3の前方には、ダッシュボードV4が配置されている。ダッシュボードV4から運転席V3に向けて突出するように、操舵のためのハンドルV5が設けられている。ダッシュボードV4の下方の空間である足元空間V6には、ペダルV7とフットレストV8とが設けられている。図2に示されているように、ペダルV7として、アクセルペダルV71とブレーキペダルV72とが設けられている。アクセルペダルV71は、ブレーキペダルV72よりも右側に配置されている。フットレストV8は、ブレーキペダルV72よりも左側に配置されている。すなわち、アクセルペダルV71、ブレーキペダルV72、およびフットレストV8が、この順に右から左に配列されている。足元空間V6の底部のフロアV9には、フロアマットV10が敷設されている。
図1は、ドライバDが運転席V3に運転姿勢で着座している状態を示す。「運転姿勢」とは、ドライバDがハンドルV5およびペダルV7を的確に操作可能な、運転席V3に対する適正な着座姿勢をいうものとする。かかる運転姿勢において、ドライバDの頭部D1はヘッドレストV33により後方から支えられ、胴体部D2はシートバックV32と密着する。ドライバDの腕D3は肘を若干曲げつつ前方に伸び、手D31でハンドルV5を把持する。ドライバDの足D4は、脚部D5における足首D6よりも先の部分であり、右足D41はペダルV7を操作し、左足D42は多くの場合フットレストV8上に載置される。すなわち、本実施形態における車両Vは、ドライバDの左足D42によるクラッチ操作を要しない、いわゆるオートマチック車あるいはセミオートマチック車としての構成を有している。ドライバDの脚部D5における膝部D51よりも根元側の大腿部D52は、そのほとんどの部分がシートクッションV31と密着する。足D4と膝部D51との間の部分である脛部D53は、右足D41によるペダルV7の操作や踏み替えが容易となるように、膝部D51から斜め前下方に延びた状態となる。
(車載システムの概要)
車両Vには、図3に示された車載システム1が搭載されている。車載システム1を搭載する当該車両Vを、以下「自車両」と称することがある。本実施形態においては、車載システム1は、自車両に搭載されることで、自車両のドライバDの運転を支援するように構成されている。すなわち、車載システム1は、運転支援システムとしての構成を備えている。本明細書において、「自車両のドライバDの運転を支援する」あるいは「運転支援」とは、ドライバDによる自車両の運転操作の一部または全部を、車載システム1により、補助および/または自動化することをいうものとする。すなわち、本開示における「運転支援」は、SAE Internationalが公開している規格「SAE J3016」に規定されたレベル1の運転自動化レベルに対して付与された呼称としての「運転支援」よりも広い概念となる。SAEはSociety Of Automotive Engineersの略である。
車両Vには、図3に示された車載システム1が搭載されている。車載システム1を搭載する当該車両Vを、以下「自車両」と称することがある。本実施形態においては、車載システム1は、自車両に搭載されることで、自車両のドライバDの運転を支援するように構成されている。すなわち、車載システム1は、運転支援システムとしての構成を備えている。本明細書において、「自車両のドライバDの運転を支援する」あるいは「運転支援」とは、ドライバDによる自車両の運転操作の一部または全部を、車載システム1により、補助および/または自動化することをいうものとする。すなわち、本開示における「運転支援」は、SAE Internationalが公開している規格「SAE J3016」に規定されたレベル1の運転自動化レベルに対して付与された呼称としての「運転支援」よりも広い概念となる。SAEはSociety Of Automotive Engineersの略である。
本実施形態においては、自車両は、「SAE J3016」に規定されたレベル1~4の運転自動化レベルを、走行状況およびドライバDの選択操作により実行可能に構成されている。すなわち、車載システム1は、自車両に搭載されることで、当該自車両における運転自動化システムとしての機能を奏するように構成されている。「運転自動化システム」は、「SAE J3016」に規定されたレベル1~5の少なくともいずれか1つに該当する運転自動化レベルを実現するためのシステムである。以下、「SAE J3016」に規定された各レベルの内容について説明する。「SAE J3016」におけるレベルXを、以下単に「SAEレベルX」と称する。Xは0~5のうちのいずれかである。
SAEレベル0~5の内容は、具体的には、以下に説明する通りである。なお、この説明において、ドライバDは、動的運転タスクを担当あるいは実行する乗員である。「動的運転タスク」とは、道路交通において自車両を操作する際にリアルタイムで行う必要がある全ての操作上および戦術上の機能であって、戦略上の機能を除いたものである。運転行動全般は、戦略上、戦術上、および操作上の3種類の機能に分類できる。「戦略上」の機能は、行程計画、経由地選択、等であって、具体的には、「行くか行かないか、いつどこへどのように行くか」等の行程計画を決定あるいは選択することを含む。「戦術上」の機能は、行程中、追い越しや車線変更をするかどうかやいつするかの決定、適正速度の選定、ミラーの確認等、交通局面での車両操作が関連する。「操作上」の機能は、道路車線の位置を維持するため、または、車両進路上の急な障害物や危険事象を回避するための、操舵、ブレーキ、アクセルおよび加速の操作に対する微修正を行う等の、瞬間的な反応が関係する。
「OEDR」は、Object and Event Detection and Responseの略であり、「対象物および事象の検知および応答」とも称される。OEDRには、運転環境の監視が含まれる。運転環境の監視には、対象物および事象の、検知、認識、および分類が含まれる。また、運転環境の監視には、対象物および事象に対して、必要に応じて応答する準備が含まれる。「限定領域」は、或る運転自動化システムまたはその機能が作動するように設計されている特定の条件であり、運行設計領域あるいはODDとも称される。ODDはOperational Design Domainの略である。限定領域は、例えば、地理的、環境的、速度的、および時間的等の、複数の制約条件のうちの、少なくとも1つを含む。
・SAEレベル0:手動運転…ドライバDが全ての動的運転タスクを実行する。
・SAEレベル1:運転支援…運転自動化システムが、動的運転タスクのうちの、縦方向の車両運動制御サブタスクと、横方向の車両運動制御サブタスクとのうちの、いずれか一方を、特定の限定領域において持続的に実行する。縦方向の車両運動制御サブタスクは、発進、加減速、および停止である。横方向の車両運動制御サブタスクは、操舵である。但し、運転自動化システムは、縦方向の車両運動制御サブタスクと横方向の車両運動制御サブタスクとの両方を同時には実行しない。
・レベル2:高度運転支援…運転自動化システムが、動的運転タスクのうちの、縦方向の車両運動制御サブタスクおよび横方向の車両運動制御サブタスクを、特定の限定領域において持続的に実行する。ドライバDは、動的運転タスクのサブタスクであるOEDRを実行して運転自動化システムを監督することが期待される。
・SAEレベル3:条件付自動運転…運転自動化システムが全ての動的運転タスクを特定の限定領域において持続的に実行する。原則的に、ドライバDには、周辺監視等のOEDRを実行する義務はない。周辺監視は、自車両周辺の交通環境の監視である。但し、当該運転自動化レベルが継続困難となった場合、運転自動化システムは充分な時間的余裕をもってドライバDに運転交代を要請する。ドライバDは、その要請に適切に対応する必要がある。
・SAEレベル4:高度自動運転…運転自動化システムが全ての動的運転タスクを特定の限定領域において持続的に実行する。限定領域において、当該運転自動化レベルが継続困難となった場合の対応は、運転自動化システムが実行する。
・SAEレベル5:完全自動運転…運転自動化システムが全ての動的運転タスクを、特定の限定領域に限定されず無制限に、持続的に実行する。当該運転自動化レベルが継続困難となった場合の対応も、特定の限定領域に限定されず無制限に、運転自動化システムが実行する。
・SAEレベル1:運転支援…運転自動化システムが、動的運転タスクのうちの、縦方向の車両運動制御サブタスクと、横方向の車両運動制御サブタスクとのうちの、いずれか一方を、特定の限定領域において持続的に実行する。縦方向の車両運動制御サブタスクは、発進、加減速、および停止である。横方向の車両運動制御サブタスクは、操舵である。但し、運転自動化システムは、縦方向の車両運動制御サブタスクと横方向の車両運動制御サブタスクとの両方を同時には実行しない。
・レベル2:高度運転支援…運転自動化システムが、動的運転タスクのうちの、縦方向の車両運動制御サブタスクおよび横方向の車両運動制御サブタスクを、特定の限定領域において持続的に実行する。ドライバDは、動的運転タスクのサブタスクであるOEDRを実行して運転自動化システムを監督することが期待される。
・SAEレベル3:条件付自動運転…運転自動化システムが全ての動的運転タスクを特定の限定領域において持続的に実行する。原則的に、ドライバDには、周辺監視等のOEDRを実行する義務はない。周辺監視は、自車両周辺の交通環境の監視である。但し、当該運転自動化レベルが継続困難となった場合、運転自動化システムは充分な時間的余裕をもってドライバDに運転交代を要請する。ドライバDは、その要請に適切に対応する必要がある。
・SAEレベル4:高度自動運転…運転自動化システムが全ての動的運転タスクを特定の限定領域において持続的に実行する。限定領域において、当該運転自動化レベルが継続困難となった場合の対応は、運転自動化システムが実行する。
・SAEレベル5:完全自動運転…運転自動化システムが全ての動的運転タスクを、特定の限定領域に限定されず無制限に、持続的に実行する。当該運転自動化レベルが継続困難となった場合の対応も、特定の限定領域に限定されず無制限に、運転自動化システムが実行する。
よって、SAEレベルXにおけるXの数値が大きいほど、あるいは、運転自動化システムが担当すなわち実行する動的運転タスクが増えるほど、運転自動化レベルが「高い」と表現される。また、運転自動化レベルが高い方に変化することは、運転自動化レベルの「上昇」と称される。これに対し、上記Xの数値が小さいほど、あるいは、運転自動化システムが担当すなわち実行する動的運転タスクが減るほど、運転自動化レベルが「低い」と表現される。また、運転自動化レベルが低い方に変化することは、運転自動化レベルの「低下」と称される。したがって、例えば、SAEレベル1または2において、レベル変化がなくとも、運転自動化システムが担当すなわち実行する動的運転タスクの増減により、運転自動化レベルが上昇したり低下したりすることがあり得るものとする。
車載システム1は、自車両の運転時の各種運転制御およびこれに伴う各種の報知あるいは警告の動作等を実行可能に構成されている。本実施形態においては、車載システム1は、SAEレベル3または4の自動運転と、SAEレベル2の高度運転支援と、SAEレベル1に含まれる各種のADAS関連制御とを実行可能に構成されている。ADASはAdvanced Driver-Assistance Systemsの略である。よって、本実施形態に係る車載システム1は、SAEレベル3または4の自動運転の実行中は「自動運転システム」と称され得る。以下、本明細書においては、特に補足説明しない限り、SAEレベル3または4の自動運転を単に「自動運転」と総称する。
なお、本実施形態に係る車載システム1により実行可能な高度運転支援には、いわゆる「ハンズオフ運転」が含まれる。ハンズオフ運転は、ドライバDが車載システム1からの介入要求等に対して適切に対応することを条件として、車載システム1が、自動的に、発進、操舵、加減速、車線変更、および停止の制御を実行するものである。ハンズオフ運転は、ドライバDに、ハンズオン状態は要求しないものの、自車両周辺の道路状況、交通状況、障害物の存在状態等の監視の実行をドライバDに要求する。「ハンズオン状態」とは、ドライバDが自車両の操舵すなわち横方向の車両運動制御サブタスクに干渉可能な状態であって、典型的には、ドライバDが運転姿勢で運転席V3に着座しつつハンドルV5を手D31で即座に操作可能な状態である。ハンズオン状態においては、通常、ドライバDはハンドルV5を手D31で把持しているが、手D31を添えている状態、すなわち、ドライバDの手D31が即座に把持可能な状態でハンドルV5に触れている状態も「ハンズオン状態」に該当し得る。「障害物」は、自車両が衝突回避すべき物体であって、他車両、歩行者、横臥者、建造物、バリケード、ポール、コーン、等が含まれる。「他車両」には、サイクリストすなわち乗員付きの二輪車や三輪車が含まれる。
自動運転中は、あるいは、実行中の高度運転支援の内容によっては、レッグオン状態が要求されず、レッグオフ状態が許容される。「レッグオン状態」とは、運転姿勢のドライバDの足D4がペダルV7を即座に踏み込み可能な位置に置かれた状態をいい、典型的には右足D41がペダルV7上に置かれた状態をいう。「レッグオン状態」は、ドライバDの足D4がペダルV7を踏み込んでいる状態と、踏み込んではいないがペダルV7に軽く触れている状態とを含む。これに対し、「レッグオフ状態」とは、ドライバDの足D4がペダルV7を即座に踏み込み可能な位置に置かれてはいない状態をいい、典型的には右足D41がペダルV7上に置かれていない状態をいう。具体的には、例えば、ACC作動中や、ハンズオフ運転中や、自動運転中において、レッグオフ状態が許容され、右足D41を、例えば、アクセルペダルV71の手前側や右側に置いたり、不図示のオットマンを用いて上方に浮かせたりすることが可能である。ACCは、アダプティブ・クルーズ・コントロールの略である。すなわち、ACCは、自車両の前方に先行車両が存在しない場合は自車両を目標車速で定速走行させる定速走行制御を実行し、先行車両が存在する場合は自車両を目標車速以下の車速で先行車両に追従走行させる追従走行制御を行う制御である。
(車載システムの各部の構成)
図3に示されているように、車載システム1は、車載通信回線10およびこの車載通信回線10を介して相互に接続された複数のノード等を含む車載ネットワークとしての構成を有している。この車載システム1は、CAN(国際登録商標:国際登録番号1048262A)等の所定の通信規格に準拠するように構成されている。CAN(国際登録商標)はController Area Networkの略であるものとされている。車載システム1は、車両状態センサ11と、外界状態センサ12と、周辺監視センサ13と、ロケータ14と、通信モジュール15と、ドライバ状態検出部16と、運転制御装置17と、空調装置18と、車内照明装置19と、HMI装置20とを備えている。HMIはヒューマン マシン インタフェースの略である。HMI装置20は、出力装置21と、入力装置22と、HMI制御装置23とを備えている。車両状態センサ11~車内照明装置19およびHMI制御装置23は、車載通信回線10に接続されている。出力装置21および入力装置22は、HMI制御装置23に接続されている。
図3に示されているように、車載システム1は、車載通信回線10およびこの車載通信回線10を介して相互に接続された複数のノード等を含む車載ネットワークとしての構成を有している。この車載システム1は、CAN(国際登録商標:国際登録番号1048262A)等の所定の通信規格に準拠するように構成されている。CAN(国際登録商標)はController Area Networkの略であるものとされている。車載システム1は、車両状態センサ11と、外界状態センサ12と、周辺監視センサ13と、ロケータ14と、通信モジュール15と、ドライバ状態検出部16と、運転制御装置17と、空調装置18と、車内照明装置19と、HMI装置20とを備えている。HMIはヒューマン マシン インタフェースの略である。HMI装置20は、出力装置21と、入力装置22と、HMI制御装置23とを備えている。車両状態センサ11~車内照明装置19およびHMI制御装置23は、車載通信回線10に接続されている。出力装置21および入力装置22は、HMI制御装置23に接続されている。
(各種センサ)
車両状態センサ11は、自車両の運転状態に関連する諸量に対応する出力を発生するように設けられている。「運転状態に関連する諸量」は、例えば、アクセル開度、制動操作量、シフトポジション、操舵角、等の、ドライバDまたは運転自動化システムによる運転操作状態に関連する諸量を含む。また、「運転状態に関連する諸量」は、例えば、車速、角速度、前後方向加速度、左右方向加速度、等の、自車両の挙動に関連する物理量を含む。具体的には、車両状態センサ11として、アクセルペダルセンサ111やブレーキペダルセンサ112に加えて、操舵角センサ、車輪速センサ、角速度センサ、加速度センサ、等の、車両運転制御に必要な周知のセンサ類が設けられている。車両状態センサ11は、車載通信回線10を介して、運転制御装置17等の各部に検出出力を提供可能に設けられている。
車両状態センサ11は、自車両の運転状態に関連する諸量に対応する出力を発生するように設けられている。「運転状態に関連する諸量」は、例えば、アクセル開度、制動操作量、シフトポジション、操舵角、等の、ドライバDまたは運転自動化システムによる運転操作状態に関連する諸量を含む。また、「運転状態に関連する諸量」は、例えば、車速、角速度、前後方向加速度、左右方向加速度、等の、自車両の挙動に関連する物理量を含む。具体的には、車両状態センサ11として、アクセルペダルセンサ111やブレーキペダルセンサ112に加えて、操舵角センサ、車輪速センサ、角速度センサ、加速度センサ、等の、車両運転制御に必要な周知のセンサ類が設けられている。車両状態センサ11は、車載通信回線10を介して、運転制御装置17等の各部に検出出力を提供可能に設けられている。
外界状態センサ12は、自車両の運転環境のうち、主として自然環境に関連する諸量に対応する出力を発生するように設けられている。「自然環境に関連する諸量」は、例えば、外気温、降雨量、照度、等の物理量を含む。すなわち、外界状態センサ12は、外気温センサ、雨滴センサ、照度センサ、等の周知のセンサ類を、図示および説明の簡略化のために総称したものである。外界状態センサ12は、車載通信回線10を介して、運転制御装置17等の各部に検出出力を提供可能に設けられている。
周辺監視センサ13は、自車両の運転環境のうち、主として外界状態センサ12により検知可能なもの以外を検知するように設けられている。具体的には、周辺監視センサ13は、自車両周囲の所定の検知範囲における、移動物体および静止物体を検知可能に構成されている。「移動物体」は、歩行者、サイクリスト、動物、および走行中の他車両を含む。「静止物体」は、路上落下物、ガードレール、縁石、駐停車車両、道路標識、道路標示に加えて、道路脇の構造物(例えば、壁、建物、等。)を含む。周辺監視センサ13は「ADASセンサ」とも称され得る。
本実施形態においては、周辺監視センサ13は、移動物体および静止物体を検知するための構成として、カメラ131と物体検知センサ132とを有している。カメラ131は、自車両の周囲の画像を撮影するように設けられている。本実施形態においては、カメラ131は、デジタルカメラ装置であって、CCDあるいはCMOS等の画像センサを備えている。CCDはCharge Coupled Deviceの略である。CMOSはComplementary Metal-Oxide-Semiconductorの略である。物体検知センサ132は、レーダ波を送受信するミリ波レーダセンサ、サブミリ波レーダセンサ、またはレーザレーダセンサであって、自車両における車体V1の前面部に装着されている。物体検知センサ132は、反射点の位置および相対速度に対応する信号を出力するように構成されている。「反射点」は、自車両の周囲に存在する物体の表面上における、レーダ波を反射したと推定される点である。「相対速度」は、反射点すなわちレーダ波を反射した物体の、自車両に対する相対速度である。
(ロケータ)
ロケータ14は、いわゆる複合測位により、自車両の高精度な位置情報等を取得するように構成されている。具体的には、ロケータ14は、GNSS受信器141と、慣性取得部142と、高精度地図DB143と、ロケータECU144とを有している。GNSSはGlobal Navigation Satellite Systemの略である。DBはデータベースの略である。ECUはElectronic Control Unitの略である。「高精度な位置情報」とは、例えば、SAEレベル2以上の運転自動化レベルに利用可能な程度、具体的には、誤差が10cm未満となるような程度の位置精度を有する位置情報である。
ロケータ14は、いわゆる複合測位により、自車両の高精度な位置情報等を取得するように構成されている。具体的には、ロケータ14は、GNSS受信器141と、慣性取得部142と、高精度地図DB143と、ロケータECU144とを有している。GNSSはGlobal Navigation Satellite Systemの略である。DBはデータベースの略である。ECUはElectronic Control Unitの略である。「高精度な位置情報」とは、例えば、SAEレベル2以上の運転自動化レベルに利用可能な程度、具体的には、誤差が10cm未満となるような程度の位置精度を有する位置情報である。
GNSS受信器141は、複数の測位衛星すなわち人工衛星から送信された測位信号を受信するように設けられている。本実施形態においては、GNSS受信器141は、GPS、QZSS、GLONASS、Galileo、IRNSS、北斗衛星導航系統、等の衛星測位システムのうちの少なくとも1つにおける測位衛星からの測位信号を受信可能に構成されている。GPSはGlobal Positioning Systemの略である。QZSSはQuasi-Zenith Satellite Systemの略である。GLONASSはGlobal Navigation Satellite Systemの略である。IRNSSはIndian Regional Navigation Satellite Systemの略である。
慣性取得部142は、自車両に作用する加速度および角速度を取得するように構成されている。本実施形態においては、慣性取得部142は、ロケータ14における箱状の筐体内に内蔵された3軸ジャイロセンサおよび3軸加速度センサとして設けられている。
高精度地図DB143は、高精度地図情報を書き換え可能に記憶するとともに電源遮断中にも記憶内容を保持するように、不揮発性リライタブルメモリを主体に構成されている。不揮発性リライタブルメモリは、例えば、ハードディスク、EEPROM、フラッシュROM、等である。EEPROMはElectronically Erasable and Programmable ROMの略である。ROMはRead Only Memoryの略である。高精度地図情報は、高精度地図データとも称され得る。高精度地図情報には、数メートル程度の位置誤差に対応する従来のカーナビゲーションシステムにて用いられていた地図情報よりも、高精度な地図情報が含まれている。具体的には、高精度地図DB143には、ADASIS規格等の所定の規格に準拠して、三次元道路形状情報、レーン数情報、規制情報、等の、SAEレベル2以上の運転自動化レベルに利用可能な情報が格納されている。ADASISはAdvanced Driver Assistance Systems Interface Specificationの略である。
ロケータECU144は、図示しないCPU、ROM、RAM、入出力インタフェース、等を備えた、いわゆる車載マイクロコンピュータとして構成されている。CPUはCentral Processing Unitの略である。RAMはRandom Access Memoryの略である。ロケータECU144は、GNSS受信器141にて受信した測位信号、慣性取得部142にて取得した加速度および角速度、車両状態センサ11から取得した車速、等に基づいて、自車両の位置および方角等を逐次算出するように構成されている。そして、ロケータ14は、ロケータECU144による位置および方角等の算出結果を、車載通信回線10を介して、運転制御装置17やHMI制御装置23の各部に提供可能に設けられている。
(通信モジュール)
通信モジュール15は、所定の通信規格に準拠した無線通信を用いて、自車両におけるV2X通信を実現可能に設けられている。V2XはVehicle to XあるいはVehicle to everythingの略である。通信モジュール15は、DCMとも称され得る。DCMはData Communication Moduleの略である。具体的には、例えば、通信モジュール15は、クラウド上のプローブサーバから最新の高精度地図情報を取得するように構成されている。また、通信モジュール15は、取得した最新の高精度地図情報を、ロケータECU144と連携することで、高精度地図DB143に格納するようになっている。また、通信モジュール15は、交通状況に関する情報(例えば渋滞情報等)を含む交通情報を、上記のプローブサーバおよび/または所定のデータベースから取得するように構成されている。さらに、通信モジュール15は、自車両の進行先に存在する交差点における信号機の点灯状態やその変更タイミング等を、上記のプローブサーバおよび/または所定のデータベースから取得するように構成されている。
通信モジュール15は、所定の通信規格に準拠した無線通信を用いて、自車両におけるV2X通信を実現可能に設けられている。V2XはVehicle to XあるいはVehicle to everythingの略である。通信モジュール15は、DCMとも称され得る。DCMはData Communication Moduleの略である。具体的には、例えば、通信モジュール15は、クラウド上のプローブサーバから最新の高精度地図情報を取得するように構成されている。また、通信モジュール15は、取得した最新の高精度地図情報を、ロケータECU144と連携することで、高精度地図DB143に格納するようになっている。また、通信モジュール15は、交通状況に関する情報(例えば渋滞情報等)を含む交通情報を、上記のプローブサーバおよび/または所定のデータベースから取得するように構成されている。さらに、通信モジュール15は、自車両の進行先に存在する交差点における信号機の点灯状態やその変更タイミング等を、上記のプローブサーバおよび/または所定のデータベースから取得するように構成されている。
(ドライバ状態検出部)
ドライバ状態検出部16は、ドライバ状態を検出するように設けられている。「ドライバ状態」は、自車両のドライバDの状態であり、視線方向、姿勢、挙動、心理状態、等のうちの少なくともいずれか1つを含む。具体的には、本実施形態においては、ドライバ状態検出部16は、ドライバDの顔の向き、視線方向、着座姿勢、ハンドルV5の把持状態、等を検出するようになっている。また、ドライバ状態検出部16は、ドライバ状態の検出結果を、運転制御装置17やHMI制御装置23等の各部に、車載通信回線10を介して提供可能に設けられている。
ドライバ状態検出部16は、ドライバ状態を検出するように設けられている。「ドライバ状態」は、自車両のドライバDの状態であり、視線方向、姿勢、挙動、心理状態、等のうちの少なくともいずれか1つを含む。具体的には、本実施形態においては、ドライバ状態検出部16は、ドライバDの顔の向き、視線方向、着座姿勢、ハンドルV5の把持状態、等を検出するようになっている。また、ドライバ状態検出部16は、ドライバ状態の検出結果を、運転制御装置17やHMI制御装置23等の各部に、車載通信回線10を介して提供可能に設けられている。
(運転制御装置)
運転制御装置17は、車両状態センサ11、外界状態センサ12、周辺監視センサ13、ロケータ14、等から取得した信号および情報に基づいて、自車両の加減速、操舵、等の運転制御を実行するように構成されている。本実施形態においては、運転制御装置17は、「自動運転ECU」あるいは「運転支援ECU」としての構成を有している。すなわち、運転制御装置17は、所定の運転制御動作を実行することで、自動運転機能および運転支援機能を実現するように設けられている。「所定の運転制御動作」は、本実施形態においては、SAEレベル1~3に対応する、車両制御動作すなわち動的運転タスク実行動作を含む。
運転制御装置17は、車両状態センサ11、外界状態センサ12、周辺監視センサ13、ロケータ14、等から取得した信号および情報に基づいて、自車両の加減速、操舵、等の運転制御を実行するように構成されている。本実施形態においては、運転制御装置17は、「自動運転ECU」あるいは「運転支援ECU」としての構成を有している。すなわち、運転制御装置17は、所定の運転制御動作を実行することで、自動運転機能および運転支援機能を実現するように設けられている。「所定の運転制御動作」は、本実施形態においては、SAEレベル1~3に対応する、車両制御動作すなわち動的運転タスク実行動作を含む。
運転制御装置17は、図示しないCPU、ROM、不揮発性リライタブルメモリ、RAM、入出力インタフェース、等を備えた、いわゆる車載マイクロコンピュータとしての構成を有している。具体的には、運転制御装置17は、車載マイクロコンピュータ上にて実現される機能構成あるいは機能部として、情報取得部170と、自動化レベル決定部171と、検知系制御部172と、駆動系制御部173と、制動系制御部174とを備えている。
情報取得部170は、車両状態センサ11、外界状態センサ12、周辺監視センサ13、ロケータ14、通信モジュール15、およびドライバ状態検出部16から出力された信号や情報を取得するようになっている。また、情報取得部170は、HMI制御装置23との間で信号や情報を授受するようになっている。すなわち、運転制御装置17は、これらの各部から情報取得部170にて取得した信号や情報に基づいて、自動化レベル決定部171、検知系制御部172、駆動系制御部173、および制動系制御部174を動作させるようになっている。
自動化レベル決定部171は、自車両における運転自動化レベルを、SAEレベル0~3のうちのいずれかに設定するようになっている。また、自動化レベル決定部171は、ACC等の機能の起動と停止とを切り替えるようになっている。すなわち、自動化レベル決定部171は、運転自動化に関する運転モードを決定するようになっている。そして、運転制御装置17は、自動化レベル決定部171による運転モードの決定結果を、HMI制御装置23等の各部に車載通信回線10を介して提供可能に設けられている。
検知系制御部172は、周辺監視センサ13による物体検知動作を制御するとともに、周辺監視センサ13を用いた物体検知結果に基づいて自車両の周囲の物体の存在状態を認識するようになっている。駆動系制御部173は、自車両における駆動系すなわちパワートレインの動作を制御するようになっている。すなわち、駆動系制御部173は、エンジンおよび/またはモータである駆動源の動作、および、かかる駆動源と車輪との間の動力伝達機構(例えば変速機構等)の動作を制御するようになっている。制動系制御部174は、自車両の制動機構の動作を制御するようになっている。すなわち、制動系制御部174は、摩擦ブレーキ機構における作動流体の圧力であるブレーキ圧の制御や制動力の制御等を実行するようになっている。また、制動系制御部174は、自車両が回生ブレーキ機構を備えている場合に、かかる回生ブレーキ機構の利用状態すなわちオンオフおよび効き具合を制御するようになっている。
(空調装置)
空調装置18は、車室V2内の温度を調整するように設けられている。すなわち、空調装置18は、車室V2を加温する暖房機能と、車室V2内に冷気を供給する冷房機能とを奏するように構成されている。
空調装置18は、車室V2内の温度を調整するように設けられている。すなわち、空調装置18は、車室V2を加温する暖房機能と、車室V2内に冷気を供給する冷房機能とを奏するように構成されている。
(車内照明装置)
車内照明装置19は、車室V2内の照明状態を可変設定可能に構成されている。具体的には、車内照明装置19は、いわゆるアンビエントライトを備えている。アンビエントライトは、車室V2における天井やドアトリム等に設けられ、発光色を含む発光状態を変更可能に構成されている。すなわち、車内照明装置19は、ドライバDの視覚に作用する車室内装置としての構成を有している。
車内照明装置19は、車室V2内の照明状態を可変設定可能に構成されている。具体的には、車内照明装置19は、いわゆるアンビエントライトを備えている。アンビエントライトは、車室V2における天井やドアトリム等に設けられ、発光色を含む発光状態を変更可能に構成されている。すなわち、車内照明装置19は、ドライバDの視覚に作用する車室内装置としての構成を有している。
(HMI装置)
HMI装置20は、ドライバD等の乗員からの入力操作のうちのペダルV7によるアクセル操作やブレーキ操作以外のものを受け付けるとともに、かかる乗員に向けて各種の情報またはコンテンツを視聴覚的に出力するように構成されている。具体的には、出力装置21は、インスツルメントパネル211と、コンソール表示装置212と、HUD装置213と、AV装置214と、スピーカ215とを備えている。HUDはヘッドアップディスプレイの略である。また、入力装置22は、メータスイッチ221と、コンソールスイッチ222と、ハンドルスイッチ223と、マイク224と、足元状態センサ225とを備えている。
HMI装置20は、ドライバD等の乗員からの入力操作のうちのペダルV7によるアクセル操作やブレーキ操作以外のものを受け付けるとともに、かかる乗員に向けて各種の情報またはコンテンツを視聴覚的に出力するように構成されている。具体的には、出力装置21は、インスツルメントパネル211と、コンソール表示装置212と、HUD装置213と、AV装置214と、スピーカ215とを備えている。HUDはヘッドアップディスプレイの略である。また、入力装置22は、メータスイッチ221と、コンソールスイッチ222と、ハンドルスイッチ223と、マイク224と、足元状態センサ225とを備えている。
インスツルメントパネル211は、ダッシュボードV4に設けられていて、車速や冷却水温等の車両走行状態を表示するメータディスプレイや、ラジオ受信局や走行距離等の各種情報を表示する情報ディスプレイ等を備えている。コンソール表示装置212は、不図示のセンターコンソールに設けられていて、ナビゲーション地図表示やセカンドタスク表示や空調装置18における設定温度や設定風量等を表示するように設けられている。セカンドタスクは、ドライバDが実行する、運転操作以外のタスクであって、例えば、読書、携帯通信端末操作、映像コンテンツ視聴、等が含まれる。「映像コンテンツ」は、例えば、映画、コンサート映像、ミュージックビデオ、テレビ放送、等である。セカンドタスクは、「運転外タスク」あるいは「セカンダリーアクティビティ」とも称される。HUD装置213は、ドライバDの前方に文字および/または記号を含む表示画像を表示するように設けられている。すなわち、HUD装置213は、AR技術を用いてドライバDの前方に虚像表示画像を形成することで、自車両の進行先の路面を含む前景に表示画像を重畳表示するように構成されている。ARはAugmented Realityの略である。AV装置214は、コンソール表示装置212およびスピーカ215を用いて音楽コンテンツおよび/または映像コンテンツを出力可能に構成されている。スピーカ215は、AV装置214における音声出力機能を奏するとともに、運転中の各種の案内、通知、あるいは警告のための音声出力機能をも奏するように設けられている。このように、出力装置21は、ドライバDの視覚および/または聴覚に作用する車室内装置としての構成を有している。
メータスイッチ221は、インスツルメントパネル211における表示状態あるいは表示内容に関する各種操作、例えば、トリップメータのリセット操作等を受け付け可能に設けられている。コンソールスイッチ222は、コンソール表示装置212の周囲に配置されていて、空調装置18やAV装置214等に対する操作を受け付け可能に設けられている。ハンドルスイッチ223は、ハンドルV5におけるスポーク部等に配置されている。ハンドルスイッチ223は、インスツルメントパネル211における表示状態あるいは表示内容に関する各種操作(例えば表示項目の変更等)や、AV装置214における音量操作等の各種操作を受け付け可能に設けられている。マイク224は、ドライバDの発声による音声入力を可能とするように設けられている。
足元状態センサ225は、ドライバDの足D4および/または脚部D5の状態を含む足状態を検知するための非接触式のセンサであって、足元空間V6における上部に設けられている。本実施形態においては、足元状態センサ225は、足元空間V6をその上方から写す、いわゆる足元カメラであって、少なくともペダルV7およびその周辺を視野に含むように配置されている。具体的には、足元状態センサ225は、足D4の位置、動作、およびジェスチャを検知可能に設けられている。
図4および図5は、足D4の動作あるいはジェスチャを構成する、足D4の動作方向を模式的に示す。図4に示されているように、足D4は、脚部D5の伸縮により、脛部D53が延びる方向に沿った踏込方向DSに移動し得る。また、足D4は、足首D6を中心とした回転方向に沿った背底屈方向DRに移動し得る。すなわち、足D4は、先端部である爪先が膝部D51に近づく背屈方向と、爪先が膝部D51から遠ざかる底屈方向に回動し得る。また、足D4は、膝部D51を中心とした脛部D53の前後方向に沿った回動により、足長方向DLに沿って移動し得る。足長方向DLは、踵から爪先に向かう方向に沿った、足D4の長さサイズを規定する方向であって、足幅方向DWと直交する方向である。足長方向DLは、鉛直上方から見た平面視にて、前後方向に沿った方向であり、具体的には前後方向と平行あるいは20度以下程度の小さな角度をなすように交差する。また、足D4は、足幅方向DWに移動し得る。足幅方向DWは、足D4の幅方向であり、鉛直上方から見た平面視にて左右方向と平行あるいは20度以下程度の小さな角度をなすように交差する。すなわち、足幅方向DWは、左右方向に沿った方向である。さらに、足D4を踏込方向DSに沿った視線で上方あるいは斜め上方から見た図5に示されているように、足D4は、足長方向DLおよび足幅方向DWと交差する、第一傾斜方向DD1および第二傾斜方向DD2に移動し得る。図5に示されているように、足幅方向DWを横軸とし足長方向DLを縦軸とした座標系において、第一傾斜方向DD1は原点から第一象限または第三象限に向かう方向であり、第二傾斜方向DD2は原点から第二象限または第四象限に向かう方向である。
また、足元状態センサ225は、足元空間V6における、ドライバDの足D4や脚部D5の状態や周囲の状況を検知可能に設けられている。足D4の「状態」は、動作、向き、履物の状態、等を含む。「履物の状態」は、履物の有無や、履物を履いている場合はその種類を含む。履物の「種類」は、スニーカー、サンダル、スリッパ、ハイヒール、等を含む。脚部D5の「状態」は、動作、向き、関節の曲がり状態、等を含む。すなわち、脚部D5の状態は、脚部D5における膝部D51や大腿部D52や脛部D53の位置、向き、動作、およびその組み合わせを含む。ドライバDの足D4や脚部D5の「周囲の状況」は、足D4の動作の妨げになっている動作阻害状況を含む。動作阻害状況は、足元空間V6における障害物の存在、フロアマットV10の不具合、またはペダルV7への付着物の存在を含む。フロアマットV10の不具合は、フロアマットV10の位置ずれ、めくれ、規格外(すなわちフロアV9に対する形状やサイズの不適格)、等を含む。
よって、「足状態」は、足D4の状態、すなわち、足D4の位置、動作、およびその組み合わせを含む。具体的には、足状態は、例えば、足D4が、アクセルペダルV71上にあるか、ブレーキペダルV72上にあるか、アクセルペダルV71またはブレーキペダルV72に向かって動いているか、等を含む。また、足状態は、例えば、アクセルペダルV71とブレーキペダルV72とのうちの一方から他方に向けて移動中であるかを含む。また、足状態は、例えば、足D4のペダルV7上の当接位置、すなわち、足D4がペダルV7におけるどの位置を踏んでいるかを含む。また、足状態は、例えば、足D4が履物を履いていないか、履いている場合にどの種類の履物を履いているか、等を含む。また、足状態は、例えば、足D4の画像処理結果から推定される健康状態を含む。足D4の「健康状態」は、怪我や障害の状態を含む。
また、「足状態」は、脚部D5の状態、すなわち、脚部D5の位置、曲がり具合、動作、およびそれらの組み合わせを含む。具体的には、足状態は、例えば、脛部D53の向きを含む。また、足状態は、例えば、脚部D5の動作や曲がり具合等から推定あるいは判定される健康状態を含む。脚部D5の「健康状態」は、筋肉痛や怪我や障害の状態を含む。さらに、「足状態」は、足D4の状態と脚部D5の状態との組み合わせ、および、これにより推定されるドライバDの状態をも含む。具体的には、足状態は、シートポジションが合っているか否か、足D4のペダルV7への届きが充分であるか否か、ふんぞり返っているか、等を含む。これらは、例えば、足D4や脛部D53の位置や向き等に基づいて推定あるいは判定することが可能である。
(HMI制御装置)
HMI制御装置23は、HMI装置20に含まれる出力装置21および入力装置22の動作を制御する、いわゆるHCUとしての構成を有している。HCUはHMI Control Unitの略である。HMI制御装置23は、図示しないCPU、ROM、不揮発性リライタブルメモリ、RAM、入出力インタフェース、等を備えた、いわゆる車載マイクロコンピュータとしての構成を有している。HMI制御装置23は、マイクロコンピュータ上にて実現される機能構成あるいは機能部として、入力情報取得部231と、操作内容判定部232と、足元状況判定部233と、制御内容決定部234とを有している。
HMI制御装置23は、HMI装置20に含まれる出力装置21および入力装置22の動作を制御する、いわゆるHCUとしての構成を有している。HCUはHMI Control Unitの略である。HMI制御装置23は、図示しないCPU、ROM、不揮発性リライタブルメモリ、RAM、入出力インタフェース、等を備えた、いわゆる車載マイクロコンピュータとしての構成を有している。HMI制御装置23は、マイクロコンピュータ上にて実現される機能構成あるいは機能部として、入力情報取得部231と、操作内容判定部232と、足元状況判定部233と、制御内容決定部234とを有している。
入力情報取得部231は、車両状態センサ11や運転制御装置17等からの入力情報を取得するようになっている。すなわち、入力情報取得部231は、出力装置21におけるインスツルメントパネル211等にて表示するための、車速等の運転状態に関連する情報や、外気温や障害物等の運転環境に関連する情報や、運転自動化レベルあるいは運転モードに関連する情報等を取得するようになっている。また、入力情報取得部231は、入力装置22による入力情報を取得するようになっている。本実施形態においては、入力情報取得部231は、足状態検知部2311を有している。足状態検知部2311は、ドライバDの足D4および/または脚部D5の状態を含む足状態を、足元状態センサ225を用いて検知するようになっている。すなわち、足状態検知部2311は、足元状態センサ225から取得した画像信号に基づいて、ドライバDの足D4の位置や、足D4の動作あるいはジェスチャを認識するようになっている。
操作内容判定部232は、足状態検知部2311により検知した足状態に基づいて、ドライバDの足D4による入力操作の内容を判定するようになっている。足元状況判定部233は、足元空間V6における、ドライバDの足D4の周囲の状況を判定するようになっている。具体的には、足元状況判定部233は、足元空間V6にて動作阻害状況が発生しているか否かを判定するようになっている。
制御内容決定部234は、操作内容判定部232および足元状況判定部233による判定結果に基づいて、自車両の制御内容を決定するようになっている。具体的には、制御内容決定部234は、操作内容判定部232にて判定した入力操作の内容に即して、自車両における各部の動作制御の内容を決定するようになっている。また、制御内容決定部234は、動作阻害状況が発生していると足元状況判定部233が判定した場合、出力装置21を用いてドライバDへの警告を行うようになっている。
(動作概要)
以下、本実施形態に係る構成の動作の概要、および、かかる構成により奏される効果について、各図を参照しつつ説明する。
以下、本実施形態に係る構成の動作の概要、および、かかる構成により奏される効果について、各図を参照しつつ説明する。
運転制御装置17は、車両状態センサ11、外界状態センサ12、周辺監視センサ13、ロケータ14、ドライバ状態検出部16、およびHMI制御装置23から受領した信号あるいは情報に基づいて、自車両の運転を制御する。具体的には、駆動系制御部173は、アクセルペダルセンサ111からの入力信号に基づいて、駆動源および動力伝達機構の動作を制御する。また、制動系制御部174は、ブレーキペダルセンサ112からの入力信号に基づいて、制動機構の動作を制御する。空調装置18、車内照明装置19、およびAV装置214は、入力装置22による入力操作に基づいて作動する。
さらに、運転制御装置17は、自車両の現在位置や車速やドライバ状態等に応じて選択可能な運転自動化レベルの実行を決定する。例えば、運転制御装置17は、ドライバDから何らの入力操作もなく且つ初期設定もない状態で車載システム1が起動された場合、運転自動化レベルを、緊急自動ブレーキや衝突軽減制御が利用可能なSAEレベル1に決定する。ここにいう「初期設定」とは、前回の車載システム1の停止時に次回の起動時のために保存された、運転自動化レベルあるいは運転モードの設定状態を含む。よって、例えば、前回の車載システム1の停止直前にて自動運転を実行中であった場合、運転制御装置17は、今回の起動時に、運転自動化レベルを自動運転に決定することが可能である。また、例えば、自車両が自動運転のODD外から同ODD内に進入し、且つ、ドライバDにより自動運転への移行承認の入力操作がなされた場合、運転制御装置17は、運転自動化レベルを現時点のSAEレベル2以下から自動運転に移行する。
ところで、本実施形態においては、上記の通り、自車両は、ドライバDの左足D42によるクラッチ操作を要しない、いわゆるオートマチック車あるいはセミオートマチック車である。このため、ドライバDの左足D42は、右足D41に比して、運転に支障を来さない範囲内において自由に動かすことが可能である。また、ACCや自動運転中においては、ドライバDの右足D41も、ペダルV7を踏むことによるオーバーライド操作が必要な場合を除けば、比較的自由に動かすことが可能である。これに対し、ドライバDの手D31は、SAEレベル2以下においてはハンドルV5を把持するか即座に把持できる程度にハンドルV5に添えておくことが要求される。よって、ドライバDの足D4、特に、加減速操作のためのペダルV7の操作を行う可能性が低い左足D42は、ドライバDの意図あるいは意思を表すための入力操作を行うのに好適である。
そこで、本実施形態においては、足状態検知部2311は、ドライバDの足D4の動作を含む足状態を、非接触式のセンサである足元状態センサ225を用いて検知する。具体的には、例えば、足状態検知部2311は、前後方向に沿った足長方向DLおよび/または左右方向に沿った足幅方向DWの動作を含むジェスチャを検知する。典型的には、足状態検知部2311は、ドライバDの左足D42の動作あるいはこれによるジェスチャを検知する。また、足状態検知部2311は、ACCや自動運転中においては、ドライバDの右足D41の動作あるいはこれによるジェスチャを検知する。より詳細には、例えば、足状態検知部2311は、ドライバDの足D4の動作を、図4に示されているように、踏込方向DSや背底屈方向DRについて検知する。また、例えば、足状態検知部2311は、ドライバDの足D4の動作を、図5に示されているように、足長方向DL、足幅方向DW、第一傾斜方向DD1、および第二傾斜方向DD2について検知する。
操作内容判定部232は、足状態検知部2311によって検知した足状態に基づいて、入力操作の内容を判定する。具体的には、操作内容判定部232は、例えば、足状態と車両制御内容との対応関係を記述したルックアップテーブルを用いて、実際に検知した足状態に対応する車両制御内容を読み出す。そして、制御内容決定部234は、操作内容判定部232による判定結果に基づいて、自車両の制御内容を決定する。
ドライバDの足D4を用いた入力操作は、例えば、自車両の運転支援に関する機能選択に用いることが可能である。具体的には、例えば、図5を参照すると、ドライバDの左足D42の第一傾斜方向DD1における往復動作をACCの作動に対応付ける一方、第二傾斜方向DD2における往復動作をACCの終了に対応付けることが可能である。また、ACC作動中の、ドライバDの左足D42の足長方向DLにおける往復動作を車間短縮指示に対応付ける一方、足幅方向DWにおける往復動作を車間延長指示に対応付けることが可能である。また、例えば、ドライバDが左側の脛部D53を回外して左足D42の爪先を左回りに回転させた状態で左足D42を踏み込む動作をEPB作動に対応付ける一方、これとは逆の動作をEPB解除に対応付けることが可能である。EPBは電子制御式パーキングブレーキの略である。すなわち、EPBは、停車状態を維持するためのブレーキ保持状態を実現する機能である。
ドライバDの足D4を用いた入力操作は、例えば、空調装置18に対する操作に用いることが可能である。具体的には、例えば、図5を参照すると、ドライバDの左足D42を時計回りに円を描くように動かす動作あるいはジェスチャを空調装置18のオン動作に対応付ける一方、その逆の動作あるいはジェスチャをオフ動作に対応付けることが可能である。ところで、いわゆるエンジン車においては、空調装置18をオンするためには、通常、エンジンを起動する必要がある。また、いわゆるハイブリッド車あるいはプラグインハイブリッド車において、バッテリ残量が所定残量未満となった場合も、空調装置18をオンするためには、通常、エンジンを起動する必要がある。この点、本実施形態によれば、例えば、右足D41でブレーキはかけたままでエンジンを起動して空調装置18をオンすることが可能となる。
ドライバDの足D4を用いた入力操作は、例えば、車内照明装置19や出力装置21の動作に対応する操作に用いることが可能である。具体的には、例えば、ドライバDの左足D42の背屈運動と底屈運動との繰り返しによるリズミカルな動作に応じて、車内照明装置19やインスツルメントパネル211に設けたLEDあるいは有機EL発光体における輝度変化や色彩変化を生じさせることで、車内演出効果を高めることが可能となる。LEDはLight-Emitting Diodeの略である。ELはElectro-Luminescenceの略である。また、ドライバDの左足D42の動作を用いた音量操作を行うことも可能である。さらに、自動運転中においては、セカンドタスクコンテンツの開始、選択、切り替え、および終了のための操作に、ドライバDの右足D41による動作あるいはジェスチャを用いることが可能である。
上記のような、様々な足状態を利用した入力操作にあたって、足元空間V6の状態は重要である。すなわち、例えば、障害物の存在や、フロアマットV10の不具合や、ペダルV7への付着物の存在は、かかる入力操作の妨げとなる。そこで、足元状況判定部233は、このような動作阻害状況が足元空間V6にて発生しているか否かを判定する。そして、制御内容決定部234は、動作阻害状況が発生していると足元状況判定部233が判定した場合、出力装置21を用いてドライバDへの警告を行う。かかる警告は、例えば、インスツルメントパネル211やHUD装置213やスピーカ215を用いて行われ得る。
ところで、特許文献1は、ペダルV7にドライバDの足D4が近接したか否かを判定し、ペダルV7に足D4が近接したと判定された場合に、ペダルV7を足D4で踏み込んだ場合の動作の前段階の準備動作を行うように制御する技術を開示する。しかしながら、かかる技術は、ドライバDの足D4がペダルV7に近接した状態となったか否かを、電波受信機でICタグとの近距離通信による通信確立がなされたか否かにより判定するものである。このため、かかる技術は、ペダルV7と足D4との所定の近接状態の成否は判定可能である一方、実際のドライバDの足D4の動きを検知あるいは認識しているものではなく、足D4の姿勢や履物状態までは判別できない。これに対し、本実施形態においては、車載システム1は、足状態検知部2311により検知された足状態に基づいて、自車両の運転支援動作に関連する運動制御動作および/または情報提示動作を実行するように構成されている。すなわち、本実施形態は、ドライバDの足状態を様々なバリエーションで検知あるいは認識することで、ドライバDの状態や意図をより的確に運転支援に反映することを可能とする技術を提供するものである。
具体的には、本実施形態においては、運転制御装置17は、検知されたドライバDの足状態に基づいて、運転制御動作としての制動制御動作または駆動制御動作を実行する。また、情報提示装置としてのHMI装置20すなわち出力装置21は、検知された足状態に基づいて、HMI制御装置23の制御下で警告等の情報提示動作を実行する。さらに、HMI装置20は、警告内容をドライバDが確認したか否かを、ドライバDの足動作による所定のジェスチャを検知することで認識することが可能である。以下、検知したドライバDの足状態に基づく車両制御のいくつかの具体例について説明する。但し、本開示が、かかる具体例に限定されるものではないことは、いうまでもない.
(具体例1)
本具体例においては、運転制御装置17は、ドライバDの足D4における履物状態に基づいて、制動制御動作を実行する。すなわち、運転制御装置17は、ドライバDが履物を履いているか否かや、如何なる種類の履物を履いているかに応じて、最大ブレーキ量や反応速度を推定して、制動制御に反映する。より詳細には、例えば、スニーカーを履いている場合よりも、ハイヒールを履いている場合の方が、最大ブレーキ量が小さく、反応速度が遅い。よって、運転制御装置17は、スニーカーを履いている場合よりも、ハイヒールを履いている場合の方が、ブレーキ量の立ち上がりを早く且つ大きくする。
本具体例においては、運転制御装置17は、ドライバDの足D4における履物状態に基づいて、制動制御動作を実行する。すなわち、運転制御装置17は、ドライバDが履物を履いているか否かや、如何なる種類の履物を履いているかに応じて、最大ブレーキ量や反応速度を推定して、制動制御に反映する。より詳細には、例えば、スニーカーを履いている場合よりも、ハイヒールを履いている場合の方が、最大ブレーキ量が小さく、反応速度が遅い。よって、運転制御装置17は、スニーカーを履いている場合よりも、ハイヒールを履いている場合の方が、ブレーキ量の立ち上がりを早く且つ大きくする。
(具体例2)
本具体例においては、車載システム1は、ドライバDの足D4または脛部D53の位置または向きに基づいて、制動制御動作、および、情報提示動作としての警告動作を実行する。より詳細には、例えば、シートポジションが合っておらず足D4の届きが悪い場合、HMI制御装置23は、インスツルメントパネル211やHUD装置213で警告表示を行うとともに、スピーカ215による音声での通知を実行する。また、運転制御装置17は、ブレーキのかかり具合を、通常時から変える。すなわち、シートポジションが合っておらず足D4の届きが悪い場合、ブレーキペダルセンサ112により検出されるブレーキ踏力は小さくなりがちとなる。このため、この場合、運転制御装置17は、通常時すなわちブレーキペダルV72の踏み方が適正な場合よりも、ブレーキ量を大きくする。また、運転制御装置17は、ドライバDの姿勢が「ふんぞり返っている」場合、ブレーキの効きを早くする。
本具体例においては、車載システム1は、ドライバDの足D4または脛部D53の位置または向きに基づいて、制動制御動作、および、情報提示動作としての警告動作を実行する。より詳細には、例えば、シートポジションが合っておらず足D4の届きが悪い場合、HMI制御装置23は、インスツルメントパネル211やHUD装置213で警告表示を行うとともに、スピーカ215による音声での通知を実行する。また、運転制御装置17は、ブレーキのかかり具合を、通常時から変える。すなわち、シートポジションが合っておらず足D4の届きが悪い場合、ブレーキペダルセンサ112により検出されるブレーキ踏力は小さくなりがちとなる。このため、この場合、運転制御装置17は、通常時すなわちブレーキペダルV72の踏み方が適正な場合よりも、ブレーキ量を大きくする。また、運転制御装置17は、ドライバDの姿勢が「ふんぞり返っている」場合、ブレーキの効きを早くする。
(具体例3)
本具体例は、ドライバDの足D4のペダルV7上の当接位置、すなわち、足D4がペダルV7におけるどの位置を踏んでいるかに応じて、ブレーキ量やアクセル量を変える。具体的には、例えば、急いでいるとアクセルペダルV71により力をかけたいので、上の方を踏む傾向があるのではないかと推測される。一方、アクセルペダルV71の下の方を踏んでしまうと、踏力がアクセルペダルV71に伝わりにくい。このように、状況に応じて、縦長形状のアクセルペダルV71の上の方を踏むか下の方を踏むかが異なり得る。そこで、運転制御装置17は、アクセルペダルV71の踏み方に応じて、加速態様を変える。具体的には、例えば、アクセルペダルV71の下の方を踏んでいる場合、アクセル量をアシストする方向に制御することが好適である。一方、アクセルペダルV71の上の方を踏んでいる場合、慌てたアクセル操作であるものと認識されればアクセル量を低下させ、そうでなければアクセル量をアシストする方向に制御することが好適である。また、ブレーキペダルV72も踏み方が悪いとあまり踏力を伝えられないので、踏み方が悪い場合にはブレーキ圧を踏み方が通常の場合よりも上げる制御を行うとともにドライバDに踏み方が悪い旨を通知することが好適である。さらに、ブレーキペダルV72を「土踏まず」で踏んだ場合や左足D42で比較的速く且つ強く踏んだ場合、ブレーキ意図が強いものと推測されるため、ブレーキ圧を上げる制御を行うことが好適である。
本具体例は、ドライバDの足D4のペダルV7上の当接位置、すなわち、足D4がペダルV7におけるどの位置を踏んでいるかに応じて、ブレーキ量やアクセル量を変える。具体的には、例えば、急いでいるとアクセルペダルV71により力をかけたいので、上の方を踏む傾向があるのではないかと推測される。一方、アクセルペダルV71の下の方を踏んでしまうと、踏力がアクセルペダルV71に伝わりにくい。このように、状況に応じて、縦長形状のアクセルペダルV71の上の方を踏むか下の方を踏むかが異なり得る。そこで、運転制御装置17は、アクセルペダルV71の踏み方に応じて、加速態様を変える。具体的には、例えば、アクセルペダルV71の下の方を踏んでいる場合、アクセル量をアシストする方向に制御することが好適である。一方、アクセルペダルV71の上の方を踏んでいる場合、慌てたアクセル操作であるものと認識されればアクセル量を低下させ、そうでなければアクセル量をアシストする方向に制御することが好適である。また、ブレーキペダルV72も踏み方が悪いとあまり踏力を伝えられないので、踏み方が悪い場合にはブレーキ圧を踏み方が通常の場合よりも上げる制御を行うとともにドライバDに踏み方が悪い旨を通知することが好適である。さらに、ブレーキペダルV72を「土踏まず」で踏んだ場合や左足D42で比較的速く且つ強く踏んだ場合、ブレーキ意図が強いものと推測されるため、ブレーキ圧を上げる制御を行うことが好適である。
(具体例4)
怪我や筋肉痛や障害等の身体的不調により、右足D41や右側の脚部D5によるペダル操作が通常時よりもしにくくなる場合があり得る。そこで、本具体例においては、運転制御装置17は、検知された足状態としての、足D4または脚部D5の健康状態に基づいて、制動制御動作または駆動制御動作を実行する。すなわち、運転制御装置17は、足D4または脚部D5に身体的不調がある場合、運転支援処理における閾値を通常時から変更する。これにより、通常時よりもブレーキやアクセルのアシスト度合を大きくしたり、車間を広く設定したり、車速を低く設定したり、プリクラッシュセーフティシステムの開始タイミングを早めたりすることが可能である。また、HMI装置20は、検知された足状態としての、足D4または脚部D5の健康状態に基づいて、情報提示動作としての注意喚起動作を実行する。具体的には、例えば、足D4または脚部D5に身体的不調がある場合、HMI装置20は、車間を広く取るように注意喚起したり、ACCや自動運転を使用するように勧告したりすることが可能である。
怪我や筋肉痛や障害等の身体的不調により、右足D41や右側の脚部D5によるペダル操作が通常時よりもしにくくなる場合があり得る。そこで、本具体例においては、運転制御装置17は、検知された足状態としての、足D4または脚部D5の健康状態に基づいて、制動制御動作または駆動制御動作を実行する。すなわち、運転制御装置17は、足D4または脚部D5に身体的不調がある場合、運転支援処理における閾値を通常時から変更する。これにより、通常時よりもブレーキやアクセルのアシスト度合を大きくしたり、車間を広く設定したり、車速を低く設定したり、プリクラッシュセーフティシステムの開始タイミングを早めたりすることが可能である。また、HMI装置20は、検知された足状態としての、足D4または脚部D5の健康状態に基づいて、情報提示動作としての注意喚起動作を実行する。具体的には、例えば、足D4または脚部D5に身体的不調がある場合、HMI装置20は、車間を広く取るように注意喚起したり、ACCや自動運転を使用するように勧告したりすることが可能である。
(具体例5)
実際のドライバDの足D4のペダルV7に向かう動き、例えば、アクセルペダルV71とブレーキペダルV72との間のペダル操作を検知することで、ドライバDのアクセル意図やブレーキ意図を推測することができる。具体的には、例えば、アクセルペダルV71を離した直後からブレーキペダルV72に足D4が向かっていることを追跡、推定することで、ドライバDのブレーキ意図を推測することができる。そこで、本具体例においては、運転制御装置17は、検知された足状態としての、ドライバDの右足D41におけるアクセルペダルV71またはブレーキペダルV72に向かう動きに基づいて、制動制御動作または駆動制御動作を実行する。具体的には、例えば、運転制御装置17は、アクセルペダルV71からブレーキペダルV72への移動速度が大きい場合、ブレーキ意図が強いものとして、ブレーキ圧を加圧する。これにより、アクセル意図やブレーキ意図をより正確に車両制御に早出しすることが可能となる。
実際のドライバDの足D4のペダルV7に向かう動き、例えば、アクセルペダルV71とブレーキペダルV72との間のペダル操作を検知することで、ドライバDのアクセル意図やブレーキ意図を推測することができる。具体的には、例えば、アクセルペダルV71を離した直後からブレーキペダルV72に足D4が向かっていることを追跡、推定することで、ドライバDのブレーキ意図を推測することができる。そこで、本具体例においては、運転制御装置17は、検知された足状態としての、ドライバDの右足D41におけるアクセルペダルV71またはブレーキペダルV72に向かう動きに基づいて、制動制御動作または駆動制御動作を実行する。具体的には、例えば、運転制御装置17は、アクセルペダルV71からブレーキペダルV72への移動速度が大きい場合、ブレーキ意図が強いものとして、ブレーキ圧を加圧する。これにより、アクセル意図やブレーキ意図をより正確に車両制御に早出しすることが可能となる。
(具体例6)
ACCについては、ドライバDが減速開始のタイミングに違和感を覚えるために使用を躊躇する場合がある。また、ブレーキペダルV72を踏んでしまうとACCがキャンセルされるため、不安を感じながら足D4をブレーキペダルV72上にて構えている場合がある。この点、ドライバDの足D4の動き等の状態に応じて、車間や車速や減速開始タイミングを調整することで、ドライバDの違和感や不安感を和らげることが可能となる。そこで、本具体例においては、運転制御装置17は、検知された足状態に基づいて、車間制御における減速態様、車間距離または車速を制御する。具体的には、例えば、運転制御装置17は、ACC中にドライバDの足D4がブレーキペダルV72に向かったことが検知された場合、減速開始タイミングを早める処理、車間距離を広げる処理、および車速を下げる処理のうちの、少なくとも1つを実行する。これらのいずれを実行するかは、自車両の前方を含む周囲の状況に応じて選択され得る。
ACCについては、ドライバDが減速開始のタイミングに違和感を覚えるために使用を躊躇する場合がある。また、ブレーキペダルV72を踏んでしまうとACCがキャンセルされるため、不安を感じながら足D4をブレーキペダルV72上にて構えている場合がある。この点、ドライバDの足D4の動き等の状態に応じて、車間や車速や減速開始タイミングを調整することで、ドライバDの違和感や不安感を和らげることが可能となる。そこで、本具体例においては、運転制御装置17は、検知された足状態に基づいて、車間制御における減速態様、車間距離または車速を制御する。具体的には、例えば、運転制御装置17は、ACC中にドライバDの足D4がブレーキペダルV72に向かったことが検知された場合、減速開始タイミングを早める処理、車間距離を広げる処理、および車速を下げる処理のうちの、少なくとも1つを実行する。これらのいずれを実行するかは、自車両の前方を含む周囲の状況に応じて選択され得る。
(具体例7)
上記の各具体例のように、足状態の検知結果に基づいた車両運動制御が行われた場合、状況によってはドライバDが違和感や不安感を覚える可能性がある。具体的には、例えば、ACC中の場面において、ドライバDの足D4がブレーキペダルV72に向かったことが検知されたことで減速が開始した場合、この減速が如何なる理由によるものかをドライバDは判断しづらいことがあり得る。そこで、HMI装置20は、足状態に基づいて運転制御動作が実行された場合、その旨をドライバDに知らせるための報知動作を実行する。これにより、車載システム1の利便性がさらに向上する。
上記の各具体例のように、足状態の検知結果に基づいた車両運動制御が行われた場合、状況によってはドライバDが違和感や不安感を覚える可能性がある。具体的には、例えば、ACC中の場面において、ドライバDの足D4がブレーキペダルV72に向かったことが検知されたことで減速が開始した場合、この減速が如何なる理由によるものかをドライバDは判断しづらいことがあり得る。そこで、HMI装置20は、足状態に基づいて運転制御動作が実行された場合、その旨をドライバDに知らせるための報知動作を実行する。これにより、車載システム1の利便性がさらに向上する。
(具体例8)
上記の通り、ACC中や自動運転中においては、ドライバDは状況に応じてペダルV7を即座に操作可能な状態に足D4を置くことは要求されない。一方、ACCや自動運転を終了してドライバDが自身による加減速操作や停車操作を行わなければならなくなる、いわゆる運転交代あるいは運転権限移譲の場面がある。かかる場面においては、ドライバDは、状況に応じてペダルV7を即座に操作可能な状態に足D4を置くことが要求される。具体的には、ドライバDは、かかる場面においては、通常、アクセルペダルV71またはブレーキペダルV72上に右足D41を置くことが要求される。そこで、HMI装置20は、足状態が所定状態ではない場合に、ドライバDによるペダル操作を要しない運転支援状態を終了して加減速操作および/または制動操作をドライバDに移譲するための条件が不成立である旨の警告動作を実行する。これにより、運転交代あるいは運転権限移譲が安定的に行われ得る。
上記の通り、ACC中や自動運転中においては、ドライバDは状況に応じてペダルV7を即座に操作可能な状態に足D4を置くことは要求されない。一方、ACCや自動運転を終了してドライバDが自身による加減速操作や停車操作を行わなければならなくなる、いわゆる運転交代あるいは運転権限移譲の場面がある。かかる場面においては、ドライバDは、状況に応じてペダルV7を即座に操作可能な状態に足D4を置くことが要求される。具体的には、ドライバDは、かかる場面においては、通常、アクセルペダルV71またはブレーキペダルV72上に右足D41を置くことが要求される。そこで、HMI装置20は、足状態が所定状態ではない場合に、ドライバDによるペダル操作を要しない運転支援状態を終了して加減速操作および/または制動操作をドライバDに移譲するための条件が不成立である旨の警告動作を実行する。これにより、運転交代あるいは運転権限移譲が安定的に行われ得る。
(具体例9)
上記の各具体例の記載からも明らかなように、足動作の検知結果に基づく車両制御は、自車両の周囲の物体検知結果を考慮しても行われ得る。例えば、いわゆるクロストラフィックサポートあるいはクロストラフィックアラートの場面や、アクセル誤操作時の警告あるいは加速抑制の場面があり得る。クロストラフィックサポートは、駐車場からの前進走行または後退走行による退出時や交差点への進入時にて、左右から接近する他車両や歩行者等の移動体を検知した場合に、ドライバDにその旨を報知したり発進や加速を抑制したりする機能である。報知機能のみの場合はクロストラフィックアラートと称され得る。左右から接近する他車両や歩行者等の移動体を、以下「クロストラフィック」と称する。
上記の各具体例の記載からも明らかなように、足動作の検知結果に基づく車両制御は、自車両の周囲の物体検知結果を考慮しても行われ得る。例えば、いわゆるクロストラフィックサポートあるいはクロストラフィックアラートの場面や、アクセル誤操作時の警告あるいは加速抑制の場面があり得る。クロストラフィックサポートは、駐車場からの前進走行または後退走行による退出時や交差点への進入時にて、左右から接近する他車両や歩行者等の移動体を検知した場合に、ドライバDにその旨を報知したり発進や加速を抑制したりする機能である。報知機能のみの場合はクロストラフィックアラートと称され得る。左右から接近する他車両や歩行者等の移動体を、以下「クロストラフィック」と称する。
すなわち、本具体例においては、自車両の周囲の物体の検知状態と、検知された足状態としてのドライバDの足D4の動きとに基づいて、運転制御装置17は衝突防止に関する車両制御を実行し、HMI装置20は衝突防止に関する警告動作を実行する。具体的には、例えば、停車中に自車両の進行予定方向にクロストラフィックが検知されているにもかかわらずドライバDが右足D41をブレーキペダルV72からアクセルペダルV71側に動かした場合、HMI装置20は、クロストラフィックアラートの早出しを行う。また、運転制御装置17は、EPB作動中はその解除を禁止し、クリープ走行中は制動する。
(具体例10)
本具体例においては、自車両の周囲の物体の検知状態と、足状態としてのドライバDの足D4の動きとに基づいて、運転制御装置17はアクセル誤操作に関する車両制御を実行し、HMI装置20はアクセル誤操作に関する警告動作を実行する。すなわち、足状態としてのドライバDの足D4の位置または動きに基づいてアクセル誤操作が検知された場合、運転制御装置17はEPBの解除を禁止し、HMI装置20はアクセル誤操作に関する警告動作を実行する。具体的には、例えば、自車両が輪留めで止まっており、且つ、シフトポジションが輪留めに向かう方向に走行するポジションである状況であるにもかかわらず、ドライバDが右足D41をブレーキペダルV72からアクセルペダルV71側に動かす場合があり得る。また、例えば、自車両の前方または後方に障害物等が存在しており、且つ、シフトポジションが障害物等に向かう方向に走行するポジションである状況であるにもかかわらず、ドライバDが右足D41をブレーキペダルV72からアクセルペダルV71側に動かす場合があり得る。これらの場合、運転制御装置17はEPBの解除を禁止し、HMI装置20はアクセル誤操作に関する警告動作を実行する。これにより、アクセル誤操作が実際に発生してから警報や車両制御介入がなされていた従来技術に比して、アクセル誤操作対策制御をより早出しすることが可能となる。
本具体例においては、自車両の周囲の物体の検知状態と、足状態としてのドライバDの足D4の動きとに基づいて、運転制御装置17はアクセル誤操作に関する車両制御を実行し、HMI装置20はアクセル誤操作に関する警告動作を実行する。すなわち、足状態としてのドライバDの足D4の位置または動きに基づいてアクセル誤操作が検知された場合、運転制御装置17はEPBの解除を禁止し、HMI装置20はアクセル誤操作に関する警告動作を実行する。具体的には、例えば、自車両が輪留めで止まっており、且つ、シフトポジションが輪留めに向かう方向に走行するポジションである状況であるにもかかわらず、ドライバDが右足D41をブレーキペダルV72からアクセルペダルV71側に動かす場合があり得る。また、例えば、自車両の前方または後方に障害物等が存在しており、且つ、シフトポジションが障害物等に向かう方向に走行するポジションである状況であるにもかかわらず、ドライバDが右足D41をブレーキペダルV72からアクセルペダルV71側に動かす場合があり得る。これらの場合、運転制御装置17はEPBの解除を禁止し、HMI装置20はアクセル誤操作に関する警告動作を実行する。これにより、アクセル誤操作が実際に発生してから警報や車両制御介入がなされていた従来技術に比して、アクセル誤操作対策制御をより早出しすることが可能となる。
(具体例11)
鋭意調査の結果、アクセル誤操作は、駐車シーンでドライバDがスムーズに駐車できずにアクセル操作とブレーキ操作とを頻繁に切り替えている状況において発生することが多いことが判明した。そこで、本具体例においては、HMI装置20は、駐車シーンでの足状態としての、ドライバDの足D4の動きに基づいて、アクセル誤操作に関する警告動作を実行する。具体的には、例えば、ドライバDの右足D41が所定回数アクセルペダルV71とブレーキペダルV72との間で往復してから横方向の動きがアクセルペダルV71上にて所定時間停止した場合、HMI装置20は、アクセル誤操作に関する警告動作を実行する。また、この場合、運転制御装置17は、EPBの解除を禁止する。これにより、アクセル誤操作対策制御を、従来よりも良好に実現することが可能となる。
鋭意調査の結果、アクセル誤操作は、駐車シーンでドライバDがスムーズに駐車できずにアクセル操作とブレーキ操作とを頻繁に切り替えている状況において発生することが多いことが判明した。そこで、本具体例においては、HMI装置20は、駐車シーンでの足状態としての、ドライバDの足D4の動きに基づいて、アクセル誤操作に関する警告動作を実行する。具体的には、例えば、ドライバDの右足D41が所定回数アクセルペダルV71とブレーキペダルV72との間で往復してから横方向の動きがアクセルペダルV71上にて所定時間停止した場合、HMI装置20は、アクセル誤操作に関する警告動作を実行する。また、この場合、運転制御装置17は、EPBの解除を禁止する。これにより、アクセル誤操作対策制御を、従来よりも良好に実現することが可能となる。
(具体例12)
例えば、坂道における駐車シーンや、コインパーキングにおけるロック板等の小突起を乗り越えるシーンにおいて、クリープ走行では自車両がうまく進行せず、アクセル操作が難しい場合がある。そこで、本具体例においては、これらのシーンにて、ドライバDの右足D41がアクセルペダルV71上に載置されていることが検知された場合、運転制御装置17は、アクセルペダルV71の踏み込み状態にかかわらず、クリープ速度で当該車両を進行させる。「クリープ速度」とは、0を超え徐行車速範囲内の極低速状態であって、より詳細には5km/h程度である。これにより、これらのシーンにおける自車両の挙動が良好に安定化する。
例えば、坂道における駐車シーンや、コインパーキングにおけるロック板等の小突起を乗り越えるシーンにおいて、クリープ走行では自車両がうまく進行せず、アクセル操作が難しい場合がある。そこで、本具体例においては、これらのシーンにて、ドライバDの右足D41がアクセルペダルV71上に載置されていることが検知された場合、運転制御装置17は、アクセルペダルV71の踏み込み状態にかかわらず、クリープ速度で当該車両を進行させる。「クリープ速度」とは、0を超え徐行車速範囲内の極低速状態であって、より詳細には5km/h程度である。これにより、これらのシーンにおける自車両の挙動が良好に安定化する。
(具体例13)
上記の各具体例においては、通常ペダルV7を操作する側の足D4である右足D41に関する足動作に基づく車両制御について説明した。一方、ペダルV7を操作しない足D4すなわち左足D42の挙動を捉えることで、ブレーキ意図やアクセル意図やリスク認識状況を推定可能となり、ブレーキ加圧タイミング、ACCにおける車速制御、ペダル誤操作対策、外界センシングサポート等に活用可能となる。
上記の各具体例においては、通常ペダルV7を操作する側の足D4である右足D41に関する足動作に基づく車両制御について説明した。一方、ペダルV7を操作しない足D4すなわち左足D42の挙動を捉えることで、ブレーキ意図やアクセル意図やリスク認識状況を推定可能となり、ブレーキ加圧タイミング、ACCにおける車速制御、ペダル誤操作対策、外界センシングサポート等に活用可能となる。
そこで、本具体例においては、運転制御装置17は、検知された足状態としての、ドライバDの左足D42の位置または姿勢に基づいて、制動制御動作を実行する。具体的には、運転制御装置17は、例えば、左足D42の位置または姿勢に応じて、ブレーキ量を変える。すなわち、例えば、フットレストV8に左足D42を置いた状態では左側の脚部D5による踏ん張りが効くため、右足D41でブレーキペダルV72をしっかり踏むことができるが、左足D42の位置や姿勢が悪いと踏ん張りが効かない。そこで、運転制御装置17は、左足D42がフットレストV8上にある場合よりも、ない場合の方が、同一のブレーキ操作量に対するブレーキ量を大きくする。
また、本具体例においては、運転制御装置17は、検知された足状態に基づいて、自車両の周囲における衝突可能性のある物体についての存在可能性レベルを変更する。具体的には、例えば、運転制御装置17は、自車両の周囲に何らかの物体が存在するものの障害物であるか否か判然としない状況において、ドライバDが身構えていると検知された場合、かかる物体を障害物として判定する。このように、物体の判定地にドライバDの認知状態を加味してサポートすることで、良好な運転支援が可能となる。
(変形例)
本開示は、上記実施形態に限定されるものではない。故に、上記実施形態に対しては、適宜変更が可能である。以下、代表的な変形例について説明する。以下の変形例の説明においては、上記実施形態との相違点を主として説明する。また、上記実施形態と変形例とにおいて、相互に同一または均等である部分には、同一符号が付されている。したがって、以下の変形例の説明において、上記実施形態と同一の符号を有する構成要素に関しては、技術的矛盾または特段の追加説明なき限り、上記実施形態における説明が適宜援用され得る。
本開示は、上記実施形態に限定されるものではない。故に、上記実施形態に対しては、適宜変更が可能である。以下、代表的な変形例について説明する。以下の変形例の説明においては、上記実施形態との相違点を主として説明する。また、上記実施形態と変形例とにおいて、相互に同一または均等である部分には、同一符号が付されている。したがって、以下の変形例の説明において、上記実施形態と同一の符号を有する構成要素に関しては、技術的矛盾または特段の追加説明なき限り、上記実施形態における説明が適宜援用され得る。
本開示は、上記実施形態にて示された具体的な装置構成に何ら限定されるものではない。例えば、車載システム1を搭載する車両Vは、普通自動車に限定されない。具体的には、かかる車両Vは、貨物トラック等の大型自動車であってもよい。車輪数についても特段の限定はなく、三輪自動車であってもよいし、貨物トラック等の六輪または八輪自動車でもよい。車両Vの種類は、内燃機関のみを備えたコンベンショナル自動車であってもよいし、内燃機関を備えない電気自動車または燃料電池車であってもよいし、いわゆるハイブリッド車であってもよい。車両Vにおける車体V1の形状および構造も、箱状すなわち平面視における略矩形状に限定されない。車両Vの用途、運転席V3やハンドルV5の車幅方向における位置、乗員数、等についても、特段の限定はない。すなわち、例えば、自車両は、米国等における右側通行の道路交通法制に適合した、いわゆる「左ハンドル車」としての構成を有していてもよい。あるいは、例えば、自車両は、運転席V3の左右両側に乗員用の座席が設けられた構成を有していてもよい。
車載システム1を構成する通信規格としては、CAN(国際登録商標)以外のもの、例えば、FlexRay(国際登録商標)等も採用され得る。また、車載システム1を構成する通信規格は、一種類に限定されない。例えば、車載システム1は、LIN等の通信規格に準拠したサブネットワーク回線を有していてもよい。LINはLocal Interconnect Networkの略である。
車両状態センサ11、外界状態センサ12、および周辺監視センサ13についても、上記の例示に限定されない。例えば、周辺監視センサ13は、ソナーすなわち超音波センサを含んだ構成であってもよい。あるいは、周辺監視センサ13は、ミリ波レーダセンサ、サブミリ波レーダセンサ、レーザレーダセンサ、および超音波センサのうちの2種類以上を備えていてもよい。各種センサの設置個数についても特段の限定はない。
ロケータ14についても、上記の例示に限定されない。例えば、ロケータ14は、ジャイロセンサおよび加速度センサを内蔵した構成ではなくてもよい。具体的には、慣性取得部142は、車両状態センサ11としてロケータ14の外部に設けられた角速度センサおよび加速度センサからの出力信号を受信するようになっていてもよい。
上記実施形態において、運転制御装置17は、SAEレベル1~4に対応する車両制御動作を実行可能に構成されている。しかしながら、本開示は、かかる態様に限定されない。すなわち、例えば、本開示は、SAEレベル1~5に対応する車両制御動作を実行可能な場合にも、好適に適用され得る。また、本開示における運転自動化のレベルあるいはカテゴリも、「SAE J3016」に規定されたものに限定されない。具体的には、「SAE J3016」においては、運転自動化レベルが高いほど、レベル数値が大きくなるように規定されている。しかしながら、本開示は、かかる態様に限定されない。すなわち、例えば、最高の運転自動化レベルを「レベル1」として、運転自動化レベルが低下するほどレベル数値が大きくなるように規定された規格に対しても、本開示は同様に適用され得る。
出力装置21は、インスツルメントパネル211とコンソール表示装置212とHUD装置213とを備えた構成に限定されない。すなわち、例えば、インスツルメントパネル211とコンソール表示装置212とは、一体化され得る。また、HUD装置213は、省略され得る。入力装置22も、上記の具体例に何ら限定されない。すなわち、例えば、メータスイッチ221やコンソールスイッチ222に代えて、あるいはこれらとともに、インスツルメントパネル211やコンソール表示装置212における表示面と重畳配置されるタッチパネルが用いられ得る。
上記実施形態は、足元状態センサ225として足元カメラを用いていた。かかる足元カメラは、可視光カメラでもよいし、赤外線カメラでもよいし、両者を併用してもよい。但し、本開示は、かかる態様に限定されない。すなわち、足元状態センサ225として、足元カメラに代えて、あるいはこれとともに、超音波センサ等が用いられ得る。
本開示は、上記実施形態にて示された具体的な動作例に何ら限定されるものではない。例えば、図5において、足長方向DLは前後方向であってもよい。また、足幅方向DWは左右方向であってもよい。また、足状態による入力操作方法は、上記以外のものも用いられ得る。具体的には、例えば、膝部D51の動作も用いられ得る。
「取得」「算出」「推定」「検出」「検知」「決定」等の類似の表現は、技術的に矛盾しない範囲内において、相互に適宜置換可能である。「検出」あるいは「検知」と「抽出」とも、技術的に矛盾しない範囲内において、適宜置換可能である。
上記実施形態を構成する要素は、特に必須であると明示した場合および原理的に明らかに必須であると考えられる場合等を除き、必ずしも必須のものではないことは言うまでもない。また、構成要素の個数、数値、量、範囲等の数値が言及されている場合、特に必須であると明示した場合および原理的に明らかに特定の数に限定される場合等を除き、その特定の数に本開示が限定されることはない。同様に、構成要素等の形状、方向、位置関係等が言及されている場合、特に必須であると明示した場合および原理的に特定の形状、方向、位置関係等に限定される場合等を除き、その形状、方向、位置関係等に本開示が限定されることはない。
変形例も、上記の例示に限定されない。例えば、複数の具体例のうちの1つにおける全部または一部と、他の1つにおける全部または一部とが、技術的に矛盾しない限り、互いに組み合わされ得る。組み合わせる数についても特段の限定はない。同様に、複数の変形例のうちの1つにおける全部または一部と、他の1つにおける全部または一部とが、技術的に矛盾しない限り、互いに組み合わされ得る。さらに、上記具体例の全部または一部と、上記変形例の全部または一部とが、技術的に矛盾しない限り、互いに組み合わされ得る。
(開示の観点)
上記の通りの実施形態および変形例についての説明から明らかなように、本明細書には、少なくとも以下の開示事項が開示されている。
[観点1]
車両(V)に搭載されることで当該車両のドライバ(D)の運転を支援する、運転支援装置(1)であって、
前記ドライバの足(D4)および/または脚部(D5)の状態を含む足状態を、非接触式のセンサ(225)を用いて検知する、足状態検知部(2311)を備え、
前記足状態検知部により検知した前記足状態に基づいて、当該車両の運転支援動作に関連する運動制御動作および/または情報提示動作を実行する、
運転支援装置。
[観点2]
前記足状態検知部により検知した前記足状態に基づいて、前記運動制御動作としての制動制御動作または駆動制御動作を実行する、運転制御装置(17)をさらに備えた、
観点1に記載の運転支援装置。
[観点3]
前記運転制御装置は、前記足状態検知部により検知した前記足状態としての、前記足における履物の状態に基づいて、前記制動制御動作を実行する、
観点2に記載の運転支援装置。
[観点4]
前記運転制御装置は、前記足状態検知部により検知した前記足状態としての、前記足または脛部(D53)の位置または向きに基づいて、前記制動制御動作を実行する、
観点2または3に記載の運転支援装置。
[観点5]
前記運転制御装置は、前記足状態検知部により検知した前記足状態としての、左足(D42)の位置または姿勢に基づいて、前記制動制御動作を実行する、
観点2~4のいずれか1つに記載の運転支援装置。
[観点6]
前記運転制御装置は、前記足状態検知部により検知した前記足状態としての、ペダル(V7)上の当接位置に基づいて、前記制動制御動作または前記駆動制御動作を実行する、
観点2~5のいずれか1つに記載の運転支援装置。
[観点7]
前記運転制御装置は、前記足状態検知部により検知した前記足状態としての、右足(D41)におけるアクセルペダル(V71)またはブレーキペダル(V72)に向かう動きに基づいて、前記制動制御動作または前記駆動制御動作を実行する、
観点2~6のいずれか1つに記載の運転支援装置。
[観点8]
前記運転制御装置は、前記足状態検知部により検知した前記足状態としての、前記足または前記脚部の健康状態に基づいて、前記制動制御動作または前記駆動制御動作を実行する、
観点2~7のいずれか1つに記載の運転支援装置。
[観点9]
前記制動制御動作は、ブレーキ圧の制御動作を含む、
観点2~8のいずれか1つに記載の運転支援装置。
[観点10]
前記制動制御動作は、車間制御における減速態様の制御を含む、
観点2~9のいずれか1つに記載の運転支援装置。
[観点11]
前記運転制御装置は、前記足の位置または動きに基づいて、車間距離または車速を制御する、
観点2~10のいずれか1つに記載の運転支援装置。
[観点12]
前記運転制御装置は、前記足状態としての前記足の位置または動きに基づいてアクセル誤操作が検知された場合、停車状態を維持するためのブレーキ保持状態の解除を禁止する、
観点2~11のいずれか1つに記載の運転支援装置。
[観点13]
前記運転制御装置は、坂道における駐車シーン、または、小突起の乗り越えシーンにて、右足(D41)がアクセルペダル(V71)上に載置されていることが検知された場合、前記アクセルペダルの踏み込み状態にかかわらず、0を超え徐行車速範囲内の極低速状態で当該車両を進行させる、
観点2~12のいずれか1つに記載の運転支援装置。
[観点14]
前記足状態検知部により検知した前記足状態に基づいて前記情報提示動作を実行する、情報提示装置(21)をさらに備えた、
観点1~13のいずれか1つに記載の運転支援装置。
[観点15]
前記情報提示装置は、前記情報提示動作として、前記足状態に基づいて前記運動制御動作が実行されたことを前記ドライバに知らせる報知動作を実行する、
観点14に記載の運転支援装置。
[観点16]
前記情報提示装置は、前記足状態検知部により検知した前記足状態としての、前記足または脛部(D53)の位置または向きに基づいて、前記情報提示動作としての警告動作を実行する、
観点14または15に記載の運転支援装置。
[観点17]
前記情報提示装置は、前記足状態が所定状態ではない場合に、前記ドライバによるペダル操作を要しない運転支援状態を終了して加減速操作および/または制動操作を前記ドライバに移譲するための条件が不成立である旨の前記警告動作を実行する、
観点16に記載の運転支援装置。
[観点18]
前記情報提示装置は、当該車両の周囲の物体の検知状態と、前記足状態としての前記足の動きとに基づいて、衝突防止またはアクセル誤操作に関する前記警告動作を実行する、
観点16または17に記載の運転支援装置。
[観点19]
前記情報提示装置は、駐車シーンでの前記足状態としての前記足の動きに基づいて、アクセル誤操作に関する前記警告動作を実行する、
観点16~18のいずれか1つに記載の運転支援装置。
[観点20]
前記情報提示装置は、前記足状態検知部により検知した前記足状態としての、前記足または前記脚部の健康状態に基づいて、前記情報提示動作としての注意喚起動作を実行する、
観点14~19のいずれか1つに記載の運転支援装置。
[観点21]
前記足状態検知部により検知した前記足状態に基づいて、当該車両の周囲における衝突可能性のある物体についての存在可能性レベルを変更する、
観点1~20のいずれか1つに記載の運転支援装置。
上記の通りの実施形態および変形例についての説明から明らかなように、本明細書には、少なくとも以下の開示事項が開示されている。
[観点1]
車両(V)に搭載されることで当該車両のドライバ(D)の運転を支援する、運転支援装置(1)であって、
前記ドライバの足(D4)および/または脚部(D5)の状態を含む足状態を、非接触式のセンサ(225)を用いて検知する、足状態検知部(2311)を備え、
前記足状態検知部により検知した前記足状態に基づいて、当該車両の運転支援動作に関連する運動制御動作および/または情報提示動作を実行する、
運転支援装置。
[観点2]
前記足状態検知部により検知した前記足状態に基づいて、前記運動制御動作としての制動制御動作または駆動制御動作を実行する、運転制御装置(17)をさらに備えた、
観点1に記載の運転支援装置。
[観点3]
前記運転制御装置は、前記足状態検知部により検知した前記足状態としての、前記足における履物の状態に基づいて、前記制動制御動作を実行する、
観点2に記載の運転支援装置。
[観点4]
前記運転制御装置は、前記足状態検知部により検知した前記足状態としての、前記足または脛部(D53)の位置または向きに基づいて、前記制動制御動作を実行する、
観点2または3に記載の運転支援装置。
[観点5]
前記運転制御装置は、前記足状態検知部により検知した前記足状態としての、左足(D42)の位置または姿勢に基づいて、前記制動制御動作を実行する、
観点2~4のいずれか1つに記載の運転支援装置。
[観点6]
前記運転制御装置は、前記足状態検知部により検知した前記足状態としての、ペダル(V7)上の当接位置に基づいて、前記制動制御動作または前記駆動制御動作を実行する、
観点2~5のいずれか1つに記載の運転支援装置。
[観点7]
前記運転制御装置は、前記足状態検知部により検知した前記足状態としての、右足(D41)におけるアクセルペダル(V71)またはブレーキペダル(V72)に向かう動きに基づいて、前記制動制御動作または前記駆動制御動作を実行する、
観点2~6のいずれか1つに記載の運転支援装置。
[観点8]
前記運転制御装置は、前記足状態検知部により検知した前記足状態としての、前記足または前記脚部の健康状態に基づいて、前記制動制御動作または前記駆動制御動作を実行する、
観点2~7のいずれか1つに記載の運転支援装置。
[観点9]
前記制動制御動作は、ブレーキ圧の制御動作を含む、
観点2~8のいずれか1つに記載の運転支援装置。
[観点10]
前記制動制御動作は、車間制御における減速態様の制御を含む、
観点2~9のいずれか1つに記載の運転支援装置。
[観点11]
前記運転制御装置は、前記足の位置または動きに基づいて、車間距離または車速を制御する、
観点2~10のいずれか1つに記載の運転支援装置。
[観点12]
前記運転制御装置は、前記足状態としての前記足の位置または動きに基づいてアクセル誤操作が検知された場合、停車状態を維持するためのブレーキ保持状態の解除を禁止する、
観点2~11のいずれか1つに記載の運転支援装置。
[観点13]
前記運転制御装置は、坂道における駐車シーン、または、小突起の乗り越えシーンにて、右足(D41)がアクセルペダル(V71)上に載置されていることが検知された場合、前記アクセルペダルの踏み込み状態にかかわらず、0を超え徐行車速範囲内の極低速状態で当該車両を進行させる、
観点2~12のいずれか1つに記載の運転支援装置。
[観点14]
前記足状態検知部により検知した前記足状態に基づいて前記情報提示動作を実行する、情報提示装置(21)をさらに備えた、
観点1~13のいずれか1つに記載の運転支援装置。
[観点15]
前記情報提示装置は、前記情報提示動作として、前記足状態に基づいて前記運動制御動作が実行されたことを前記ドライバに知らせる報知動作を実行する、
観点14に記載の運転支援装置。
[観点16]
前記情報提示装置は、前記足状態検知部により検知した前記足状態としての、前記足または脛部(D53)の位置または向きに基づいて、前記情報提示動作としての警告動作を実行する、
観点14または15に記載の運転支援装置。
[観点17]
前記情報提示装置は、前記足状態が所定状態ではない場合に、前記ドライバによるペダル操作を要しない運転支援状態を終了して加減速操作および/または制動操作を前記ドライバに移譲するための条件が不成立である旨の前記警告動作を実行する、
観点16に記載の運転支援装置。
[観点18]
前記情報提示装置は、当該車両の周囲の物体の検知状態と、前記足状態としての前記足の動きとに基づいて、衝突防止またはアクセル誤操作に関する前記警告動作を実行する、
観点16または17に記載の運転支援装置。
[観点19]
前記情報提示装置は、駐車シーンでの前記足状態としての前記足の動きに基づいて、アクセル誤操作に関する前記警告動作を実行する、
観点16~18のいずれか1つに記載の運転支援装置。
[観点20]
前記情報提示装置は、前記足状態検知部により検知した前記足状態としての、前記足または前記脚部の健康状態に基づいて、前記情報提示動作としての注意喚起動作を実行する、
観点14~19のいずれか1つに記載の運転支援装置。
[観点21]
前記足状態検知部により検知した前記足状態に基づいて、当該車両の周囲における衝突可能性のある物体についての存在可能性レベルを変更する、
観点1~20のいずれか1つに記載の運転支援装置。
Claims (21)
- 車両(V)に搭載されることで当該車両のドライバ(D)の運転を支援する、運転支援装置(1)であって、
前記ドライバの足(D4)および/または脚部(D5)の状態を含む足状態を、非接触式のセンサ(225)を用いて検知する、足状態検知部(2311)を備え、
前記足状態検知部により検知した前記足状態に基づいて、当該車両の運転支援動作に関連する運動制御動作および/または情報提示動作を実行する、
運転支援装置。 - 前記足状態検知部により検知した前記足状態に基づいて、前記運動制御動作としての制動制御動作または駆動制御動作を実行する、運転制御装置(17)をさらに備えた、
請求項1に記載の運転支援装置。 - 前記運転制御装置は、前記足状態検知部により検知した前記足状態としての、前記足における履物の状態に基づいて、前記制動制御動作を実行する、
請求項2に記載の運転支援装置。 - 前記運転制御装置は、前記足状態検知部により検知した前記足状態としての、前記足または脛部(D53)の位置または向きに基づいて、前記制動制御動作を実行する、
請求項2に記載の運転支援装置。 - 前記運転制御装置は、前記足状態検知部により検知した前記足状態としての、左足(D42)の位置または姿勢に基づいて、前記制動制御動作を実行する、
請求項2に記載の運転支援装置。 - 前記運転制御装置は、前記足状態検知部により検知した前記足状態としての、ペダル(V7)上の当接位置に基づいて、前記制動制御動作または前記駆動制御動作を実行する、
請求項2に記載の運転支援装置。 - 前記運転制御装置は、前記足状態検知部により検知した前記足状態としての、右足(D41)におけるアクセルペダル(V71)またはブレーキペダル(V72)に向かう動きに基づいて、前記制動制御動作または前記駆動制御動作を実行する、
請求項2に記載の運転支援装置。 - 前記運転制御装置は、前記足状態検知部により検知した前記足状態としての、前記足または前記脚部の健康状態に基づいて、前記制動制御動作または前記駆動制御動作を実行する、
請求項2に記載の運転支援装置。 - 前記制動制御動作は、ブレーキ圧の制御動作を含む、
請求項2に記載の運転支援装置。 - 前記制動制御動作は、車間制御における減速態様の制御を含む、
請求項2に記載の運転支援装置。 - 前記運転制御装置は、前記足の位置または動きに基づいて、車間距離または車速を制御する、
請求項2に記載の運転支援装置。 - 前記運転制御装置は、前記足状態としての前記足の位置または動きに基づいてアクセル誤操作が検知された場合、停車状態を維持するためのブレーキ保持状態の解除を禁止する、
請求項2に記載の運転支援装置。 - 前記運転制御装置は、坂道における駐車シーン、または、小突起の乗り越えシーンにて、右足(D41)がアクセルペダル(V71)上に載置されていることが検知された場合、前記アクセルペダルの踏み込み状態にかかわらず、0を超え徐行車速範囲内の極低速状態で当該車両を進行させる、
請求項2に記載の運転支援装置。 - 前記足状態検知部により検知した前記足状態に基づいて前記情報提示動作を実行する、情報提示装置(21)をさらに備えた、
請求項1に記載の運転支援装置。 - 前記情報提示装置は、前記情報提示動作として、前記足状態に基づいて前記運動制御動作が実行されたことを前記ドライバに知らせる報知動作を実行する、
請求項14に記載の運転支援装置。 - 前記情報提示装置は、前記足状態検知部により検知した前記足状態としての、前記足または脛部(D53)の位置または向きに基づいて、前記情報提示動作としての警告動作を実行する、
請求項14に記載の運転支援装置。 - 前記情報提示装置は、前記足状態が所定状態ではない場合に、前記ドライバによるペダル操作を要しない運転支援状態を終了して加減速操作および/または制動操作を前記ドライバに移譲するための条件が不成立である旨の前記警告動作を実行する、
請求項16に記載の運転支援装置。 - 前記情報提示装置は、当該車両の周囲の物体の検知状態と、前記足状態としての前記足の動きとに基づいて、衝突防止またはアクセル誤操作に関する前記警告動作を実行する、
請求項16または17に記載の運転支援装置。 - 前記情報提示装置は、駐車シーンでの前記足状態としての前記足の動きに基づいて、アクセル誤操作に関する前記警告動作を実行する、
請求項16に記載の運転支援装置。 - 前記情報提示装置は、前記足状態検知部により検知した前記足状態としての、前記足または前記脚部の健康状態に基づいて、前記情報提示動作としての注意喚起動作を実行する、
請求項14に記載の運転支援装置。 - 前記足状態検知部により検知した前記足状態に基づいて、当該車両の周囲における衝突可能性のある物体についての存在可能性レベルを変更する、
請求項1に記載の運転支援装置。
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2023-200003 | 2023-11-27 | ||
| JP2023200003 | 2023-11-27 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| WO2025115658A1 true WO2025115658A1 (ja) | 2025-06-05 |
Family
ID=95897798
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| PCT/JP2024/040695 Pending WO2025115658A1 (ja) | 2023-11-27 | 2024-11-15 | 運転支援装置 |
Country Status (1)
| Country | Link |
|---|---|
| WO (1) | WO2025115658A1 (ja) |
Citations (13)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2005053384A (ja) * | 2003-08-06 | 2005-03-03 | Daihatsu Motor Co Ltd | 衝突回避装置 |
| JP2008110670A (ja) * | 2006-10-31 | 2008-05-15 | Advanced Telecommunication Research Institute International | 緊急状態検出装置 |
| JP2009146185A (ja) * | 2007-12-14 | 2009-07-02 | Fujitsu Ten Ltd | 疲労度判定装置 |
| JP2009208750A (ja) * | 2008-03-06 | 2009-09-17 | Mitsubishi Motors Corp | 制動支援装置 |
| JP2012179936A (ja) * | 2011-02-28 | 2012-09-20 | Denso Corp | アクセルペダル誤操作対応装置およびアクセルペダル誤操作対応装置用のプログラム |
| JP2013169829A (ja) * | 2012-02-17 | 2013-09-02 | Mitsubishi Motors Corp | 運転支援装置 |
| JP2016097885A (ja) * | 2014-11-25 | 2016-05-30 | 株式会社ユーシン | 車両走行操作装置 |
| CN105857075A (zh) * | 2016-05-11 | 2016-08-17 | 东风汽车公司 | 汽车疲劳驾驶安全防护系统及方法 |
| JP2019089546A (ja) * | 2015-05-14 | 2019-06-13 | 本田技研工業株式会社 | 自動運転制御装置 |
| US20200086873A1 (en) * | 2018-09-17 | 2020-03-19 | Honda Motor Co., Ltd. | Monitoring driver movement |
| CN113954847A (zh) * | 2020-07-20 | 2022-01-21 | 宝能汽车集团有限公司 | 检测驾驶员鞋子的方法及装置、车辆和存储介质 |
| WO2023032291A1 (ja) * | 2021-09-01 | 2023-03-09 | 株式会社デンソー | ブレーキペダル装置およびブレーキシステム |
| JP2023110269A (ja) * | 2022-01-28 | 2023-08-09 | 株式会社デンソーテン | 車載装置および車載装置の制御方法 |
-
2024
- 2024-11-15 WO PCT/JP2024/040695 patent/WO2025115658A1/ja active Pending
Patent Citations (13)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2005053384A (ja) * | 2003-08-06 | 2005-03-03 | Daihatsu Motor Co Ltd | 衝突回避装置 |
| JP2008110670A (ja) * | 2006-10-31 | 2008-05-15 | Advanced Telecommunication Research Institute International | 緊急状態検出装置 |
| JP2009146185A (ja) * | 2007-12-14 | 2009-07-02 | Fujitsu Ten Ltd | 疲労度判定装置 |
| JP2009208750A (ja) * | 2008-03-06 | 2009-09-17 | Mitsubishi Motors Corp | 制動支援装置 |
| JP2012179936A (ja) * | 2011-02-28 | 2012-09-20 | Denso Corp | アクセルペダル誤操作対応装置およびアクセルペダル誤操作対応装置用のプログラム |
| JP2013169829A (ja) * | 2012-02-17 | 2013-09-02 | Mitsubishi Motors Corp | 運転支援装置 |
| JP2016097885A (ja) * | 2014-11-25 | 2016-05-30 | 株式会社ユーシン | 車両走行操作装置 |
| JP2019089546A (ja) * | 2015-05-14 | 2019-06-13 | 本田技研工業株式会社 | 自動運転制御装置 |
| CN105857075A (zh) * | 2016-05-11 | 2016-08-17 | 东风汽车公司 | 汽车疲劳驾驶安全防护系统及方法 |
| US20200086873A1 (en) * | 2018-09-17 | 2020-03-19 | Honda Motor Co., Ltd. | Monitoring driver movement |
| CN113954847A (zh) * | 2020-07-20 | 2022-01-21 | 宝能汽车集团有限公司 | 检测驾驶员鞋子的方法及装置、车辆和存储介质 |
| WO2023032291A1 (ja) * | 2021-09-01 | 2023-03-09 | 株式会社デンソー | ブレーキペダル装置およびブレーキシステム |
| JP2023110269A (ja) * | 2022-01-28 | 2023-08-09 | 株式会社デンソーテン | 車載装置および車載装置の制御方法 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US11008016B2 (en) | Display system, display method, and storage medium | |
| CN114655237B (zh) | 驾驶转换控制装置以及驾驶转换控制方法 | |
| US11194326B2 (en) | Vehicle control system, vehicle control method, and storage medium storing vehicle control program | |
| JP6540983B2 (ja) | 車両制御システム、車両制御方法、および車両制御プログラム | |
| JP6847094B2 (ja) | 車両制御システム、車両制御方法、および車両制御プログラム | |
| US20170334453A1 (en) | Vehicle control system, vehicle control method, and vehicle control program product | |
| US20190041652A1 (en) | Display system, display method, and program | |
| CN112660154A (zh) | 车辆控制系统 | |
| JP6877571B2 (ja) | 表示システム、表示方法、およびプログラム | |
| JP7586270B2 (ja) | 車両用渋滞判断装置、および車両用表示制御装置 | |
| WO2017187622A1 (ja) | 車両制御システム、車両制御方法、および車両制御プログラム | |
| JP2017165289A (ja) | 車両制御システム、車両制御方法、および車両制御プログラム | |
| JPWO2017183077A1 (ja) | 車両制御システム、車両制御方法、および車両制御プログラム | |
| JP6840035B2 (ja) | 車両制御システム | |
| JP7423837B2 (ja) | 自動運転車用情報提示装置 | |
| JP7035447B2 (ja) | 車両制御装置 | |
| WO2017158764A1 (ja) | 車両制御システム、車両制御方法、および車両制御プログラム | |
| JP7311295B2 (ja) | 制御装置、制御方法及びプログラム | |
| JP2023139314A (ja) | 提示制御装置および提示制御プログラム | |
| US20210171065A1 (en) | Autonomous driving vehicle information presentation apparatus | |
| US20210171060A1 (en) | Autonomous driving vehicle information presentation apparatus | |
| US20210170942A1 (en) | Autonomous driving vehicle information presentation apparatus | |
| JP2022152607A (ja) | 運転支援装置、運転支援方法、及びプログラム | |
| CN110281925B (zh) | 行驶控制装置、车辆以及行驶控制方法 | |
| JP2021107772A (ja) | 車両用報知装置、車両用報知方法及びプログラム |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| 121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 24897345 Country of ref document: EP Kind code of ref document: A1 |
|
| ENP | Entry into the national phase |
Ref document number: 2025561009 Country of ref document: JP Kind code of ref document: A |
|
| WWE | Wipo information: entry into national phase |
Ref document number: 2025561009 Country of ref document: JP |