WO2017187759A1 - 支援システム、携帯端末、及び車載装置 - Google Patents
支援システム、携帯端末、及び車載装置 Download PDFInfo
- Publication number
- WO2017187759A1 WO2017187759A1 PCT/JP2017/007589 JP2017007589W WO2017187759A1 WO 2017187759 A1 WO2017187759 A1 WO 2017187759A1 JP 2017007589 W JP2017007589 W JP 2017007589W WO 2017187759 A1 WO2017187759 A1 WO 2017187759A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- driver
- vehicle
- display
- mobile terminal
- unit
- Prior art date
Links
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W50/08—Interaction between the driver and the control system
- B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/16—Anti-collision systems
Definitions
- the present disclosure relates to a support system, a portable terminal, and an in-vehicle device that support execution of a driver operation that is at least one of an operation, a response, and a confirmation by a driver that is necessary during automatic driving.
- Patent Document 1 discloses a technique for notifying from a liquid crystal display or the like of a navigation device when switching from automatic operation to manual operation.
- Patent Document 1 may make it difficult for the driver to notice the notification from the navigation device because the driver is absorbed in the operation of the mobile terminal. is there. Therefore, it is delayed to notice the notification of switching from the automatic operation to the manual operation, and there arises a problem that it is difficult to smoothly perform the operation change from the automatic operation to the manual operation.
- An object of the present invention is to provide a driving change support system, a portable terminal, and an in-vehicle device that make it possible to perform the operation more smoothly.
- the support system performs automatic driving for automatically controlling acceleration, braking, and steering, and is a driver that is at least one of operation, answer, and confirmation by the driver during the automatic driving.
- An in-vehicle device used in a vehicle that may require operation, and a portable terminal that is carried by the driver of the vehicle and that communicates with the in-vehicle device.
- Either the in-vehicle device or the mobile terminal includes an operation determination unit that determines whether or not the mobile terminal is being operated.
- the portable terminal is required during the automatic driving when the driver operation is required during the automatic driving and the portable terminal is determined to be in operation by the operation determining unit.
- a display unit for displaying support to support the execution of the driver operation.
- the mobile terminal carried by the driver of the vehicle performs automatic driving for automatically controlling acceleration, braking, and steering, and the operation, answer, and confirmation by the driver during the automatic driving.
- a request notification indicating that the driver operation is necessary when the driver operation is required in the automatic driving and used in the vehicle.
- a communication unit that communicates by connecting to an in-vehicle device to be transmitted, an operation determination unit that determines whether or not the own terminal is in operation when the request notification is received by the communication unit, and the operation determination unit
- a display unit that performs support display for supporting the execution of the driver operation that is necessary during the automatic driving when it is determined that the mobile terminal is being operated.
- an in-vehicle device that is used in a vehicle that can be connected and communicates with a mobile terminal carried by a driver of the vehicle is a case where the driver operation is required during the automatic driving, and When the mobile terminal can be connected, a determination information acquisition unit that acquires determination information from the mobile terminal that can determine whether the mobile terminal is being operated, and the determination information acquired by the determination information acquisition unit An operation determination unit that determines whether or not the mobile terminal is in operation based on information, and the operation determination unit determines that the mobile terminal is in operation. An instruction to perform a support indication that assist in performing the driver operation is required and a command processing section for transmitting to the portable terminal.
- the driver operation that is at least one of the operation, the answer, and the confirmation by the driver is required at the time of automatic driving, and the mobile terminal operates
- the portable terminal performs a support display indicating that the execution of the driver operation necessary during the automatic driving is supported. Since the portable terminal is carried by the driver of the vehicle, it is brought into the vehicle during automatic driving. Further, since the support display is performed on the mobile terminal when it is determined that the mobile terminal is being operated, the support display can be noticed even when the driver is concerned with the operation of the mobile terminal during automatic driving. Therefore, even when the driver is operating the mobile terminal brought into the vehicle, the driver's operation that is at least one of the operation, answer, and confirmation by the driver required during automatic driving is more performed. It will be possible to perform smoothly.
- FIG. 1 is a diagram illustrating an example of a schematic configuration of a support system
- FIG. 2 is a diagram illustrating an example of a schematic configuration of the vehicle-side unit.
- FIG. 3 is a diagram illustrating an example of a schematic configuration of the HCU.
- FIG. 4 is a flowchart showing an example of the flow of processing related to necessity of operation in the HCU in the first embodiment.
- FIG. 5 is a diagram illustrating an example of a schematic configuration of a mobile terminal.
- FIG. 6 is a diagram illustrating an example of support display in the first embodiment.
- FIG. 7 is a diagram illustrating an example of support display according to the first embodiment.
- FIG. 1 is a diagram illustrating an example of a schematic configuration of a support system
- FIG. 2 is a diagram illustrating an example of a schematic configuration of the vehicle-side unit.
- FIG. 3 is a diagram illustrating an example of a schematic configuration of the HCU.
- FIG. 4 is a flowchart showing an example
- FIG. 8 is a flowchart showing an example of a flow of request response processing in the mobile terminal 2.
- FIG. 9 is a diagram illustrating an example of the support display in the first modification.
- FIG. 10 is a diagram illustrating an example of the support display in the first modification.
- FIG. 11 is a flowchart showing an example of the flow of processing related to necessity of operation in the HCU 11 in Modification 1.
- FIG. 12 is a diagram illustrating an example of support display in the second modification.
- FIG. 13 is a diagram illustrating an example of support display in the second modification.
- FIG. 14 is a diagram illustrating an example of support display in the fourth modification.
- FIG. 15 is a diagram illustrating an example of support display in the fourth modification.
- FIG. 16 is a diagram illustrating an example of support display in the fifth modification example.
- FIG. 17 is a diagram illustrating an example of support display in the fifth modification example.
- FIG. 18 is a diagram for explaining an example of the display mode when the display timings of a plurality of types of support information overlap.
- FIG. 19 is a diagram illustrating an example of a schematic configuration of the support system.
- FIG. 20 is a diagram illustrating an example of a schematic configuration of the vehicle-side unit.
- FIG. 21 is a diagram illustrating an example of a schematic configuration of the HCU.
- FIG. 22 is a diagram illustrating an example of a schematic configuration of a mobile terminal.
- FIG. 23 is a diagram illustrating an example of a schematic configuration of a mobile terminal,
- FIG. 24 is a diagram illustrating an example of a schematic configuration of the HCU.
- the support system 3 includes a vehicle side unit 1 and a portable terminal 2.
- the vehicle-side unit 1 is mounted on a vehicle HV that performs automatic driving for automatically controlling acceleration, braking, and steering, and communicates with the mobile terminal 2. It is assumed that the vehicle HV is an automobile and can be switched between automatic driving and manual driving in which a driver manually performs a driving operation.
- the portable terminal 2 is carried by a driver of the vehicle HV, and is brought into the vehicle HV when the driver gets on the vehicle HV.
- the mobile terminal 2 may be any terminal that can be carried by the driver and has a display function.
- a multi-function mobile phone a tablet terminal, a notebook PC, an electronic book terminal, and a smart watch can be used.
- a case where a multifunctional mobile phone such as a smartphone is used as the mobile terminal 2 will be described as an example.
- the vehicle-side unit 1 is mounted on an autonomous driving vehicle, and as shown in FIG. 2, an HMI (Human Machine Interface) system 10, a communication device 20, an ADAS (Advanced Driver Assistance Systems).
- a locator 30, a vehicle control ECU 40, a periphery monitoring sensor 50, and an automatic operation ECU 60 are included.
- the HMI system 10, the communication device 20, the ADAS locator 30, the vehicle control ECU 40, and the automatic driving ECU 60 are connected to an in-vehicle LAN, for example, and can exchange information with each other by communication.
- the communication device 20 performs direct communication (hereinafter, short-range wireless communication) with the mobile terminal 2 in accordance with the short-range wireless communication standard.
- the range of short-range wireless communication may be, for example, about a radius of less than 1 m.
- the communication device 20 may be configured to transmit and receive signals in accordance with short-range wireless communication standards such as Bluetooth (registered trademark) and ZigBee (registered trademark).
- short-range wireless communication standards such as Bluetooth (registered trademark) and ZigBee (registered trademark).
- Bluetooth registered trademark
- ZigBee registered trademark
- signals are transmitted and received in accordance with Bluetooth standards. An example will be described. From the viewpoint of reducing power consumption, it is more preferable that a signal is transmitted and received in accordance with the Bluetooth ⁇ Low Energy standard.
- the following description will be made on the assumption that pairing between the mobile terminal 2 carried by the driver of the vehicle HV and the communication device 20 has been executed.
- the communication device 20 When the communication device 20 is connected to the portable terminal 2, the information acquired from the portable terminal 2 is output to the in-vehicle LAN, or the information transmitted from the HCU 11 is transmitted to the portable terminal 2 via the in-vehicle LAN. To do.
- the ADAS locator 30 includes a GNSS (Global Navigation Satellite System) receiver 31, an inertial sensor 32, and a map database (hereinafter referred to as DB) 33 storing map data.
- the GNSS receiver 31 receives positioning signals from a plurality of artificial satellites.
- the inertial sensor 32 includes, for example, a triaxial gyro sensor and a triaxial acceleration sensor.
- the map DB 33 is a nonvolatile memory, and stores map data such as link data, node data, road shapes, and structures.
- the ADAS locator 30 sequentially measures the vehicle position of the vehicle HV equipped with the ADAS locator 30 by combining the positioning signal received by the GNSS receiver 31 and the measurement result of the inertial sensor 32. In addition, it is good also as a structure which uses the travel distance calculated
- the ADAS locator 30 also reads map data from the map DB 33 and outputs it to the in-vehicle LAN.
- the map data may be obtained from the outside of the vehicle HV using an in-vehicle communication module such as DCM mounted on the vehicle.
- the vehicle control ECU 40 is an electronic control device that performs acceleration / deceleration control and steering control of the vehicle HV.
- the vehicle control ECU 40 includes a steering ECU that performs steering control, a power unit control ECU that performs acceleration / deceleration control, a brake ECU, and the like.
- the vehicle control ECU 40 acquires detection signals output from sensors such as an accelerator position sensor, a brake pedal force sensor, a rudder angle sensor, and a wheel speed sensor mounted on the vehicle HV, and performs electronic control throttle, brake actuator, EPS (Electric Power Steering) Outputs control signals to each travel control device such as a motor. Further, the vehicle control ECU 40 can output detection signals of the above-described sensors to the in-vehicle LAN.
- the periphery monitoring sensor 50 detects obstacles such as moving objects such as pedestrians, animals other than humans, bicycles, motorcycles, and other vehicles, and falling objects on the road, guardrails, curbs, and stationary objects such as trees. In addition, road markings such as travel lane markings and stop lines are detected.
- the peripheral monitoring sensor 50 is, for example, a peripheral monitoring camera that captures a predetermined range around the vehicle HV, a millimeter wave radar that transmits an exploration wave to the predetermined range around the vehicle HV, sonar, LIDAR (Light Detection and Ranging / Laser Imaging Detect ion and Ranging).
- the periphery monitoring camera As the periphery monitoring camera, a configuration using a stereo camera or a configuration using a monocular camera may be used.
- the peripheral monitoring camera sequentially outputs captured images that are sequentially captured to the automatic operation ECU 60 as sensing information.
- a sensor that transmits an exploration wave such as sonar, millimeter wave radar, or LIDAR sequentially outputs a scanning result based on a received signal obtained when a reflected wave reflected by an obstacle is received as sensing information to the automatic operation ECU 60.
- the automatic driving ECU 60 recognizes the traveling environment of the vehicle from the vehicle position and map data of the vehicle acquired from the ADAS locator 30, the sensing information acquired from the surrounding monitoring sensor 50, and the like. Based on the recognized driving environment, the automatic driving ECU 60 generates a driving plan for driving the vehicle by automatic driving. For example, a recommended route for directing the vehicle to the destination is generated as a medium- to long-term travel plan. Also, a short-term travel plan for traveling according to the recommended route is generated. As a specific example, execution of steering for lane change, acceleration / deceleration for speed adjustment, steering and braking for obstacle avoidance, and the like is determined.
- the automatic driving ECU 60 performs driving operation substitution by the driver by causing the vehicle control ECU 40 to automatically perform acceleration, braking, and / or steering of the own vehicle according to the generated travel plan. Further, it is assumed that the automatic driving ECU 60 can switch whether or not automatic driving is performed.
- the failure to perform automatic driving means that the driver operates all the main control systems such as the brake, steering, throttle, and driving force of the vehicle without performing automation. That is, manual operation.
- the automatic driving ECU 60 is configured to perform the automatic driving non-execution switching autonomously according to the end of driving in the automatic driving section, the recognized driving environment, the sensing failure in the peripheral monitoring sensor 50, or the like. do it. In addition, it may be configured to be performed according to an input operation by a driver to the operation device 12 to be described later.
- the HMI system 10 includes an HCU (Human Machine Interface Control Unit) 11, an operation device 12, a blinker switch 13, a display device 14, and an audio output device 15. An input operation is accepted or information is presented to the driver of the vehicle HV.
- HCU Human Machine Interface Control Unit
- the operation device 12 is a switch group operated by a driver of the vehicle HV.
- the operation device 12 is used for performing various settings.
- the operation device 12 there are a steering switch provided in a spoke portion of the steering of the own vehicle, a touch switch integrated with the display device 14, and the like.
- the winker switch 13 is a switch for detecting an operation of a winker lever that is an operation member for performing a lamp lighting operation of the direction indicator, and outputs a winker signal at the time of turning right or left according to the operation of the winker lever.
- the display device 14 presents information by displaying text and / or images. Examples of the display device 14 include a combination meter, CID (Center Information Display), and HUD (Head-Up Display).
- the audio output device 15 presents information by outputting audio. Examples of the audio output device 15 include an audio speaker.
- the HCU 11 includes a CPU, a volatile memory, a nonvolatile memory, an I / O, and a bus that connects these, and executes various processes by executing a control program stored in the nonvolatile memory.
- the HCU 11 causes the display device 14 and / or the audio output device 15 to present information.
- some or all of the functions executed by the HCU 11 may be configured by hardware using one or a plurality of ICs. Details of the HCU 11 will be described below.
- the HCU 11 includes a connection determination unit 111, a necessity determination unit 112, a transmission processing unit 113, a reception processing unit 114, and a presentation control unit 115.
- the connection determination unit 111 monitors the state of the communication device 20 and determines whether the mobile terminal 2 can be connected.
- the necessity determination unit 112 monitors the automatic driving ECU 60 and determines whether or not a driver operation that is at least one of an operation, a response, and a confirmation by the driver is required during the automatic driving.
- the automatic operation ECU 60 switches from automatic operation to manual operation, and when driving operation by the driver is necessary, a case where it is determined that driver operation is necessary is taken as an example. The following explanation will be given. If the necessity determination unit 112 determines that it is necessary, the necessity determination unit 112 outputs a request notification indicating that the driver operation is necessary to the transmission processing unit 113.
- a request notification indicating that a driving operation by the driver is necessary is output to the transmission processing unit 113.
- the request notification may be configured to include the contents of the necessary driver operation.
- the driver operation here is a driving operation by the driver required for switching to manual driving.
- the transmission processing unit 113 outputs information to the communication device 20 to transmit information from the communication device 20 to the mobile terminal 2.
- the transmission processing unit 113 acquires a request notification from the necessity determination unit 112
- the transmission processing unit 113 outputs the request notification to the communication device 20 and causes the communication device 20 to transmit the request notification to the mobile terminal 2.
- This transmission processing unit 113 corresponds to a notification processing unit.
- the communication device 20 When the communication device 20 obtains the request notification from the transmission processing unit 113 and is connected to the mobile terminal 2, the communication device 20 transmits the request notification to the mobile terminal 2. On the other hand, if the mobile terminal 2 is not connected, the connection is attempted, and if the connection is successful, a request notification is transmitted to the mobile terminal 2, and if the connection fails, the request notification is not transmitted to the mobile terminal 2.
- the portable terminal 2 receives this request notification from the communication device 20, the portable terminal 2 determines whether or not the portable terminal 2 is being operated, and a determination result whether or not the portable terminal 2 is being operated (hereinafter referred to as portable operation information). ) To the communication device 20.
- the communication device 20 may be configured to identify and connect to the mobile terminal 2 and transmit a request notification even if the communication device 20 can be connected to a communication terminal other than the mobile terminal 2. For example, even when a connection with a communication terminal other than the mobile terminal 2 is being established, if the connection with the mobile terminal 2 is possible, the connection with the communication terminal other than the mobile terminal 2 is stopped and the connection with the mobile terminal 2 is made. May be configured to transmit. In this case, by registering identification information such as the ID of the portable terminal 2 of the driver in the communication device 20, only the registered portable terminal 2 may be a target for transmitting a request notification.
- a configuration including the communication device 20 and the HCU 11 corresponds to an in-vehicle device.
- the communication device 20 may transmit a request notification to all connectable communication terminals including the mobile terminal 2 without specifying the mobile terminal 2.
- the HCU 11 corresponds to an in-vehicle device.
- the reception processing unit 114 acquires the portable operation information and outputs it to the presentation control unit 115.
- the presentation control unit 115 presents information that supports the execution of the driver operation necessary during automatic driving according to conditions (hereinafter referred to as support). Presentation).
- the display device 14 and / or the audio output device 15 provide support presentation.
- the connection determination unit 111 determines that the mobile terminal 2 can be connected, and the mobile operation information acquired by the reception processing unit 114 indicates that the mobile terminal 2 is not being operated.
- support presentation is performed by the display device 14 and / or the audio output device 15.
- the mobile operation information acquired by the reception processing unit 114 indicates that the mobile terminal 2 is being operated. Does not provide support presentation on the display device 14 and / or the audio output device 15.
- the display and / or the voice output for prompting the driving change from the automatic driving to the manual driving may be performed.
- step S1 when the necessity determination unit 112 determines that a driver operation is necessary (YES in S1), the process proceeds to step S2. On the other hand, when it is determined that the driver operation is not necessary (NO in S1), the process proceeds to step S6.
- step S2 if the connection determination unit 111 determines that the mobile terminal 2 can be connected (YES in S2), the process proceeds to step S3. On the other hand, when it is determined that the mobile terminal 2 cannot be connected (NO in S2), the process proceeds to step S5.
- connection with the portable terminal 2 is not possible, the request notification cannot be transmitted from the communication device 20 to the portable terminal 2, and therefore the request notification is not transmitted.
- step S3 the transmission processing unit 113 outputs the request notification acquired from the necessity determination unit 112 to the communication device 20, and transmits the request notification from the communication device 20 to the mobile terminal 2.
- step S4 when the portable operation information acquired by the reception processing unit 114 from the portable terminal 2 via the communication device 20 indicates that the portable terminal 2 is being operated (YES in S4), the process proceeds to step S6. Move. On the other hand, if the mobile terminal 2 is not being operated (NO in S4), the process proceeds to step S5.
- step S5 when the mobile terminal 2 is not connectable in S2 or when the mobile terminal 2 is not being operated in S4, the presentation control unit 115 displays the support presentation on the display device 14 and / or the voice output device 15. Let me do it.
- This presentation control unit 115 corresponds to an audio output processing unit.
- step S6 if it is the end timing of the operation necessity related process (YES in S6), the operation necessity related process is terminated. On the other hand, when it is not the end timing of the operation necessity related process (NO in S6), the process returns to S1 and the process is repeated.
- the end timing of the operation necessity related processing the vehicle HV is switched from automatic driving to manual driving, the ignition power of the vehicle HV is turned off, and the like.
- the mobile terminal 2 includes a main control unit 200, a display unit 210, an operation input unit 220, and a communication unit 230.
- the display unit 210 displays text and / or images in accordance with instructions from the main control unit 200.
- the operation input unit 220 receives an operation input from a user.
- the operation input unit 220 may be a mechanical switch or a touch panel integrated with the display unit 210.
- the communication unit 230 communicates with the communication device 20 of the vehicle side unit 1. When the communication unit 230 receives a request notification from the communication device 20, the communication unit 230 outputs the received request notification to the main control unit 200. Further, when information is output from the main control unit 200, the communication unit 230 transmits this information to the communication device 20.
- the main control unit 200 includes a CPU, a volatile memory, a nonvolatile memory, an I / O, and a bus for connecting them, and executes various processes by executing a control program stored in the nonvolatile memory.
- the main control unit 200 includes a display control unit 201 and an operation determination unit 202 as functional blocks. Note that some or all of the functions executed by the main control unit 200 may be configured in hardware by one or a plurality of ICs.
- the display control unit 201 causes the display unit 210 to perform display according to application software (hereinafter referred to as application) executed on the mobile terminal 2. Further, when the operation input unit 220 does not accept an operation for a predetermined time or longer in the state where the power of the mobile terminal 2 is turned on, the display control unit 201 temporarily interrupts the display on the display unit 210 and consumes power. Transition to sleep mode to suppress
- the operation determination unit 202 determines whether or not the own terminal is operating when the request notification output from the communication unit 230 is acquired, that is, when the communication unit 230 receives the request notification. As an example, if the display control unit 201 has not shifted to the sleep mode, it is determined that the own terminal is operating, and if the display control unit 201 has shifted to the sleep mode, the own terminal is not operating. What is necessary is just to judge. In addition, it is determined that the terminal itself is not in operation when a certain period of time has elapsed since the operation input unit 220 no longer accepts an operation input, while less than a certain time after the operation input unit 220 no longer accepts an operation input. It may be configured to determine that the own terminal is operating.
- the operation determination unit 202 determines whether or not the own terminal is being operated, the operation determination unit 202 transmits a determination result (that is, the above-described portable operation information) from the communication unit 230 to the communication device 20. To send to.
- a determination result that is, the above-described portable operation information
- the display control unit 201 displays information that supports the execution of the driver operation that is necessary during automatic driving (hereinafter referred to as support display). Is displayed on the display unit 210.
- the display control unit 201 may cause the display unit 210 to perform support display according to the content of the driver operation included in the request notification. In the present embodiment, a support display for requesting a driving operation by a driver necessary for switching to manual driving is performed.
- the display control unit 201 does not cause the display unit 210 to perform support display.
- the types of support display include, for example, control-related requests for requesting operations to the driver for vehicle control, control-related proposals for making proposals to the driver for vehicle control, and proposals not related to vehicle control to the drivers.
- control-related proposals for making proposals to the driver for vehicle control
- proposals not related to vehicle control to the drivers There are non-control related proposals that provide information, and information provision that provides information to the driver.
- the control-related request is a support display for making a request related to vehicle control.
- it is a support display for making a request regarding vehicle control that must be performed by the driver.
- the control-related request as described in the present embodiment, Modification Example 1 described later, when the driving operation by the driver is necessary for switching from the automatic driving to the manual driving, the manual driving is performed.
- a lane change that is performed when an answer such as a lane change essential for the vehicle to continue traveling or an approval by the driver for joining is required.
- the response may be received by an operation member mounted on the host vehicle.
- an operation member mounted on the host vehicle For example, for a support display indicating that a driving operation by a driver for switching to manual driving is requested, an input operation for ending automatic driving may be accepted by the operation device 12 as a response.
- a lever operation in the direction of lane change or merging may be accepted by the winker lever as a response.
- the driver cannot make a response to reject the request with respect to the display of the control-related request.
- the vehicle may be temporarily stopped until it is approved.
- the display of the control-related request may be terminated when a response for approving the request is received from the driver.
- the HCU 11 may transmit a signal to the mobile terminal 2 to end the display of the control-related request.
- the control related proposal is a support display for making a proposal related to vehicle control.
- it is a support display that makes a suggestion regarding vehicle control that is not necessarily performed by the driver.
- This control-related proposal corresponds to a support display indicating that a driver is requested to answer an inquiry.
- a control-related proposal as described in Modification 2 described later, a lane change that is performed when a driver needs to change a lane that is not indispensable for the vehicle to continue traveling or for overtaking.
- a stop on the shoulder is proposed when approval by the driver for stopping on the shoulder due to the approach of an emergency vehicle is required. There is a support indication to that effect.
- the response may be received by an operation member mounted on the own vehicle.
- an operation member mounted on the own vehicle For example, for a support display indicating that a lane change or a stop on the shoulder is proposed, a lever operation in the direction of lane change or a stop on the shoulder is accepted by the winker lever as a response to approve the proposal. Good. Moreover, it is good also as a structure which receives the input operation to the effect of showing permission with the operation device 12, such as a steering switch, as a response which approves a proposal.
- the response may be received by the operation member mounted on the vehicle.
- an input operation indicating rejection may be accepted by the operation device 12 such as a steering switch as a response to reject the proposal.
- the operation device 12 such as a steering switch
- the display of the control-related proposal may be terminated when a response for approving the proposal is received from the driver or when a response for rejecting the proposal is received from the driver.
- the control relationship proposal is displayed. If the response for approval is not made within a certain period of time, the display of the control related proposal is terminated.
- the HCU 11 may transmit the signal to the mobile terminal 2 to end the display of the control relationship proposal.
- the structure which receives the approval of a control-related proposal, and the response of rejection with the operation member mounted in the own vehicle is preferable, it is not restricted to the structure received with the operation member mounted in the own vehicle.
- a voice recognition unit is mounted on the vehicle HV or the mobile terminal 2 has a voice recognition function
- the approval or rejection of the proposal is recognized by recognizing the voice approval / rejection response.
- the response may be accepted.
- the non-control related proposal is a support display for making a proposal not related to vehicle control.
- it is a support display that makes a suggestion that is not necessarily related to the latest vehicle control that is not necessarily performed by the driver.
- This non-control related proposal also corresponds to a support display for supporting a query for a driver to answer.
- the non-control related proposal as described in Modification Example 5 described later, when an approval by the driver is required for stopping at a point where the driver can stop during automatic driving, There is a support indication to suggest a stop-in.
- the response may be received by the operation member mounted on the own vehicle or the operation input unit 220 of the portable terminal 2.
- the operation device 12 such as a touch switch integrated with the display device 14 may be used.
- the touch panel integrated with the display unit 210 may be used.
- the operation of the button indicating the approval / rejection displayed on the touch panel screen may be accepted as a response to approve / reject the non-control related proposal.
- the support display on the touch panel screen includes a button for closing the support display, the operation of the close button may be accepted as a response to reject the non-control related proposal.
- a so-called swipe operation for the support display on the touch panel screen may be accepted as a response to reject the non-control related proposal.
- the display of the non-control related proposal may be terminated when a response for approval, selection, or rejection is received from the driver.
- the display of the non-control related proposal is displayed when there is no response to approve or select the proposal within a certain time after the display of the non-control related proposal is displayed. It is good also as a structure which complete
- the HCU 11 transmits a signal to the portable terminal 2 to end the display of the non-control related proposal. That's fine.
- the acceptance of the non-control related proposal, the selection, and the acceptance of the rejection are not necessarily limited to the configuration that is accepted by the operation member mounted on the own vehicle and the operation input unit 220 of the mobile terminal 2.
- a voice recognition unit is mounted on the vehicle HV or the mobile terminal 2 has a voice recognition function
- the approval, selection, and rejection responses are recognized by voice recognition.
- It may be configured to accept a rejection response.
- the information provision is a support display for providing information on the operation of the vehicle HV.
- it is a support display that provides information related to the operation of the vehicle HV that only needs to be confirmed by the driver.
- This provision of information corresponds to a support display indicating that a query requesting confirmation from the driver is supported.
- the response indicating the confirmation is configured to be received by the operation member mounted on the host vehicle or the operation input unit 220 of the mobile terminal 2.
- the operation device 12 such as a touch switch integrated with the display device 14 may be used.
- a response indicating confirmation when received by the operation input unit 220 of the mobile terminal 2, it may be configured to be received by a touch panel integrated with the display unit 210.
- a configuration may be adopted in which an operation of a button indicating confirmation on the touch panel screen is received as a response indicating confirmation.
- the support display on the touch panel screen includes a button for closing the support display, the operation of the close button may be accepted as a response indicating confirmation.
- a so-called swipe operation with respect to the support display on the touch panel screen may be accepted as a response indicating confirmation.
- the display of information provision may be terminated when a response indicating confirmation from the driver is received.
- the display of information provision may be terminated when a predetermined time has elapsed since the information provision display was performed.
- the HCU 11 may transmit a signal to the mobile terminal 2 to end the information provision display.
- the reception of the response indicating that the information provision has been confirmed is not necessarily limited to the configuration in which the operation input unit 220 of the mobile terminal 2 or the operation member mounted on the own vehicle is received.
- the configuration may be such that it can be received by voice recognition.
- the response from the driver to the support display related to the latest vehicle control is received by the operation member mounted on the own vehicle.
- the response from the driver to the support display not related to the latest vehicle control such as non-control related proposal and information provision, can be accepted by the portable terminal 2. According to this, in situations where driving operations by the driver are likely to be necessary, such as situations where assistance displays related to the latest vehicle control are performed, driving operations are required by causing the driver to operate the operating members mounted on the vehicle. Even in this case, it is possible to facilitate the shift to the driving operation of the driver.
- the operation of the mobile terminal 2 can be performed by not requiring the operation of the operation member mounted on the own vehicle. It becomes possible to reduce the troublesomeness of the driver who wants to continue.
- the structure which also displays the word which alerts the driver himself to confirm the safety around the own vehicle is also displayed.
- it may be configured to display a text such as “please confirm after confirming safety in the vicinity”.
- the support display may be configured to be displayed, for example, superimposed on a display corresponding to an application executed before the mobile terminal 2 receives the request notification.
- the support display may be superimposed on the website display.
- a banner display combining text and icons as shown in FIGS. 6A to 6G may be performed.
- the support display may be configured such that the screen is divided and displayed on a screen different from the display corresponding to the application that has been executed before the mobile terminal 2 receives the request notification.
- step S21 when the communication unit 230 receives a request notification from the communication device 20 (YES in S21), the process proceeds to step S22. On the other hand, when the request notification has not been received (NO in S21), the process proceeds to step S24.
- step S22 the operation determination unit 202 determines whether or not the own terminal is being operated. If it is determined that the terminal is operating (YES in S22), the process proceeds to step S23. On the other hand, when it is determined that the terminal is not in operation (S22 NO), the process proceeds to step S24.
- step S23 the display control unit 201 causes the display unit 210 to perform the above-described support display.
- step S24 if it is the end timing of the request handling process (YES in S24), the request handling process is terminated. On the other hand, if it is not the end timing of the request handling process (NO in S24), the process returns to S21 and the process is repeated.
- An example of the end timing of the request handling process is that the mobile terminal 2 is turned off.
- the portable terminal 2 receives a request notification from the vehicle-side unit 1 indicating that a driver operation that is at least one of an operation, a response, and a confirmation by the driver is necessary during automatic driving. If the mobile terminal 2 determines that the mobile terminal 2 is operating, support display is performed on the display unit 210 of the mobile terminal 2. Since the portable terminal 2 receives a request notification from the vehicle-side unit 1 by short-range wireless communication, when the request notification is received, it is brought into the vehicle HV.
- the support display is performed on the display unit 210 of the mobile terminal 2 when it is determined that the mobile terminal 2 is in operation, even if the driver is crazy about operating the mobile terminal 2 during automatic driving, You can notice the display. Therefore, even when the driver is operating the portable terminal 2 brought into the vehicle HV, it is possible to more smoothly perform the driver operation that is required during automatic driving.
- the vehicle side when the mobile terminal 2 receives a request notification from the vehicle-side unit 1 and when it is determined that the mobile terminal 2 is operating, the vehicle side
- the support presentation that supports the execution of the operation is not performed on the display device 14 and / or the audio output device 15 of the unit 1. Therefore, the support presentation from the vehicle side is not performed on the support display from the portable terminal 2. Therefore, it becomes difficult for the driver to feel the annoyance caused by the support presentation superimposed on the support display.
- the display of the vehicle side unit 1 is displayed. Support presentation is performed by the device 14 and / or the voice output device 15.
- the mobile terminal 2 and the vehicle-side unit 1 cannot be connected, it is conceivable that the power of the mobile terminal 2 is turned off or the mobile terminal 2 is not brought into the vehicle HV.
- the driver cannot be absorbed in the operation of the mobile terminal 2 during automatic driving, it is necessary during automatic driving by providing support from the display device 14 and / or the audio output device 15 on the vehicle side. It is possible to smoothly execute the operation by the driver.
- the mobile terminal 2 even when the driver operation is required during automatic driving and the mobile terminal 2 and the vehicle-side unit 1 can be connected, the mobile terminal 2 When it is determined that the terminal is not in operation, support presentation is performed on the display device 14 and / or the audio output device 15 of the vehicle-side unit 1. Therefore, in a situation where the mobile terminal 2 is not being operated and the driver is not enamored of the operation of the mobile terminal 2 during automatic driving, the support presentation is performed from the display device 14 and / or the audio output device 15 on the vehicle side. Thus, it is possible to smoothly execute the driver operation that is required during the automatic operation.
- Modification 1 In the first embodiment, as an example of switching from automatic operation to manual operation, an example in which the time until switching to manual operation is relatively short has been described, but the present invention is not necessarily limited thereto. For example, when the remaining distance and / or remaining time from the automatic operation to the manual operation is less than the set value and the driving operation by the driver is required for the manual operation, the automatic operation The necessity determination unit 112 may determine that it is necessary to perform a driver operation at this time (hereinafter, modified example 1).
- the necessity determination unit 112 of Modification 1 acquires the remaining distance until the end of the automatic driving section based on the travel plan generated by the automatic driving ECU 60. Then, when this remaining distance or the remaining time calculated from this remaining distance is less than or equal to the set value, it may be determined that the driver operation is necessary during automatic driving.
- the driver operation here is a driving operation by the driver required for switching to manual driving.
- the remaining time may be calculated by the necessity determination unit 112 from the remaining distance and the average vehicle speed.
- the set value here is a value that can be set arbitrarily.
- the remaining distance and / or remaining time from the automatic driving to the manual driving is also transmitted.
- the remaining distance and / or the remaining time may be displayed.
- a banner display combining text and images as shown in FIG. 9 may be performed.
- FIG. 9 shows an example in which H indicates the remaining distance until the end of the automatic driving section, and I indicates an example in which I indicates the remaining time until the end of the automatic driving section.
- FIG. 10 is an example in the case of indicating the remaining distance until the end of the automatic driving section.
- the flowchart in FIG. 11 may also be configured to start when automatic driving of the vehicle HV is started.
- step S41 the necessity determination unit 112 acquires the remaining distance until the end of the automatic driving section from the automatic driving ECU 60.
- step S42 the necessity determination unit 112 calculates the remaining time until the end of the automatic driving section from the remaining distance acquired in S41 and the average vehicle speed of the vehicle HV during automatic driving.
- step S43 when the remaining distance acquired in S41 is equal to or less than the set value (YES in S43), the process proceeds to step S45. On the other hand, if it is longer than the set value (NO in S43), the process proceeds to step S44.
- step S44 when the remaining time calculated in S42 is equal to or less than the set value (YES in S44), the process proceeds to step S45. On the other hand, if it is longer than the set value (NO in S44), the process proceeds to step S49. Note that the setting value used in S43 is different from the setting value used in S44.
- step S45 to step S49 is the same as the processing from S2 to S6 described above. If YES in S43 and if a request notification is transmitted in S46, the remaining distance acquired in S41 is also transmitted to the portable terminal 2. When it is determined that the mobile terminal 2 that has received the request notification and the remaining distance is operating the own terminal, a support display indicating the remaining distance is performed. On the other hand, if YES in S44 and if a request notification is transmitted in S46, the remaining time calculated in S42 is also transmitted to the portable terminal 2. When it is determined that the mobile terminal 2 that has received the request notification and the remaining time is operating the own terminal, the support display indicating the remaining time is performed.
- Modification 2 In the first embodiment and the first modification, when the automatic operation ECU 60 switches from automatic operation to manual operation, a configuration is illustrated in which the necessity determination unit 112 determines that a driver operation is necessary during automatic operation. However, this is not necessarily the case. For example, if approval by the driver is required when changing lanes and overtaking during automatic driving, it is determined whether driver operation is required during automatic driving when changing lanes or overtaking during automatic driving It is good also as a structure (henceforth modification 2) determined by the part 112. FIG.
- the necessity determination unit 112 according to the second modification is used when the vehicle HV needs to change lanes in order to continue traveling automatically. It is determined that the driver operation is necessary. For example, when it is necessary to move to each dedicated lane for a left or right turn, or when lane restrictions are imposed by construction in front of the own lane, it is necessary to change lanes indispensable for continued travel. Applicable.
- the necessity determination unit 112 proposes a lane change or overtaking that is not necessarily required for the vehicle HV to continue traveling automatically based on the traveling environment of the host vehicle recognized by the autonomous driving ECU 60. It is determined that driver operation is necessary during automatic operation. As an example, when the distance between the host vehicle and the preceding vehicle is less than the threshold, the lane change or overtaking is not necessarily required for the vehicle HV to continue traveling automatically. Applicable when
- the driver When the necessity determination unit 112 determines that the driver operation is necessary in a situation where the lane change is indispensable for the continuation of the travel, the driver needs to approve the lane change indispensable for the continuation of the travel.
- the request notification shown is output to the transmission processing unit 113.
- the driver's approval for lane change or overtaking that is not indispensable for continuation of driving A request notification indicating that is required is output to the transmission processing unit 113.
- the display control unit 201 of the mobile terminal 2 causes the display unit 210 to perform support display according to the content of the driver operation included in the above request notification transmitted from the vehicle-side unit 1.
- the support display corresponding to the control-related request is performed.
- the support display corresponding to the above-described control relationship proposal is performed.
- the approval by the driver may be configured to be performed by operating the blinker lever, operating the operation device 12 or the like as described above.
- the request notification is transmitted from the vehicle-side unit 1 to the portable terminal 2
- the direction of lane change or overtaking performed by the vehicle HV is also transmitted, and the lane change or overtaking performed by the vehicle HV at the portable terminal 2 is transmitted. What is necessary is just to set it as the structure which performs the support display according to the direction of.
- a configuration in which a banner display combining text and icons as shown in FIG. 12 may be performed. It is an example of the support display when J in FIG. 12 proposes to change lanes in the right direction, and is an example of the support display when K proposes to perform overtaking. In addition, it is good also as a structure which performs the pop-up display which combined the text and icon as shown in FIG. FIG. 13 is an example in the case of proposing to change the lane in the right direction.
- the support display corresponding to the control-related request is performed, the content of the text shown in FIG. 12 to FIG. 13 may be changed from the questioned content to the requested content.
- Example 3 a configuration in which the necessity determination unit 112 determines that a driver action is required during automatic driving when the driver's approval for stopping on the shoulder due to the approach of an emergency vehicle is required (hereinafter referred to as a modification) Example 3) is also possible.
- the vehicle side unit 1 shall be provided with the communication module which communicates with the exterior of the vehicle HV.
- this communication module sequentially receives position information of emergency vehicles that are sequentially transmitted from emergency vehicles.
- the HCU 11 uses the public vehicle position information received by the communication module and the vehicle position of the own vehicle measured by the ADAS locator 30 to make the emergency vehicle approach the own vehicle using a known method.
- the link where the own vehicle and the emergency vehicle are located is the same, the own vehicle is located on the route of the emergency vehicle, and the distance between the own vehicle and the emergency vehicle is less than a threshold value such as several tens of meters, for example. In such a case, it may be configured to detect the approach of an emergency vehicle.
- the necessity determination unit 112 of the third modification determines that the driver operation is necessary during automatic driving when the HCU 11 detects the approach of the emergency vehicle and the vehicle position is not near the intersection. Whether or not the vehicle position is in the vicinity of the intersection is determined by whether or not the distance between the vehicle position of the vehicle measured by the ADAS locator 30 and the node indicating the intersection is greater than or equal to a threshold value for determining whether or not the vehicle is in the vicinity of the intersection. That's fine.
- the necessity determination part 112 of the modification 3 shows that the driver
- the request notification is output to the transmission processing unit 113.
- the display control unit 201 of the mobile terminal 2 causes the display unit 210 to perform support display according to the content of the driver operation included in the above request notification transmitted from the vehicle-side unit 1.
- a support display corresponding to the above-described control relationship proposal is performed.
- it may be configured to display support indicating contents indicating that an emergency vehicle is approaching and a suggestion of stopping on a shoulder.
- the approval by the driver may be configured to be performed by operating the blinker lever, operating the operation device 12 or the like as described above.
- the rejection by the driver may be configured to be performed by operating the operation device 12 as described above.
- the autonomous driving ECU 60 brings the vehicle to the road shoulder and stops the vehicle. Even when the driver rejects the vehicle, it is preferable that the automatic operation ECU 60 causes the vehicle to run toward the road shoulder in a situation where the approach of the emergency vehicle is detected.
- Modification 4 In addition, if the driver needs to perform an approval operation when joining the main line during automatic operation, it is necessary that the driver operation is required during automatic operation when joining the main line during automatic operation. It is good also as a structure (henceforth the modification 4) determined by the rejection determination part 112. FIG.
- the necessity determination unit 112 of the modified example 4 determines that a driver operation is necessary during automatic driving when the vehicle HV automatically joins the main line based on the travel plan generated by the automatic driving ECU 60. do it.
- the necessity determination unit 112 of the modification 4 determines that the driver operation is necessary in a situation where the vehicle HV automatically joins the main line, the driver needs to approve the merge to the main line.
- a request notification indicating this is output to the transmission processing unit 113.
- the display control unit 201 of the mobile terminal 2 causes the display unit 210 to perform support display according to the content of the driver operation included in the above request notification transmitted from the vehicle-side unit 1.
- a support display corresponding to the control-related request is performed.
- the approval by the driver may be configured to be performed by operating the blinker lever, operating the operation device 12 or the like as described above.
- the request notification is transmitted from the vehicle-side unit 1 to the portable terminal 2
- information indicating that the main line is merged is also transmitted, and the portable terminal 2 displays the support according to the merge to the main line. What is necessary is just to make it the structure which performs.
- the support display in the modification 4 may be a banner display combining text and icons as shown in FIG. 14 or a pop-up display combining text and icons as shown in FIG.
- Modification 5 when the remaining distance and / or remaining time to a point where you can stop during automatic driving is less than or equal to the set value, and you propose a stop to this point where you can stop, the driver during automatic driving A configuration in which the necessity determining unit 112 determines that an operation is necessary (hereinafter, modified example 5) may be employed.
- SA service area
- PA parking area
- SA is taken as an example.
- the necessity determination unit 112 of Modification 4 acquires the remaining distance to the nearest SA in front of the course based on the travel plan of the automatic operation ECU 60 and the map data. Then, when the remaining distance or the remaining time calculated from the remaining distance is equal to or less than the set value, it is determined that the driver operation is necessary during the automatic driving.
- the remaining time may be calculated by the necessity determination unit 112 from the remaining distance and the average vehicle speed.
- the set value here is a value that can be set arbitrarily.
- the necessity determining unit 112 of the modified example 5 moves to a point where the driver can stop when it is determined that the driver operation is necessary in a situation where the remaining distance and / or the remaining time to the point where the user can stop are set values or less.
- a request notification indicating that the driver's approval for the drop-in is required is output to the transmission processing unit 113.
- the display control unit 201 of the mobile terminal 2 causes the display unit 210 to perform support display according to the content of the driver operation included in the above request notification transmitted from the vehicle-side unit 1.
- a support display corresponding to the aforementioned non-control related proposal is performed.
- it may be configured to perform support display of contents representing a suggestion of stopping at a place where a person can drop in.
- what is necessary is just to set it as the structure performed by operation of the operation device 12, the portable terminal 2, etc. as mentioned above about approval and rejection by a driver.
- the remaining distance and / or remaining time to the SA is also transmitted, and this is displayed when the portable terminal 2 performs support display.
- the remaining distance and / or the remaining time may be displayed.
- the remaining distance and / or remaining time from the automatic operation to the manual operation is also transmitted, and the remaining distance and / or remaining time are displayed. Also good.
- FIG. 11 An example of the flow of processing related to necessity of operation in the HCU 11 in the modified example 5 is shown in FIG. 11 except that the distance and time to the SA are used instead of the distance and time to the end of the automatic driving section. This is the same as the flow of the operation necessity related process in the HCU 11 in the first modification.
- FIG. 16 is an example in which L indicates the remaining distance to SA, and includes an image indicating both the distance to the end of the automatic driving section (IC in the figure) and the distance to SA.
- FIG. 16 shows an example in which M indicates the remaining time until SA, and includes an image indicating both the time until the end of the automatic driving section (IC in the figure) and the time until SA.
- the driver who sees such a banner display may be configured to transmit the intention to approve the stop to the HCU 11 by operating the operation device 12 or the like, for example, when there is an intention to stop at the SA.
- the HCU 11 may be configured to instruct the automatic operation ECU 60 to stop at the SA.
- FIG. 17 shows an example in which the remaining distance to SA is shown.
- the example of FIG. 17 includes an image showing both the distance to the end of the automatic driving section (IC in the figure) and the distance to SA, an image showing information about SA, and a button display.
- This button display functions as a touch switch. If the driver who sees such a pop-up display is willing to stop at the SA, for example, by operating the button display of the “stop” button in the pop-up display, the driver intends to approve the stop to the mobile terminal 2. It may be configured to communicate.
- a button display indicating closing in a pop-up display may be operated to notify the mobile terminal 2 of the intention to reject the stop.
- it may be configured such that the intention of rejecting the stop is transmitted to the mobile terminal 2 by not operating the button display of the “stop” button for a certain period of time after the start of the support display.
- the mobile terminal 2 transmits information indicating that there is an intention to stop at the SA to the HCU 11 via the communication device 20.
- the HCU 11 that has acquired information indicating that there is an intention to stop at the SA may be configured to instruct the automatic operation ECU 60 to stop at the SA.
- the portable terminal 2 transmits information indicating that there is no intention to stop at the SA to the HCU 11 via the communication device 20.
- the HCU 11 that has acquired information indicating that there is no intention to stop at the SA may be configured to instruct the automatic driving ECU 60 to continue automatic driving without stopping at the SA.
- Modification 6 A configuration in which the necessity determination unit 112 determines that a driver operation is required during automatic driving when the driver needs to approve and select the route for automatic driving (hereinafter, modified example 6). It is good.
- the vehicle-side unit 1 can display the recommended route generated by the automatic driving ECU 60 on the display device 14.
- the automatic driving ECU 60 regenerates a recommended route candidate even after the generated recommended route is set as an automatic driving route.
- the vehicle-side unit 1 includes a communication module that acquires traffic information and weather information from the center, and the automatic operation ECU 60 avoids traffic congestion and heavy rain based on the traffic information and weather information acquired by the communication module. It is assumed that a recommended route candidate is newly generated for avoiding the area.
- the necessity determination unit 112 of the modified example 6 determines that the driver operation is necessary during the automatic driving when the candidate for the recommended route different from the set automatic driving route is generated by the automatic driving ECU 60.
- the necessity determination unit 112 according to the modified example 6 generates a recommendation that is generated when it is determined that a driver operation is necessary in a situation in which a candidate for a recommended route different from the already set automatic driving route is generated by the automatic driving ECU 60.
- a request notification indicating that approval and selection by the driver for changing the route for automatic driving is required for the route candidate is output to the transmission processing unit 113. If there is only one recommended route candidate, it may be a request notification indicating that approval of the automatic driving route change is necessary. If there are multiple recommended route candidates, the automatic driving route change What is necessary is just to make a request notification indicating that candidate selection is required.
- the display control unit 201 of the mobile terminal 2 causes the display unit 210 to perform support display according to the content of the driver operation included in the above request notification transmitted from the vehicle-side unit 1.
- a support display corresponding to the aforementioned non-control related proposal is performed.
- it may be configured to perform support display of contents representing a proposal for route change for automatic driving.
- what is necessary is just to set it as the structure performed by operation of the operation device 12, operation of the portable terminal 2, etc. as mentioned above about approval, selection, and rejection by a driver.
- the recommended route candidate information is also transmitted, and when the portable terminal 2 performs support display, the recommended route candidate is displayed. This information may also be displayed. If there is one recommended route candidate, the driver may accept or reject this one candidate. If there are a plurality of recommended route candidates, one of the plurality of candidates is selected. It may be configured to reject it.
- the automatic operation ECU 60 When accepting approval, selection, and rejection by the operation device 12, the automatic operation ECU 60 may be configured to change the automatic operation route to the approved and selected recommended route.
- the mobile terminal 2 When the mobile terminal 2 accepts approval, selection, and rejection, the mobile terminal 2 transmits information on the recommended route approved and selected to the automatic driving ECU 60 via the communication device 20.
- the automatic driving ECU 60 that has acquired the approved and selected recommended route information may be configured to change the automatic driving route to the approved and selected recommended route.
- the necessity determining unit 112 may determine that a driver operation is necessary during automatic driving (hereinafter, modified example 7).
- Modification Example 7 of the present disclosure will be described.
- the automatic operation ECU 60 sequentially calculates the destination arrival scheduled time on the generated recommended route.
- the calculation of the destination arrival scheduled time may be performed in the same manner as the calculation of the destination arrival scheduled time performed by a known navigation device.
- the vehicle-side unit 1 can display the destination arrival scheduled time on the recommended route generated by the automatic operation ECU 60 on the display device 14.
- the necessity determination unit 112 determines that the driver operation is necessary during the automatic operation when the estimated arrival time at the destination is changed for a certain time such as 10 minutes. As an example, if the calculation result of the new destination arrival time is changed for a certain time or more from the calculation result of the latest past destination arrival time, if it is determined that the driver operation is necessary during automatic driving Good. In addition, when the calculation result of the new destination arrival time calculated from the calculation result of the latest destination arrival time displayed on the display device 14 is changed for a predetermined time or more, a driver action is required during the automatic operation. It may be determined that it has become. The necessity determination unit 112 of the modified example 7 transmits a request notification indicating that the driver needs to check the changed destination arrival time when the destination arrival time is changed by a certain time or more. The data is output to the processing unit 113.
- the display control unit 201 of the mobile terminal 2 causes the display unit 210 to perform support display according to the content of the driver operation included in the above request notification transmitted from the vehicle-side unit 1.
- the above-described support display for providing information is performed.
- it may be configured to perform support display of contents indicating the changed destination arrival scheduled time.
- it is just to set it as the structure performed by operation of the operation device 12, operation of the portable terminal 2, etc. as mentioned above for the confirmed communication by the driver.
- the necessity determining unit 112 determines whether the driver It is good also as a structure which determines with operation
- the display control unit 201 may be configured to preferentially display high-priority types of support information when the display timings of a plurality of types of support displays overlap. As a result, the higher priority type of support information can be given priority to the driver's eyes.
- a configuration in which high-priority type support information is displayed first may be used. Specifically, only the support display of the highest priority type is displayed among the support displays with overlapping display timings. Then, when the support display is finished, the process of displaying only the support display of the next highest priority type among the support displays with overlapping display timings may be repeated.
- a support display with overlapping display timings may be simultaneously displayed in different display areas, but a type of support display with a higher priority may be displayed larger.
- the support information of the type with higher priority is displayed first, while the display timing of the support information of the type with a different display area overlaps.
- the higher priority type of support information may be displayed larger.
- FIG. N in FIG. 18 indicates the display screen of the mobile terminal 2, and O and Q indicate different display areas.
- P in FIG. 18 indicates a display of a control relationship request, and R indicates a display of a non-control relationship proposal.
- the display area O is a display area for displaying a control relation request
- the display area Q is a display area for displaying a control relation proposal, a non-control relation proposal, and information provision.
- the control-related request is a support display for making a request that must be performed by the driver, the control-related request is displayed prominently (see P in FIG. 18).
- the control-related proposal, the non-control-related proposal, and the information provision are displays that are smaller than the control-related request because they are proposals and support displays for providing information that the driver does not necessarily have to implement. Even when the display timing of the control relationship request and the support display displayed in the display area Q overlap, the control relationship request is displayed larger, so the control relationship request becomes more conspicuous. In addition, when displaying a control-related request
- the control area proposal, the non-control relation proposal, and the information provision have the same display area Q
- the high-priority type support information is displayed first.
- the display timings of the non-control relationship proposal and the information provision overlap, the non-control relationship proposal is displayed first (see R in FIG. 18).
- the support display with the higher priority among the control relation proposal, the non-control relation proposal, and the information provision comes to the driver's eyes first.
- priority is given to a group of types of support display with a lower priority while securing a display area for displaying the support display with the highest priority and making it most noticeable. By displaying the higher one first, the smaller display area can be used effectively.
- Embodiment 2 In the first embodiment and the first to ninth modifications, the configuration in which the vehicle-side unit 1 and the mobile terminal 2 exchange information by short-range wireless communication is shown, but the present invention is not necessarily limited thereto. For example, it is good also as a structure (henceforth Embodiment 2) which exchanges information by connecting indirectly and communicating via the apparatus outside the vehicle HV.
- the support system 3 includes a vehicle-side unit 1 a, a mobile terminal 2 a, and a server device 4.
- vehicle-side unit 1a is the same as the vehicle-side unit 1 of the first embodiment except that the vehicle-side unit 1a includes the HMI system 10a instead of the HMI system 10 and the point that includes the communication device 20a instead of the communication device 20.
- the portable terminal 2a is the same as the portable terminal 2 of the first embodiment except that the main control unit 200a is provided instead of the main control unit 200 and that the communication unit 230a is provided instead of the communication unit 230.
- the vehicle side unit 1a and the portable terminal 2a communicate by being indirectly connected via the server device 4.
- the vehicle side unit 1a and the portable terminal 2a and the server device 4 may be configured to communicate via a public communication network such as a cellular phone network or the Internet.
- the server device 4 transmits the information received from the vehicle side unit 1a to the mobile terminal 2a, while transmitting the information received from the mobile terminal 2a to the vehicle side unit 1a.
- This server device 4 corresponds to a device outside the vehicle.
- the vehicle side unit 1a includes an HMI system 10a, a communication device 20a, an ADAS locator 30, a vehicle control ECU 40, a periphery monitoring sensor 50, and an automatic operation ECU 60.
- the HMI system 10a is the same as the HMI system 10 of the first embodiment except that the HMI system 10a includes the HCU 11a instead of the HCU 11.
- the communication device 20a is a communication module for performing communication with the server device 4 via a public communication network.
- the communication device 20a outputs information received from the server device 4 to the in-vehicle LAN, and transmits information transmitted from the HCU 11a to the server device 4 via the in-vehicle LAN.
- the HCU 11a includes a connection determination unit 111a, a necessity determination unit 112, a transmission processing unit 113, a reception processing unit 114, and a presentation control unit 115.
- the HCU 11a is the same as the HCU 11 of the first embodiment except that the connection determining unit 111a is provided instead of the connection determining unit 111.
- the connection determination unit 111 a monitors the state of the communication device 20 and determines whether or not the mobile terminal 2 can be connected via the server device 4.
- the portable terminal 2a includes a main control unit 200a, a display unit 210, an operation input unit 220, and a communication unit 230a.
- the main control unit 200a includes a display control unit 201a, an operation determination unit 202, and an in-vehicle determination unit 203 as functional blocks.
- the main control unit 200a is the same as the main control unit 200 of the first embodiment except that the display control unit 201a is provided instead of the display control unit 201 and the in-vehicle determination unit 203 is provided.
- the communication unit 230a communicates with the communication device 20a of the vehicle side unit 1a via the server device 4.
- the communication unit 230a receives a request notification from the communication device 20a
- the communication unit 230a outputs the received request notification to the main control unit 200a.
- the communication unit 230a transmits this information to the communication device 20a.
- the in-vehicle determination unit 203 determines whether or not the mobile terminal 2a is used in the vehicle. As an example, when the mobile terminal 2a has a positioning function such as a GPS function, the following may be performed. For example, the in-vehicle determination unit 203 calculates the moving speed of the own terminal from the time change amount of the position of the own terminal sequentially detected by the positioning function. And when the calculated moving speed is more than a threshold value, it determines with the portable terminal 2a being used in the vehicle.
- the threshold value referred to here may be a speed that is high enough not to be detected by walking or bicycle movement.
- the in-vehicle determination unit 203 uses the mobile terminal 2a in the vehicle. It is good also as a structure to determine.
- the operation determination unit 202 acquires a request notification output from the communication unit 230 when the in-vehicle determination unit 203 determines that the mobile terminal 2a is used in the vehicle. If it is, it is determined whether or not the own terminal is operating. On the other hand, if the in-vehicle determination unit 203 determines that the portable terminal 2a is not used in the vehicle, or if the request notification output from the communication unit 230 has not been acquired, the own terminal is operating. Does not determine whether or not. Thereby, it is possible to prevent the support display from being performed on the portable terminal 2a until the portable terminal 2a is not used in the vehicle.
- the support display is carried. This is performed on the display unit 210 of the terminal 2a. Therefore, similarly to the configuration of the first embodiment, even when the driver is operating the portable terminal 2a brought into the vehicle HV, the driver operation that is necessary during the automatic driving is performed more smoothly. It becomes possible to make it.
- Modification 10 In the above-described embodiment and modification, the configuration in which the mobile terminal 2 or 2a transmits the determination result in the operation determination unit 202 to the vehicle-side unit 1 or 1a when the request notification is received has been described. Not limited to. For example, when a request notification is received by the mobile terminals 2 and 2a, the determination result (that is, the mobile operation information) in the operation determination unit 202 is not transmitted from the mobile terminals 2 and 2a to the vehicle-side units 1 and 1a (hereinafter referred to as the mobile terminal 2 and 2a) Modification 10) is also possible.
- the configuration using the portable device operation information in the HCUs 11 and 11a of the vehicle-side units 1 and 1a may be omitted.
- the support presentation may be performed regardless of whether the mobile terminals 2 and 2a are being operated.
- the presentation control unit 115 determines that the necessity determination unit 112 determines that an operation by the driver is necessary, and determines that the connection determination units 111 and 111a are not connectable to the portable terminals 2 and 2a. In such a case, the support may be presented. If the necessity determination unit 112 determines that an operation by the driver is necessary, and the connection determination units 111 and 111a determine that the connection to the portable terminals 2 and 2a is possible, support is provided. What is necessary is just to make it the structure which does not perform presentation.
- the presentation control unit 115 changes whether or not the support presentation is performed depending on whether or not the connection determination unit 111 or 111a determines that the mobile terminal 2 or 2a can be connected.
- the configuration is shown, it is not necessarily limited to this.
- the support presentation may be performed regardless of whether the communication devices 20 and 20a of the vehicle-side units 1 and 1a and the portable terminals 2 and 2a are connectable.
- the HCUs 11 and 11a may be configured not to include the connection determination units 111 and 111a.
- the support device 20 can provide support and the communication devices 20 and 20a and the portable terminals 2 and 2a can be connected. It may be configured to change whether or not support presentation from the voice output device 15 is performed depending on whether or not. Specifically, when the communication devices 20 and 20a and the portable terminals 2 and 2a are connectable, the support presentation from the voice output device 15 is not performed, while the communication devices 20 and 20a and the portable terminals 2 and 2a If the connection is not possible, the support presentation from the voice output device 15 may be performed.
- the support system 3 includes a vehicle side unit 1 and a portable terminal 2b.
- the vehicle-side unit 1 of the third embodiment is the same as the vehicle-side unit 1 of the first embodiment except that the vehicle-side unit 1 includes an HCU 11a instead of the HCU 11.
- the portable terminal 2b is the same as the portable terminal 2 of the first embodiment, except that the main control unit 200b is provided instead of the main control unit 200, and the operation information acquisition unit 204 is provided instead of the operation determination unit 202. It is.
- the portable terminal 2b includes a main control unit 200b, a display unit 210, an operation input unit 220, and a communication unit 230.
- the main control unit 200b includes a display control unit 201b and an operation information acquisition unit 204 as functional blocks.
- the main control unit 200b except that the display control unit 201b is provided instead of the display control unit 201 and the operation information acquisition unit 204 is provided instead of the operation determination unit 202, except for the main control of the first embodiment. This is the same as the unit 200.
- the operation information acquisition unit 204 acquires information (hereinafter referred to as determination information) that allows the HCU 11b to determine whether or not the mobile terminal 2b is being operated. Examples of the determination information include information on whether the display control unit 201 has shifted to the sleep mode, information on whether the operation input unit 220 has accepted an operation input, or the like.
- the display control unit 201b causes the display unit 210 to perform support display when acquiring a support instruction (described later) output from the communication unit 230. On the other hand, when the support instruction has not been acquired, the display control unit 201b does not cause the display unit 210 to perform support display.
- the HCU 11b includes a necessity determination unit 112, a transmission processing unit 113b, a reception processing unit 114b, a presentation control unit 115b, and an operation determination unit 116.
- the HCU 11b includes a transmission processing unit 113b, a reception processing unit 114b, and a presentation control unit 115b instead of the transmission processing unit 113, the reception processing unit 114, and the presentation control unit 115, and instead of not including the connection determination unit 111. Except for the point provided with the operation determination part 116, it is the same as that of HCU11 of Embodiment 1.
- the transmission processing unit 113b When the transmission processing unit 113b acquires a request notification from the necessity determination unit 112, the transmission processing unit 113b transmits the request notification from the communication device 20 to the portable terminal 2b. Further, when the transmission processing unit 113b acquires an instruction to perform support display (hereinafter referred to as support instruction) from the presentation control unit 115b, the transmission processing unit 113b transmits the support instruction from the communication device 20 to the mobile terminal 2b.
- the transmission processing unit 113b corresponds to an instruction processing unit.
- the reception processing unit 114b acquires the determination information and outputs it to the operation determination unit 116.
- the reception processing unit 114b corresponds to a determination information acquisition unit.
- the operation determination unit 116 determines whether or not the portable terminal 2b is being operated based on the determination information in the same manner as the operation determination unit 202. To do.
- the presentation control unit 115b outputs a support instruction to the transmission processing unit 113b when the operation determination unit 116 determines that the mobile terminal 2b is being operated. On the other hand, when the operation determination unit 116 determines that the mobile terminal 2b is not operating, the support instruction is not output to the transmission processing unit 113b. Thus, when the operation determination unit 116 determines that the mobile terminal 2b is being operated, a support instruction is transmitted to the mobile terminal 2b, and support display is performed on the display unit 210 of the mobile terminal 2b.
- the presentation control unit 115b makes support presentation according to the condition.
- the display device 14 and / or the voice output device 15 provide support.
- the predetermined time mentioned here may be a time longer than the time required for returning the determination information in response to the request notification when the communication device 20 and the portable terminal 2b are connected.
- the presentation control unit 115b causes the display device 14 and / or the audio output device 15 to perform support presentation even when the operation determination unit 116 determines that the mobile terminal 2b is not being operated.
- the display device 14 and / or the audio output device 15 does not present support.
- the support display is displayed on the mobile terminal. This is performed by the display unit 210 of 2a. Therefore, similarly to the configuration of the first embodiment, even when the driver is operating the portable terminal 2a brought into the vehicle HV, the driver operation that is necessary during the automatic driving is performed more smoothly. It becomes possible to make it.
- each section is expressed as, for example, S1. Further, each section can be divided into a plurality of subsections, while a plurality of sections can be combined into one section. Further, each section configured in this manner can be referred to as a device, module, or means.
Landscapes
- Engineering & Computer Science (AREA)
- Automation & Control Theory (AREA)
- Human Computer Interaction (AREA)
- Transportation (AREA)
- Mechanical Engineering (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Control Of Driving Devices And Active Controlling Of Vehicle (AREA)
- Traffic Control Systems (AREA)
Abstract
支援システムは、自動運転を行うとともに、前記自動運転時においてドライバ動作が必要となることがある車両で用いられる車載装置(11,11a,11b,20,20a)と、前記車両のドライバに携行されるとともに前記車載装置と接続して通信を行う携帯端末(2,2a,2b)とを含む。前記車載装置及び前記携帯端末のいずれかは、前記携帯端末が操作中か否かを判定する操作判定部(202,116)を備える。前記携帯端末は、前記自動運転時において前記ドライバ動作が必要となった場合であって、且つ、前記操作判定部で前記携帯端末が操作中と判定した場合に、前記自動運転時において必要となった前記ドライバ動作の実行を支援する旨の支援表示を行う表示部(210)を備える。
Description
本出願は、2016年4月27日に出願された日本特許出願番号2016-89756号および2016年12月1日に出願された日本特許出願番号2016―234372号に基づくもので、ここにその記載内容を援用する。
本開示は、自動運転時において必要となったドライバによる操作、回答、及び確認の少なくともいずれかであるドライバ動作の実行を支援する支援システム、携帯端末、及び車載装置に関するものである。
従来、車両の加速、制動、及び操舵を自動で制御する自動運転とドライバが手動で運転操作を行う手動運転とを切り替える技術が知られている。また、自動運転から手動運転への切り替えをドライバに通知する技術が知られている。例えば、特許文献1には、自動運転から手動運転に切り替える場合に、ナビゲーション装置の液晶ディスプレイ等から通知を行う技術が開示されている。
将来的には、自動運転時において、ドライバが持ち込んだ多機能携帯電話機、ノートPC、及びタブレット端末といった携帯端末の操作が許可されることが想定される。自動運転時においてドライバが持ち込んだ携帯端末の操作が許可された場合、特許文献1に開示の技術では、ドライバが携帯端末の操作に夢中になることでナビゲーション装置からの通知に気づきにくくなるおそれがある。よって、自動運転から手動運転への切り替えの通知に気づくのが遅れ、自動運転から手動運転への運転交代がスムーズに行われにくくなる問題点が生じる。
本開示は、ドライバが車両に持ち込んだ携帯端末の操作を行っている場合であっても、自動運転時において必要となったドライバによる操作、回答、及び確認の少なくともいずれかであるドライバ動作の実行をよりスムーズに行わせることを可能にする運転交代支援システム、携帯端末、及び車載装置を提供することを目的とする。
本開示の第一の態様において、支援システムは、加速、制動、及び操舵を自動で制御する自動運転を行うとともに、前記自動運転時においてドライバによる操作、回答、及び確認の少なくともいずれかであるドライバ動作が必要となることがある車両で用いられる車載装置と、前記車両のドライバに携行されるとともに前記車載装置と接続して通信を行う携帯端末とを含む。前記車載装置及び前記携帯端末のいずれかは、前記携帯端末が操作中か否かを判定する操作判定部を備える。前記携帯端末は、前記自動運転時において前記ドライバ動作が必要となった場合であって、且つ、前記操作判定部で前記携帯端末が操作中と判定した場合に、前記自動運転時において必要となった前記ドライバ動作の実行を支援する旨の支援表示を行う表示部を備える。
本開示の第二の態様において、車両のドライバに携行される携帯端末は、加速、制動、及び操舵を自動で制御する自動運転を行うとともに、前記自動運転時においてドライバによる操作、回答、及び確認の少なくともいずれかであるドライバ動作が必要となることがある前記車両で用いられ、前記自動運転時において前記ドライバ動作が必要となった場合に前記ドライバ動作が必要となったことを示す要求通知を送信させる車載装置と接続して通信を行う通信部と、前記要求通知を前記通信部で受信した場合に、自端末が操作中か否かを判定する操作判定部と、前記操作判定部で前記携帯端末が操作中と判定した場合に、前記自動運転時において必要となった前記ドライバ動作の実行を支援する旨の支援表示を行う表示部とを備える。
本開示の第三の態様において、加速、制動、及び操舵を自動で制御する自動運転を行うとともに、前記自動運転時においてドライバによる操作、回答、及び確認の少なくともいずれかであるドライバ動作が必要となることがある車両で用いられ、前記車両のドライバに携行される携帯端末と接続して通信を行う車載装置は、前記自動運転時において前記ドライバ動作が必要となった場合であって、且つ、前記携帯端末と接続可能である場合に、前記携帯端末が操作中か否かを判定できる判定用情報を前記携帯端末から取得する判定情報取得部と、前記判定情報取得部で取得した前記判定用情報をもとに前記携帯端末が操作中か否かを判定する操作判定部と、前記操作判定部で前記携帯端末が操作中と判定した場合に、前記自動運転時において必要となった前記ドライバ動作の実行を支援する旨の支援表示を行わせる指示を前記携帯端末に送信させる指示処理部とを備える。
上記の支援システム、携帯端末、車載装置によれば、自動運転時においてドライバによる操作、回答、及び確認の少なくともいずれかであるドライバ動作が必要となった場合であって、且つ、携帯端末が操作中と判定した場合に、自動運転時において必要となったドライバ動作の実行を支援する旨の支援表示を携帯端末で行うことになる。携帯端末は車両のドライバに携行されるものであるので、自動運転時において車両に持ち込まれることになる。また、携帯端末が操作中と判定した場合に支援表示を携帯端末で行うので、自動運転時にドライバが携帯端末の操作に夢中になっている場合であっても、支援表示に気付くことができる。よって、ドライバが車両に持ち込んだ携帯端末の操作を行っている場合であっても、自動運転時において必要となったドライバによる操作、回答、及び確認の少なくともいずれかであるドライバ動作の実行をよりスムーズに行わせることが可能になる。
本開示についての上記目的およびその他の目的、特徴や利点は、添付の図面を参照しながら下記の詳細な記述により、より明確になる。その図面は、
図1は、支援システムの概略的な構成の一例を示す図であり、
図2は、車両側ユニットの概略的な構成の一例を示す図であり、
図3は、HCUの概略的な構成の一例を示す図であり、
図4は、実施形態1におけるHCUでの操作要否関連処理の流れの一例を示すフローチャートであり、
図5は、携帯端末の概略的な構成の一例を示す図であり、
図6は、実施形態1における支援表示の一例を示す図であり、
図7は、実施形態1における支援表示の一例を示す図であり、
図8は、携帯端末2での要求対応処理の流れの一例を示すフローチャートであり、
図9は、変形例1における支援表示の一例を示す図であり、
図10は、変形例1における支援表示の一例を示す図であり、
図11は、変形例1におけるHCU11での操作要否関連処理の流れの一例を示すフローチャートであり、
図12は、変形例2における支援表示の一例を示す図であり、
図13は、変形例2における支援表示の一例を示す図であり、
図14は、変形例4における支援表示の一例を示す図であり、
図15は、変形例4における支援表示の一例を示す図であり、
図16は、変形例5における支援表示の一例を示す図であり、
図17は、変形例5における支援表示の一例を示す図であり、
図18は、複数種類の支援情報の表示タイミングが重なった場合の表示態様の一例を説明するための図であり、
図19は、支援システムの概略的な構成の一例を示す図であり、
図20は、車両側ユニットの概略的な構成の一例を示す図であり、
図21は、HCUの概略的な構成の一例を示す図であり、
図22は、携帯端末の概略的な構成の一例を示す図であり、
図23は、携帯端末の概略的な構成の一例を示す図であり、
図24は、HCUの概略的な構成の一例を示す図である。
図面を参照しながら、開示のための複数の実施形態及び変形例を説明する。なお、説明の便宜上、複数の実施形態及び変形例の間において、それまでの説明に用いた図に示した部分と同一の機能を有する部分については、同一の符号を付し、その説明を省略する場合がある。同一の符号を付した部分については、他の実施形態及び/又は変形例における説明を参照することができる。
また、以下に示す実施形態及び変形例は、左側通行が法制化されている地域に対応した実施形態及び変形例であり、右側通行が法制化されている地域では、以下の実施形態と左右が逆になる。
(実施形態1)
<支援システム3の概略構成>
以下、本開示の実施形態1の一例について図面を用いて説明する。図1に示すように、支援システム3は、車両側ユニット1及び携帯端末2を含んでいる。車両側ユニット1は、加速、制動、及び操舵を自動で制御する自動運転を行う車両HVに搭載され、携帯端末2と接続して通信を行う。車両HVは、自動車であって、自動運転とドライバが手動で運転操作を行う手動運転とを切り替え可能であるものとする。
<支援システム3の概略構成>
以下、本開示の実施形態1の一例について図面を用いて説明する。図1に示すように、支援システム3は、車両側ユニット1及び携帯端末2を含んでいる。車両側ユニット1は、加速、制動、及び操舵を自動で制御する自動運転を行う車両HVに搭載され、携帯端末2と接続して通信を行う。車両HVは、自動車であって、自動運転とドライバが手動で運転操作を行う手動運転とを切り替え可能であるものとする。
携帯端末2は、車両HVのドライバに携行されるものであって、ドライバが車両HVに乗車する際に車両HVに持ち込まれるものである。携帯端末2としては、ドライバが携行可能であって表示機能を端末であればよく、例えば多機能携帯電話機、タブレット端末、ノートPC、電子書籍端末、及びスマートウォッチ等を用いることができる。実施形態1では、携帯端末2としてスマートフォンといった多機能携帯電話機を用いる場合を例に挙げて説明を行う。
<車両側ユニット1の概略構成>
続いて、図2を用いて車両側ユニット1の概略構成を説明する。車両側ユニット1は、自動運転車両に搭載されるものであり、図2に示すように、HMI(Human Machine Interface)システム10、通信機20、ADAS(Advanced Driver Assistance Systems)
ロケータ30、車両制御ECU40、周辺監視センサ50、及び自動運転ECU60を含んでいる。HMIシステム10、通信機20、ADASロケータ30、車両制御ECU40、及び自動運転ECU60は、例えば車内LANに接続されており、通信によって互いに情報をやり取りすることができる。
続いて、図2を用いて車両側ユニット1の概略構成を説明する。車両側ユニット1は、自動運転車両に搭載されるものであり、図2に示すように、HMI(Human Machine Interface)システム10、通信機20、ADAS(Advanced Driver Assistance Systems)
ロケータ30、車両制御ECU40、周辺監視センサ50、及び自動運転ECU60を含んでいる。HMIシステム10、通信機20、ADASロケータ30、車両制御ECU40、及び自動運転ECU60は、例えば車内LANに接続されており、通信によって互いに情報をやり取りすることができる。
通信機20は、近距離無線通信規格に沿って携帯端末2との間で直接的に通信(以下、近距離無線通信)を行う。近距離無線通信の範囲は、例えば半径1m未満程度等とすればよい。通信機20は、Bluetooth(登録商標)、ZigBee(登録商標)等の近距離無線通信規格に沿って信号を送受信する構成とすればよいが、以下ではBluetoothの規格に沿って信号を送受信する場合を例に挙げて説明を行う。なお、消費電力低減の観点からは、Bluetooth Low Energyの規格に沿って信号を送受信する構成とすることがより好ましい。
実施形態1では、車両HVのドライバが携行する携帯端末2と通信機20とのペアリングが実行済みであるものとして以降の説明を行う。通信機20は、携帯端末2と接続した場合には、この携帯端末2から取得した情報を車内LANへ出力したり、車内LANを介してHCU11から送信されてきた情報をこの携帯端末2へ送信したりする。
ADASロケータ30は、GNSS(Global Navigation Satellite System)受信機31、慣性センサ32、地図データを格納した地図データベース(以下、DB)33を備えている。GNSS受信機31は、複数の人工衛星からの測位信号を受信する。慣性センサ32は、例えば3軸ジャイロセンサ及び3軸加速度センサを備える。地図DB33は、不揮発性メモリであって、リンクデータ、ノードデータ、道路形状、構造物等の地図データを格納している。
ADASロケータ30は、GNSS受信機31で受信する測位信号と、慣性センサ32での計測結果とを組み合わせることにより、ADASロケータ30を搭載した車両HVの車両位置を逐次測位する。なお、車両位置の測位には、車両HVに搭載された車輪速センサから逐次出力されるパルス信号から求めた走行距離も用いる構成としてもよい。そして、測位した車両位置を車内LANへ出力する。また、ADASロケータ30は、地図DB33から地図データを読み出し、車内LANへ出力することも行う。なお、地図データは、自車に搭載された例えばDCMといった車載通信モジュールを用いて車両HVの外部から取得する構成としてもよい。
車両制御ECU40は、車両HVの加減速制御及び操舵制御を行う電子制御装置である。車両制御ECU40としては、操舵制御を行う操舵ECU、加減速制御を行うパワーユニット制御ECU及びブレーキECU等がある。車両制御ECU40は、車両HVに搭載されたアクセルポジションセンサ、ブレーキ踏力センサ、舵角センサ、車輪速センサ等の各センサから出力される検出信号を取得し、電子制御スロットル、ブレーキアクチュエータ、EPS(Electric Power Steering)モータ等の各走行制御デバイスへ制御信号を出力する。また、車両制御ECU40は、上述の各センサの検出信号を車内LANへ出力可能である。
周辺監視センサ50は、歩行者、人間以外の動物、自転車、オートバイ、及び他車等の移動物体、さらに路上の落下物、ガードレール、縁石、及び樹木等の静止物体といった障害物を検出する。他にも、走行区画線、停止線等の路面標示を検出する。周辺監視センサ50は、例えば、車両HV周囲の所定範囲を撮像する周辺監視カメラ、車両HV周囲の所定範囲に探査波を送信するミリ波レーダ、ソナー、LIDAR(Light Detection and Ranging/Laser Imaging Detect ion and Ranging)等のセンサである。
周辺監視カメラとしてはステレオカメラを用いる構成であっても、単眼カメラを用いる構成であってもよい。周辺監視カメラは、逐次撮像する撮像画像をセンシング情報として自動運転ECU60へ逐次出力する。ソナー、ミリ波レーダ、LIDAR等の探査波を送信するセンサは、障害物によって反射された反射波を受信した場合に得られる受信信号に基づく走査結果をセンシング情報として自動運転ECU60へ逐次出力する。なお、車両HV前方のセンシングを周辺監視カメラとミリ波レーダとを併用して行う等、複数種類の周辺監視センサ50が重複したセンシング範囲を有する構成としてもよい。
自動運転ECU60は、ADASロケータ30から取得した自車の車両位置及び地図データ、周辺監視センサ50から取得したセンシング情報等から、自車の走行環境を認識する。自動運転ECU60は、認識した走行環境をもとに、自動運転によって自車を走行させるための走行計画を生成する。例えば中長期の走行計画として、自車を目的地へ向かわせるための推奨経路を生成する。また、推奨経路に従った走行を行うための短期の走行計画を生成する。具体例としては、車線変更のための操舵、速度調整のための加減速、及び障害物回避のための操舵及び制動等の実行を決定する。
そして、自動運転ECU60は、生成した走行計画に従い、自車の加速、制動、及び/又は操舵を車両制御ECU40に自動で行わせることで、ドライバによる運転操作の代行を行う。また、自動運転ECU60は、自動運転の実施不実施を切り替えられるものとする。自動運転の不実施とは、自車のブレーキ、ステアリング、スロットル、原動力といった主操縦系統について自動化を行わずにドライバが全て操作することを示す。つまり、手動運転である。自動運転ECU60での自動運転の実施不実施の切り替えは、自動運転区間の走行の終了、認識される走行環境若しくは周辺監視センサ50でのセンシングの不具合等に応じて、自律的に行われる構成とすればよい。他にも、後述する操作デバイス12へのドライバによる入力操作に従って行われる構成としてもよい。
HMIシステム10は、図2に示すように、HCU(Human Machine Interface Control Unit)11、操作デバイス12、ウィンカースイッチ13、表示装置14、及び音声出力装置15を備えており、車両HVのドライバからの入力操作を受け付けたり、車両HVのドライバに向けて情報を提示したりする。
操作デバイス12は、車両HVのドライバが操作するスイッチ群である。操作デバイス12は、各種の設定を行うために用いられる。例えば、操作デバイス12としては、自車のステアリングのスポーク部に設けられたステアリングスイッチ、表示装置14と一体となったタッチスイッチ等がある。
ウィンカースイッチ13は、方向指示器のランプ点灯操作を行うための操作部材であるウィンカーレバーの操作を検出するためのスイッチであって、ウィンカーレバーの操作に応じた右左折時のウィンカー信号を出力する。
表示装置14は、テキスト及び/又は画像の表示によって情報提示を行う。表示装置14としては、例えばコンビネーションメータ、CID(Center Information Display)、HUD(Head-Up Display)等がある。音声出力装置15は、音声の出力によって情報提示を行う。音声出力装置15としては、例えばオーディオスピーカ等がある。
HCU11は、CPU、揮発性メモリ、不揮発性メモリ、I/O、これらを接続するバスを備え、不揮発性メモリに記憶された制御プログラムを実行することで各種の処理を実行する。例えばHCU11は、表示装置14及び/又は音声出力装置15に情報提示を行わせる。なお、HCU11が実行する機能の一部または全部を、一つあるいは複数のIC等によりハードウェア的に構成してもよい。HCU11の詳細については以下で述べる。
<HCU11の概略構成>
ここで、図3を用いて、HCU11の概略構成を説明する。図3に示すように、HCU11は、接続判定部111、要否判定部112、送信処理部113、受信処理部114、及び提示制御部115を備えている。
ここで、図3を用いて、HCU11の概略構成を説明する。図3に示すように、HCU11は、接続判定部111、要否判定部112、送信処理部113、受信処理部114、及び提示制御部115を備えている。
接続判定部111は、通信機20の状態をモニタし、携帯端末2と接続可能か否かを判定する。要否判定部112は、自動運転ECU60をモニタし、自動運転時においてドライバによる操作、回答、及び確認の少なくともいずれかであるドライバ動作が必要となったか否かを判定する。本実施形態では、自動運転ECU60で自動運転から手動運転への切り替えを行う場合であって、ドライバによる運転操作が必要となった場合に、ドライバ動作が必要となったと判定する場合を例に挙げて以降の説明を行う。また、要否判定部112は、必要となったと判定した場合には、ドライバ動作が必要となったことを示す要求通知を送信処理部113に出力する。本実施形態の例では、ドライバによる運転操作が必要となったことを示す要求通知を送信処理部113に出力する。なお、要求通知には、必要となったドライバ動作の内容も含む構成とすればよい。ここでのドライバ動作は、手動運転への切り替えで必要となるドライバによる運転操作である。
送信処理部113は、通信機20に情報を出力して通信機20から携帯端末2へ情報を送信させる。送信処理部113は、要求通知を要否判定部112から取得した場合に、通信機20に要求通知を出力し、通信機20から携帯端末2へ要求通知を送信させる。この送信処理部113が通知処理部に相当する。
通信機20は、送信処理部113から要求通知を取得した場合に、携帯端末2と接続中であった場合には携帯端末2に要求通知を送信する。一方、携帯端末2と接続中でなかった場合は、接続を試み、接続できた場合に要求通知を携帯端末2に送信し、接続が失敗した場合には要求通知を携帯端末2に送信しない。携帯端末2は、通信機20からこの要求通知を受信した場合に、携帯端末2を操作中か否かの判定を行い、携帯端末2を操作中か否かの判定結果(以下、携帯操作情報)を通信機20に送信するものとする。
なお、通信機20は、携帯端末2以外の通信端末と接続可能であった場合でも、携帯端末2を特定して接続を行い、要求通知を送信する構成とすればよい。例えば、携帯端末2以外の通信端末と接続中であった場合でも、携帯端末2と接続可能であれば携帯端末2以外の通信端末との接続を中止して携帯端末2と接続し、要求通知を送信する構成とすればよい。この場合、ドライバの携帯端末2のIDといった識別情報を通信機20に登録してしまうことで、登録した携帯端末2のみを要求通知を送信する対象とすればよい。この通信機20及びHCU11を備える構成が車載装置に相当する。他の例として、通信機20は、携帯端末2を特定せずに、携帯端末2を含む接続可能な通信端末全てに要求通知を送信する構成としてもよい。この場合には、HCU11が車載装置に相当する。
受信処理部114は、通信機20で携帯端末2から送信される携帯操作情報を受信した場合に、この携帯操作情報を取得して、提示制御部115に出力する。提示制御部115は、要否判定部112でドライバ動作が必要となったと判定した場合に、条件に応じて、自動運転時において必要となったドライバ動作の実行を支援する情報提示(以下、支援提示)を行わせる。
一例としては、接続判定部111で携帯端末2と接続可能でないと判定した場合に、表示装置14及び/又は音声出力装置15で支援提示を行わせる。また、接続判定部111で携帯端末2と接続可能であると判定した場合であって、且つ、受信処理部114で取得した携帯操作情報が携帯端末2を操作中でないことを示していた場合にも、表示装置14及び/又は音声出力装置15で支援提示を行わせる。一方、接続判定部111で携帯端末2と接続可能であると判定した場合であっても、受信処理部114で取得した携帯操作情報が携帯端末2を操作中であることを示していた場合には、表示装置14及び/又は音声出力装置15で支援提示を行わせない。支援提示の一例としては、自動運転から手動運転への運転交代を促す表示及び/又は音声出力を行わせる構成とすればよい。
<HCU11での操作要否関連処理について>
ここで、図4のフローチャートを用いて、HCU11での自動運転時においてドライバによる操作が必要となったか否かに応じた処理(以下、操作要否関連処理)の流れの一例について説明を行う。図4のフローチャートは、車両HVの自動運転が開始された場合に開始する構成とすればよい。
ここで、図4のフローチャートを用いて、HCU11での自動運転時においてドライバによる操作が必要となったか否かに応じた処理(以下、操作要否関連処理)の流れの一例について説明を行う。図4のフローチャートは、車両HVの自動運転が開始された場合に開始する構成とすればよい。
まず、ステップS1では、要否判定部112が、ドライバ動作が必要となったと判定した場合(S1でYES)に、ステップS2に移る。一方、ドライバ動作が必要でないと判定した場合(S1でNO)には、ステップS6に移る。ステップS2では、接続判定部111が携帯端末2と接続可能であると判定した場合(S2でYES)に、ステップS3に移る。一方、携帯端末2と接続可能でないと判定した場合(S2でNO)には、ステップS5に移る。携帯端末2と接続可能でない場合には、通信機20から携帯端末2へ要求通知を送信できないため、要求通知は送信されないことになる。
ステップS3では、送信処理部113が、要否判定部112から取得した要求通知を通信機20に出力し、通信機20から携帯端末2へ要求通知を送信させる。ステップS4では、通信機20を介して携帯端末2から受信処理部114が取得した携帯操作情報が、携帯端末2を操作中であることを示していた場合(S4でYES)に、ステップS6に移る。一方、携帯端末2を操作中でないことを示していた場合(S4でNO)には、ステップS5に移る。
S2で携帯端末2と接続可能でない場合、若しくはS4で携帯端末2を操作中でないことを示していた場合におけるステップS5では、提示制御部115が支援提示を表示装置14及び/又は音声出力装置15で行わせる。この提示制御部115が音声出力処理部に相当する。
ステップS6では、操作要否関連処理の終了タイミングであった場合(S6でYES)は、操作要否関連処理を終了する。一方、操作要否関連処理の終了タイミングでなかった場合(S6でNO)には、S1に戻って処理を繰り返す。操作要否関連処理の終了タイミングの一例としては、車両HVが自動運転から手動運転に切り替わったこと、車両HVのイグニッション電源がオフになったこと等がある。
<携帯端末2の概略構成>
続いて、図5を用いて携帯端末2の概略構成を説明する。図5に示すように、携帯端末2は、主制御部200、表示部210、操作入力部220、及び通信部230を備えている。表示部210は、主制御部200の指示に従ってテキスト及び/又は画像の表示を行う。操作入力部220は、ユーザからの操作入力を受け付ける。操作入力部220は、メカニカルなスイッチであってもよいし、表示部210と一体となったタッチパネルであってもよい。通信部230は、車両側ユニット1の通信機20と通信を行う。通信部230は、通信機20から要求通知を受信した場合に、受信した要求通知を主制御部200に出力する。また、通信部230は、主制御部200から情報が出力された場合に、この情報を通信機20へ送信する。
続いて、図5を用いて携帯端末2の概略構成を説明する。図5に示すように、携帯端末2は、主制御部200、表示部210、操作入力部220、及び通信部230を備えている。表示部210は、主制御部200の指示に従ってテキスト及び/又は画像の表示を行う。操作入力部220は、ユーザからの操作入力を受け付ける。操作入力部220は、メカニカルなスイッチであってもよいし、表示部210と一体となったタッチパネルであってもよい。通信部230は、車両側ユニット1の通信機20と通信を行う。通信部230は、通信機20から要求通知を受信した場合に、受信した要求通知を主制御部200に出力する。また、通信部230は、主制御部200から情報が出力された場合に、この情報を通信機20へ送信する。
主制御部200は、CPU、揮発性メモリ、不揮発性メモリ、I/O、これらを接続するバスを備え、不揮発性メモリに記憶された制御プログラムを実行することで各種の処理を実行する。主制御部200は、機能ブロックとして表示制御部201及び操作判定部202を備える。なお、主制御部200が実行する機能の一部または全部を、一つあるいは複数のIC等によりハードウェア的に構成してもよい。
表示制御部201は、携帯端末2で実行するアプリケーションソフトウェア(以下、アプリケーション)に応じた表示を表示部210に行わせる。また、表示制御部201は、携帯端末2の電源がオンになった状態において、操作入力部220で一定時間以上操作を受け付けなかった場合に、表示部210での表示を一旦中断させて消費電力を抑えるスリープモードに移行する。
操作判定部202は、通信部230から出力される要求通知を取得した場合、つまり、通信部230で要求通知を受信した場合に、自端末が操作中か否かを判定する。一例としては、表示制御部201がスリープモードに移行していなかった場合に自端末が操作中と判定し、表示制御部201がスリープモードに移行していた場合には自端末が操作中でないと判定すればよい。他にも、操作入力部220で操作入力を受け付けなくなってから一定時間以上経過した場合に自端末が操作中でないと判定する一方、操作入力部220で操作入力を受け付けなくなってから一定時間未満は、自端末が操作中であると判定する等の構成としてもよい。
操作判定部202は、自端末が操作中であるか否かを判定した場合に、自端末を操作中か否かの判定結果(つまり、前述の携帯操作情報)を通信部230から通信機20へ送信させる。
また、操作判定部202で携帯端末2が操作中であると判定した場合、表示制御部201が、自動運転時において必要となったドライバ動作の実行を支援する情報の表示(以下、支援表示)を表示部210に行わせる。表示制御部201は、要求通知に含まれるドライバ動作の内容に応じた支援表示を表示部210に行わせればよい。本実施形態では、手動運転への切り替えで必要となるドライバによる運転操作を要求する旨の支援表示を行わせることになる。一方、操作判定部202で携帯端末2が操作中でないと判定した場合、表示制御部201は支援表示を表示部210に行わせない。
支援表示の種類としては、例えば車両制御についてドライバへの操作の要求を行うものである制御関係要求,車両制御についてドライバへの提案を行うものである制御関係提案,ドライバへ車両制御に関わらない提案を行うものである非制御関係提案,及びドライバへ情報の提供を行うものである情報提供がある。
まず、制御関係要求は、車両制御に関わる要求を行う支援表示である。言い換えると、ドライバに必ず実施してもらわなくてはならない車両制御に関する要求を行う支援表示である。制御関係要求の一例としては、本実施形態,後述の変形例1で述べるような、自動運転から手動運転への切り替えのためにドライバによる運転操作が必要となった場合に行う、手動運転への切り替えで必要となるドライバによる運転操作を要求する旨の支援表示がある。他にも、後述の変形例2,4で述べるような、自車が走行を継続するために不可欠な車線変更若しくは合流のためのドライバによる承認といった回答が必要となった場合に行う、車線変更若しくは合流のためのドライバによる承認を要求する旨の支援表示がある。
制御関係要求に対してドライバが承認する応答を行う場合、この応答を自車に搭載された操作部材で受け付ける構成とすればよい。例えば、手動運転への切り替えのためのドライバによる運転操作を要求する旨の支援表示に対しては、自動運転を終了する旨の入力操作をこの応答として操作デバイス12で受け付ける構成とすればよい。車線変更若しくは合流のためのドライバによる承認を要求する旨の支援表示に対しては、車線変更,合流の方向へのレバー操作をこの応答としてウィンカーレバーで受け付ける構成とすればよい。また、許諾を示す旨の入力操作をこの応答としてステアリングスイッチといった操作デバイス12で受け付ける構成としてもよい。なお、制御関係要求の表示に対しては、ドライバが要求を却下する応答を行うことはできない構成となっていることが好ましい。一例として、ドライバが要求を承認しないまま車線変更,合流のタイミングとなった場合には、承認されるまで自車を一時停止させる構成とすればよい。
また、制御関係要求の表示を終了するのは、ドライバから要求を承認する応答を受け付けた場合とすればよい。一例としては、ドライバから要求に従う応答を操作デバイス12若しくはウィンカーレバーで受け付けた場合に、HCU11が信号を携帯端末2に送信することで、制御関係要求の表示を終了させる構成とすればよい。
続いて、制御関係提案は、車両制御に関わる提案を行う支援表示である。言い換えると、ドライバに必ずしも実施してもらわなくてもよい車両制御に関する提案を行う支援表示である。この制御関係提案が、ドライバに回答を求める問い合わせを支援する旨の支援表示に相当する。制御関係提案の一例としては、後述の変形例2で述べるような、自車が走行を継続するために必須でない車線変更若しくは追い越しのためのドライバによる承認が必要となった場合に行う、車線変更若しくは追い越しを提案する旨の支援表示がある。また、制御関係提案としては、後述の変形例3で述べるような、緊急車両の接近に伴う路肩での停車のためのドライバによる承認が必要となった場合に行う、路肩での停車を提案する旨の支援表示がある。
制御関係提案の表示に対してドライバが承認する応答を行う場合、この応答を自車に搭載された操作部材で受け付ける構成とすればよい。例えば、車線変更,路肩での停車を提案する旨の支援表示に対しては、車線変更,路肩での停車の方向へのレバー操作を、提案を承認する応答としてウィンカーレバーで受け付ける構成とすればよい。また、許諾を示す旨の入力操作を、提案を承認する応答としてステアリングスイッチといった操作デバイス12で受け付ける構成としてもよい。
一方、制御関係提案の表示に対してドライバが却下する応答を行う場合にも、この応答を自車に搭載された操作部材で受け付ける構成とすればよい。例えば、却下を示す旨の入力操作を、提案を却下する応答としてステアリングスイッチといった操作デバイス12で受け付ける構成とすればよい。なお、制御関係提案の表示が行われてから一定時間以内に提案を承認する応答が行われないことを、提案を却下する応答としてHCU11が受け付ける構成としてもよい。
また、制御関係提案の表示を終了するのは、ドライバから提案を承認する応答を受け付けたり、ドライバから提案を却下する応答を受け付けたりした場合とすればよい。なお、制御関係提案の表示が行われてから一定時間以内に承認する応答が行われないことを、提案を却下する応答として受け付ける構成を採用した場合には、制御関係提案の表示が行われてから一定時間以内に承認する応答が行われない場合に、制御関係提案の表示を終了することになる。他にも、追い越し対象の先行車の車線変更若しくは加速があった場合,緊急車両の経路から外れた場合等の、制御関係提案が無効になった場合に、制御関係提案の表示を終了する構成とすればよい。制御関係提案の表示を終了する場合も、HCU11が信号を携帯端末2に送信することで、制御関係提案の表示を終了させる構成とすればよい。
なお、制御関係提案の承認,却下の応答の受け付けは、自車に搭載された操作部材で受け付ける構成が好ましいが、自車に搭載された操作部材で受け付ける構成に限らない。例えば、車両HVに音声認識ユニットが搭載されていたり、携帯端末2が音声認識機能を有していたりする場合には、音声による承認,却下の応答を音声認識することで、提案の承認,却下の応答を受け付ける構成としてもよい。
続いて、非制御関係提案は、車両制御に関わらない提案を行う支援表示である。言い換えると、ドライバに必ずしも実施してもらわなくてもよい、直近の車両制御に関わらない提案を行う支援表示である。この非制御関係提案も、ドライバに回答を求める問い合わせを支援する旨の支援表示に相当する。非制御関係提案の一例としては、後述の変形例5で述べるような、自動運転時に立ち寄り可能な地点への立ち寄りのためのドライバによる承認が必要となった場合に行う、立ち寄り可能な地点への立ち寄りを提案する旨の支援表示がある。他にも、後述の変形例6で述べるような、自動運転の経路変更を行うためのドライバによる承認,選択といった回答が必要となった場合に行う、自動運転の経路変更を提案する旨の支援表示がある。ドライバによる選択が必要になる場合とは、複数候補の提案に対する選択が必要である等の、承認及び却下のみでの応答が困難な非制御関係提案が行われた場合である。
非制御関係提案の表示に対してドライバが承認,選択,却下する応答を行う場合、この応答を、自車に搭載された操作部材若しくは携帯端末2の操作入力部220で受け付ける構成とすればよい。例えば、承認,選択,却下する応答を、自車に搭載された操作部材で受け付ける場合には、表示装置14と一体となったタッチスイッチといった操作デバイス12で受け付ける構成とすればよい。
また、非制御関係提案に対して承認,選択,却下する応答を、携帯端末2の操作入力部220で受け付ける場合には、表示部210と一体となったタッチパネルで受け付ける構成とすればよい。例えば、タッチパネルの画面上に表示した承認,却下を示す内容のボタンの操作を、非制御関係提案に対して承認,却下する応答として受け付ける構成とすればよい。また、タッチパネルの画面上に表示した複数の選択候補から選択する操作を、非制御関係提案に対して選択する応答として受け付ける構成とすればよい。タッチパネルの画面上の支援表示に、支援表示を閉じるボタンが含まれている場合には、この閉じるボタンの操作を、非制御関係提案を却下する応答として受け付ける構成としてもよい。他にも、タッチパネルの画面上の支援表示に対する、所謂スワイプ操作を、非制御関係提案を却下する応答として受け付ける構成としてもよい。なお、非制御関係提案の表示が行われてから一定時間以内に提案に対して承認,選択する応答が行われないことを、提案を却下する応答として受け付ける構成としてもよい。
また、非制御関係提案の表示を終了するのは、ドライバから承認,選択,却下する応答を受け付けた場合とすればよい。また、制御関係提案の表示の場合と同様に、非制御関係提案の表示が行われてから一定時間以内に提案に対して承認,選択する応答が行われない場合に、非制御関係提案の表示を終了する構成としてもよい。非制御関係提案を却下する応答を、自車に搭載された操作部材で受け付けた場合には、HCU11が信号を携帯端末2に送信することで、非制御関係提案の表示を終了させる構成とすればよい。
なお、非制御関係提案の承認,選択,却下の応答の受け付けは、必ずしも自車に搭載された操作部材,携帯端末2の操作入力部220で受け付ける構成に限らない。例えば、車両HVに音声認識ユニットが搭載されていたり、携帯端末2が音声認識機能を有していたりする場合には、音声による承認,選択,却下の応答を音声認識することで、承認,選択,却下の応答を受け付ける構成とすればよい。
続いて、情報提供は、車両HVの運行に関する情報提供を行う支援表示である。言い換えると、ドライバが確認するだけで済む、車両HVの運行に関する情報提供を行う支援表示である。この情報提供が、ドライバに確認を求める問い合わせを支援する旨の支援表示に相当する。情報提供の一例としては、後述の変形例7で述べるような、目的地到着予定時刻が一定時間以上変更された場合に行う、変更された目的地到着予定時刻を通知する旨の支援表示がある。
情報提供の表示に対してドライバが確認したことを示す応答を行う場合、確認したことを示す応答を、自車に搭載された操作部材若しくは携帯端末2の操作入力部220で受け付ける構成とすればよい。例えば、確認したことを示す応答を、自車に搭載された操作部材で受け付ける場合には、表示装置14と一体となったタッチスイッチといった操作デバイス12で受け付ける構成とすればよい。
また、確認したことを示す応答を、携帯端末2の操作入力部220で受け付ける場合には、表示部210と一体となったタッチパネルで受け付ける構成とすればよい。例えば、タッチパネルの画面上に表示した確認済みを示す内容のボタンの操作を、確認したことを示す応答として受け付ける構成とすればよい。また、タッチパネルの画面上の支援表示に、支援表示を閉じるボタンが含まれている場合には、この閉じるボタンの操作を、確認したことを示す応答として受け付ける構成としてもよい。他にも、タッチパネルの画面上の支援表示に対する、所謂スワイプ操作を、確認したことを示す応答として受け付ける構成としてもよい。
また、情報提供の表示を終了するのは、ドライバから確認したことを示す応答を受け付けた場合とすればよい。また、情報提供の表示が行われてから一定時間経過した場合に、情報提供の表示を終了する構成としてもよい。確認したことを示す応答を、自車に搭載された操作部材で受け付けた場合には、HCU11が信号を携帯端末2に送信することで、情報提供の表示を終了させる構成とすればよい。
なお、情報提供の確認したことを示す応答の受け付けは、必ずしも自車に搭載された操作部材,携帯端末2の操作入力部220で受け付ける構成に限らない。例えば、車両HVに音声認識ユニットが搭載されていたり、携帯端末2が音声認識機能を有していたりする場合には、音声認識によって受け付ける構成とすればよい。
また、制御関係要求,制御関係提案といった、直近の車両制御に関わる支援表示へのドライバからの応答については、自車に搭載された操作部材で受け付ける構成としている。一方、非制御関係提案,情報提供といった、直近の車両制御に関わらない支援表示へのドライバからの応答については、携帯端末2でも受け付け可能な構成としている。これによれば、直近の車両制御に関わる支援表示が行われる状況といった、ドライバによる運転操作が必要となりやすい状況では、自車に搭載された操作部材をドライバに操作させることで、運転操作が必要となった場合でもドライバの運転操作への移行を容易にすることが可能になる。一方、直近の車両制御に関わらない支援表示が行われる状況といった、ドライバによる運転操作が必要となりにくい状況では、自車に搭載された操作部材の操作を必須としないことで、携帯端末2の操作を継続したいドライバの煩わしさを軽減することが可能になる。
なお、制御関係要求,制御関係提案にあたる支援表示を行う場合には、自車の周辺の安全をドライバ自身が確認するよう注意喚起する文言も合わせて表示する構成が好ましい。一例としては、「周辺の安全を確認した上で承認して下さい」といったテキストを表示する構成とすればよい。
支援表示は、携帯端末2で要求通知を受信する以前から実行していたアプリケーションに応じた表示に例えば重畳して表示させる構成とすればよい。例えばウェブサイトの閲覧中であった場合には、ウェブサイトの表示に重畳して支援表示を行わせる構成とすればよい。支援表示の一例としては、図6のA~Gに示すようなテキストとアイコンとを組み合わせたバナー表示を行わせる構成とすればよい。他にも、図7に示すようなテキストとアイコンとを組み合わせたポップアップ表示を行わせる構成としてもよい。また、アプリケーションに応じた表示の全面に重畳して支援表示を行わせる構成としてもよい。なお、支援表示は、画面を分割して、携帯端末2で要求通知を受信する以前から実行していたアプリケーションに応じた表示と異なる画面に表示させる構成としてもよい。
<携帯端末2での要求対応処理>
ここでは、図8のフローチャートを用いて、携帯端末2での要求通知に応じた処理(以下、要求対応処理)の流れの一例について説明を行う。図8のフローチャートは、携帯端末2の電源がオンになった場合に開始する構成とすればよい。
ここでは、図8のフローチャートを用いて、携帯端末2での要求通知に応じた処理(以下、要求対応処理)の流れの一例について説明を行う。図8のフローチャートは、携帯端末2の電源がオンになった場合に開始する構成とすればよい。
まず、ステップS21では、通信部230が通信機20から要求通知を受信した場合(S21でYES)に、ステップS22に移る。一方、要求通知を受信していない場合(S21でNO)には、ステップS24に移る。
ステップS22では、操作判定部202が、自端末が操作中か否かを判定する。そして、自端末が操作中と判定した場合(S22でYES)には、ステップS23に移る。一方、自端末が操作中でないと判定した場合(S22NO)には、ステップS24に移る。ステップS23では、表示制御部201が前述の支援表示を表示部210に行わせる。
ステップS24では、要求対応処理の終了タイミングであった場合(S24でYES)には、要求対応処理を終了する。一方、要求対応処理の終了タイミングでなかった場合(S24でNO)には、S21に戻って処理を繰り返す。要求対応処理の終了タイミングの一例としては、携帯端末2の電源がオフになったこと等がある。
<実施形態1のまとめ>
実施形態1の構成によれば、自動運転時においてドライバによる操作、回答、及び確認の少なくともいずれかであるドライバ動作が必要となったことを示す要求通知を車両側ユニット1から携帯端末2が受信した場合であって、且つ、携帯端末2で自端末が操作中と判定した場合に、支援表示を携帯端末2の表示部210で行う。携帯端末2は近距離無線通信で車両側ユニット1から要求通知を受信するので、要求通知を受信した場合には、車両HVに持ち込まれていることになる。また、携帯端末2が操作中と判定した場合に支援表示を携帯端末2の表示部210で行うので、自動運転時にドライバが携帯端末2の操作に夢中になっている場合であっても、支援表示に気付くことができる。よって、ドライバが車両HVに持ち込んだ携帯端末2の操作を行っている場合であっても、自動運転時において必要となったドライバ動作の実行をよりスムーズに行わせることが可能になる。
実施形態1の構成によれば、自動運転時においてドライバによる操作、回答、及び確認の少なくともいずれかであるドライバ動作が必要となったことを示す要求通知を車両側ユニット1から携帯端末2が受信した場合であって、且つ、携帯端末2で自端末が操作中と判定した場合に、支援表示を携帯端末2の表示部210で行う。携帯端末2は近距離無線通信で車両側ユニット1から要求通知を受信するので、要求通知を受信した場合には、車両HVに持ち込まれていることになる。また、携帯端末2が操作中と判定した場合に支援表示を携帯端末2の表示部210で行うので、自動運転時にドライバが携帯端末2の操作に夢中になっている場合であっても、支援表示に気付くことができる。よって、ドライバが車両HVに持ち込んだ携帯端末2の操作を行っている場合であっても、自動運転時において必要となったドライバ動作の実行をよりスムーズに行わせることが可能になる。
また、実施形態1の構成によれば、要求通知を車両側ユニット1から携帯端末2が受信した場合であって、且つ、携帯端末2で自端末が操作中と判定した場合には、車両側ユニット1の表示装置14及び/又は音声出力装置15でその操作の実行を支援する支援提示を行わせない。よって、携帯端末2からの支援表示に重ねて、車両側から支援提示が行われることがない。従って、支援表示に重ねて支援提示が行われることによる煩わしさをドライバが感じにくくなる。
さらに、実施形態1の構成によれば、自動運転時においてドライバによる動作が必要となった場合であって、携帯端末2と車両側ユニット1とが接続できない場合には、車両側ユニット1の表示装置14及び/又は音声出力装置15で支援提示を行う。携帯端末2と車両側ユニット1とが接続できない場合は、携帯端末2の電源をオフにしている、若しくは車両HVへの携帯端末2の持ち込みが行われていない等が考えられる。このように、自動運転時においてドライバが携帯端末2の操作に夢中になり得ない状況では、車両側の表示装置14及び/又は音声出力装置15から支援提示を行うことで、自動運転時において必要となったドライバによる操作の実行をスムーズに行わせることが可能になる。
他にも、実施形態1の構成によれば、自動運転時においてドライバ動作が必要となった場合であって、携帯端末2と車両側ユニット1とが接続できる場合であっても、携帯端末2で自端末が操作中でないと判定した場合には、車両側ユニット1の表示装置14及び/又は音声出力装置15で支援提示を行う。よって、携帯端末2が操作中でなく、自動運転時においてドライバが携帯端末2の操作に夢中になっていない状況では、車両側の表示装置14及び/又は音声出力装置15から支援提示を行うことで、自動運転時において必要となったドライバ動作の実行をスムーズに行わせることが可能になる。
(変形例1)
実施形態1では、自動運転から手動運転への切り替えを行う場合の一例として、手動運転への切り替えまでの時間が比較的短い場合の例を示したが、必ずしもこれに限らない。例えば、自動運転から手動運転への切り替えまでの残り距離及び/又は残り時間が設定値以下となった場合であって、手動運転への切り替えでドライバによる運転操作が必要となる場合に、自動運転時においてドライバ動作が必要となったと要否判定部112で判定する構成(以下、変形例1)としてもよい。
実施形態1では、自動運転から手動運転への切り替えを行う場合の一例として、手動運転への切り替えまでの時間が比較的短い場合の例を示したが、必ずしもこれに限らない。例えば、自動運転から手動運転への切り替えまでの残り距離及び/又は残り時間が設定値以下となった場合であって、手動運転への切り替えでドライバによる運転操作が必要となる場合に、自動運転時においてドライバ動作が必要となったと要否判定部112で判定する構成(以下、変形例1)としてもよい。
以下、本開示の変形例1の構成について説明する。変形例1の要否判定部112は、自動運転ECU60で生成した走行計画をもとに、自動運転区間終了までの残り距離を取得する。そして、この残り距離若しくはこの残り距離から算出される残り時間が設定値以下であった場合に、自動運転時においてドライバ動作が必要となったと判定すればよい。ここでのドライバ動作は、手動運転への切り替えで必要となるドライバによる運転操作である。残り時間については、残り距離と平均車速とから要否判定部112で算出する構成とすればよい。ここで言うところの設定値は任意に設定可能な値である。
また、変形例1の構成では、車両側ユニット1から携帯端末2へ要求通知を送信する際に、自動運転から手動運転への切り替えまでの残り距離及び/又は残り時間も送信し、携帯端末2で支援表示を行う場合に、この残り距離及び/又は残り時間も表示する構成とすればよい。変形例1における支援表示の一例としては、図9に示すようなテキストと画像とを組み合わせたバナー表示を行わせる構成とすればよい。図9のHが自動運転区間終了までの残り距離を示す場合の例であって、Iが自動運転区間終了までの残り時間を示す場合の例である。他にも、図10に示すようなテキストと画像とを組み合わせたポップアップ表示を行わせる構成としてもよい。図10は、自動運転区間終了までの残り距離を示す場合の例である。
ここで、図11を用いて、変形例1におけるHCU11での操作要否関連処理の流れの一例について説明を行う。図11のフローチャートも、車両HVの自動運転が開始された場合に開始する構成とすればよい。
まず、ステップS41では、要否判定部112が、自動運転ECU60から、自動運転区間終了までの残り距離を取得する。ステップS42では、要否判定部112が、S41で取得した残り距離と自動運転時における車両HVの平均車速とから、自動運転区間終了までの残り時間を算出する。
ステップS43では、S41で取得した残り距離が設定値以下であった場合(S43でYES)には、ステップS45に移る。一方、設定値よりも長かった場合(S43でNO)には、ステップS44に移る。ステップS44では、S42で算出した残り時間が設定値以下であった場合(S44でYES)には、ステップS45に移る。一方、設定値よりも長かった場合(S44でNO)には、ステップS49に移る。なお、S43で用いる設定値と、S44で用いる設定値とは異なるものとする。
ステップS45~ステップS49の処理は、前述のS2~S6の処理と同様である。S43でYESであった場合であって、且つ、S46で要求通知を送信する場合には、S41で取得した残り距離も携帯端末2へ送信する。そして、要求通知と残り距離とを受信した携帯端末2において自端末を操作中と判定した場合には、残り距離を示した支援表示を行う。一方、S44でYESであった場合であって、且つ、S46で要求通知を送信する場合には、S42で算出した残り時間も携帯端末2へ送信する。そして、要求通知と残り時間とを受信した携帯端末2において自端末を操作中と判定した場合には、残り時間を示した支援表示を行う。
(変形例2)
実施形態1及び変形例1では、自動運転ECU60で自動運転から手動運転への切り替えを行う場合に、自動運転時においてドライバ動作が必要となったと要否判定部112で判定する構成を示したが、必ずしもこれに限らない。例えば、自動運転時において車線変更及び追い越しを行う際にドライバによる承認が必要な場合には、自動運転時に車線変更若しくは追い越しを行う場合に、自動運転時においてドライバ動作が必要となったと要否判定部112で判定する構成(以下、変形例2)としてもよい。
実施形態1及び変形例1では、自動運転ECU60で自動運転から手動運転への切り替えを行う場合に、自動運転時においてドライバ動作が必要となったと要否判定部112で判定する構成を示したが、必ずしもこれに限らない。例えば、自動運転時において車線変更及び追い越しを行う際にドライバによる承認が必要な場合には、自動運転時に車線変更若しくは追い越しを行う場合に、自動運転時においてドライバ動作が必要となったと要否判定部112で判定する構成(以下、変形例2)としてもよい。
以下、本開示の変形例2の構成について説明する。変形例2の要否判定部112は、自動運転ECU60で生成した走行計画をもとに、車両HVが自動で走行を継続するために不可欠な車線変更が必要となった場合に、自動運転時においてドライバ動作が必要となったと判定する。一例として、右左折のためにそれぞれの専用レーンに移る必要がある場合,自車線前方で工事による車線規制が行われている場合等が、走行継続に不可欠な車線変更が必要となった場合に該当する。
また、要否判定部112は、自動運転ECU60で認識した自車の走行環境等をもとに、車両HVが自動で走行を継続するために必ずしも必要でない車線変更若しくは追い越しを提案する場合に、自動運転時においてドライバ動作が必要となったと判定する。一例として、自車と先行車との車間距離が閾値未満となった走行が一定時間以上継続された場合等が、車両HVが自動で走行を継続するために必ずしも必要でない車線変更若しくは追い越しを提案する場合に該当する。
要否判定部112は、走行継続に不可欠な車線変更を行う状況において、ドライバ動作が必要となったと判定した場合に、走行継続に不可欠な車線変更についてのドライバによる承認が必要となったことを示す要求通知を送信処理部113に出力する。一方、要否判定部112は、走行継続に不可欠でない車線変更若しくは追い越しを提案する状況において、ドライバ動作が必要となったと判定した場合に、走行継続に不可欠でない車線変更若しくは追い越しについてのドライバによる承認が必要となったことを示す要求通知を送信処理部113に出力する。
そして、携帯端末2の表示制御部201では、車両側ユニット1から送信された上述の要求通知に含まれるドライバ動作の内容に応じた支援表示を表示部210に行わせる。走行継続に不可欠な車線変更についてのドライバによる承認が必要となったことを示す要求通知に対しては、前述の制御関係要求にあたる支援表示を行うことになる。一方、走行継続に不可欠でない車線変更若しくは追い越しについてのドライバによる承認が必要となったことを示す要求通知に対しては、前述の制御関係提案にあたる支援表示を行うことになる。
また、ドライバによる承認は、前述したようにウィンカーレバーの操作,操作デバイス12の操作等によって行う構成とすればよい。変形例2の構成では、車両側ユニット1から携帯端末2へ要求通知を送信する際に、車両HVが行う車線変更若しくは追い越しの方向も送信し、携帯端末2で車両HVが行う車線変更若しくは追い越しの方向に応じた支援表示を行う構成とすればよい。
変形例2での制御関係提案にあたる支援表示の一例としては、図12に示すようなテキストとアイコンとを組み合わせたバナー表示を行わせる構成とすればよい。図12のJが右方向に車線変更を行うことを提案する場合の支援表示の例であって、Kが追い越しを行うことを提案する場合の支援表示の例である。他にも、図13に示すようなテキストとアイコンとを組み合わせたポップアップ表示を行わせる構成としてもよい。図13は、右方向に車線変更を行うことを提案する場合の例である。制御関係要求にあたる支援表示を行う場合には、図12~図13で示すテキストの内容を、問いかける内容から要求する内容に変更すればよい。
(変形例3)
また、緊急車両の接近に伴う路肩での停車のためのドライバによる承認が必要となった場合に、自動運転時においてドライバ動作が必要となったと要否判定部112で判定する構成(以下、変形例3)としてもよい。
また、緊急車両の接近に伴う路肩での停車のためのドライバによる承認が必要となった場合に、自動運転時においてドライバ動作が必要となったと要否判定部112で判定する構成(以下、変形例3)としてもよい。
以下、本開示の変形例3の構成について説明する。変形例3では、車両側ユニット1は、車両HVの車外と通信を行う通信モジュールを備えているものとする。この通信モジュールは、一例として緊急車両から逐次送信される緊急車両の位置情報を逐次受信するものとする。そして、HCU11は、この通信モジュールで逐次受信した緊急車両の位置情報と、ADASロケータ30で測位した自車の車両位置とを用いて、公知の方法を用いて自車への緊急車両の接近を検出する。一例としては、自車と緊急車両との位置するリンクが同一であって緊急車両の経路に自車が位置し、自車と緊急車両との距離が例えば数十m等の閾値未満となった場合に、緊急車両の接近を検出する構成とすればよい。
変形例3の要否判定部112は、HCU11で緊急車両の接近を検出した場合であって、自車位置が交差点近辺でない場合に、自動運転時においてドライバ動作が必要となったと判定する。自車位置が交差点近辺か否かについては、ADASロケータ30で測位した自車の車両位置と交差点を示すノードとの距離が交差点近辺か否かを判別するための閾値以上か否かによって判別すればよい。変形例3の要否判定部112は、緊急車両の接近を検出した状況において、ドライバ動作が必要となったと判定した場合に、路肩での停車ついてのドライバによる承認が必要となったことを示す要求通知を送信処理部113に出力する。
そして、携帯端末2の表示制御部201では、車両側ユニット1から送信された上述の要求通知に含まれるドライバ動作の内容に応じた支援表示を表示部210に行わせる。路肩での停車ついてのドライバによる承認が必要となったことを示す要求通知に対しては、前述の制御関係提案にあたる支援表示を行うことになる。具体例としては、緊急車両が接近していること及び路肩への停車の提案を表す内容の支援表示を行う構成とすればよい。また、ドライバによる承認は、前述したようにウィンカーレバーの操作,操作デバイス12の操作等によって行う構成とすればよい。ドライバによる却下は、前述したように操作デバイス12の操作等によって行う構成とすればよい。
ドライバによる承認が行われた場合には、自動運転ECU60が、自車を路肩に寄せて停車させるものとする。なお、ドライバによる却下が行われた場合にも、自動運転ECU60は、緊急車両の接近を検出した状況においては、自車を路肩に寄せて走行させることが好ましい。
(変形例4)
また、自動運転時において本線への合流を行う際にドライバによる承認の操作が必要な場合には、自動運転時に本線への合流を行う場合に、自動運転時においてドライバ動作が必要となったと要否判定部112で判定する構成(以下、変形例4)としてもよい。
また、自動運転時において本線への合流を行う際にドライバによる承認の操作が必要な場合には、自動運転時に本線への合流を行う場合に、自動運転時においてドライバ動作が必要となったと要否判定部112で判定する構成(以下、変形例4)としてもよい。
以下、本開示の変形例4の構成について説明する。変形例4の要否判定部112は、自動運転ECU60で生成した走行計画をもとに、車両HVが自動で本線への合流を行う場合に、自動運転時においてドライバ動作が必要となったと判定すればよい。変形例4の要否判定部112は、車両HVが自動で本線への合流を行う状況においてドライバ動作が必要となったと判定した場合に、本線への合流についてのドライバによる承認が必要となったことを示す要求通知を送信処理部113に出力する。
そして、携帯端末2の表示制御部201では、車両側ユニット1から送信された上述の要求通知に含まれるドライバ動作の内容に応じた支援表示を表示部210に行わせる。本線への合流についてのドライバによる承認が必要となったことを示す要求通知に対しては、前述の制御関係要求にあたる支援表示を行うことになる。
また、ドライバによる承認は、前述したようにウィンカーレバーの操作,操作デバイス12の操作等によって行う構成とすればよい。変形例4の構成では、車両側ユニット1から携帯端末2へ要求通知を送信する際に、本線への合流を行うことを示す情報も送信し、携帯端末2で本線へ合流に応じた支援表示を行う構成とすればよい。
変形例4における支援表示は、図14に示すようなテキストとアイコンとを組み合わせたバナー表示としてもよいし、図15に示すようなテキストとアイコンとを組み合わせたポップアップ表示としてもよい。
(変形例5)
また、自動運転時において立ち寄り可能な地点までの残り距離及び/又は残り時間が設定値以下となった場合であって、この立ち寄り可能な地点への立ち寄りを提案する場合に、自動運転時においてドライバ動作が必要となったと要否判定部112で判定する構成(以下、変形例5)としてもよい。立ち寄り可能な地点の一例としては、サービスエリア(以下、SA),パーキングエリア(以下、PA)等がある。以下ではSAを例に挙げて説明を行う。
また、自動運転時において立ち寄り可能な地点までの残り距離及び/又は残り時間が設定値以下となった場合であって、この立ち寄り可能な地点への立ち寄りを提案する場合に、自動運転時においてドライバ動作が必要となったと要否判定部112で判定する構成(以下、変形例5)としてもよい。立ち寄り可能な地点の一例としては、サービスエリア(以下、SA),パーキングエリア(以下、PA)等がある。以下ではSAを例に挙げて説明を行う。
以下、本開示の変形例5の構成について説明する。変形例4の要否判定部112は、自動運転ECU60の走行計画と地図データとをもとに、進路前方の直近のSAまでの残り距離を取得する。そして、この残り距離若しくはこの残り距離から算出される残り時間が設定値以下であった場合に、自動運転時においてドライバ動作が必要となったと判定する。残り時間については、残り距離と平均車速とから要否判定部112で算出する構成とすればよい。ここで言うところの設定値は任意に設定可能な値である。
変形例5の要否判定部112は、立ち寄り可能な地点までの残り距離及び/又は残り時間が設定値以下となった状況においてドライバ動作が必要となったと判定した場合に、立ち寄り可能な地点への立ち寄りについてのドライバによる承認が必要となったことを示す要求通知を送信処理部113に出力する。
そして、携帯端末2の表示制御部201では、車両側ユニット1から送信された上述の要求通知に含まれるドライバ動作の内容に応じた支援表示を表示部210に行わせる。立ち寄り可能な地点への立ち寄りついてのドライバによる承認が必要となったことを示す要求通知に対しては、前述の非制御関係提案にあたる支援表示を行うことになる。具体例としては、立ち寄り可能な地点への立ち寄りの提案を表す内容の支援表示を行う構成とすればよい。また、ドライバによる承認,却下は、前述したように操作デバイス12,携帯端末2の操作等によって行う構成とすればよい。
変形例5の構成では、車両側ユニット1から携帯端末2へ要求通知を送信する際に、SAまでの残り距離及び/又は残り時間も送信し、携帯端末2で支援表示を行う場合に、この残り距離及び/又は残り時間も表示する構成とすればよい。なお、SAまでの残り距離及び/又は残り時間に加え、自動運転から手動運転への切り替えまでの残り距離及び/又は残り時間も送信し、これらの残り距離及び/又は残り時間を表示する構成としてもよい。
変形例5におけるHCU11での操作要否関連処理の流れの一例については、自動運転区間終了までの距離及び時間の代わりに、SAまでの距離及び時間を用いる点を除けば、図11で示した変形例1におけるHCU11での操作要否関連処理の流れと同様である。
変形例5における非制御関係提案にあたる支援表示の一例としては、図16に示すようなテキストと画像とを組み合わせたバナー表示を行わせる構成とすればよい。図16のLがSAまでの残り距離を示す場合の例であって、自動運転区間終了(図中のIC)までの距離とSAまでの距離との両方を示す画像を含んでいる。図16のMがSAまでの残り時間を示す場合の例であって、自動運転区間終了(図中のIC)までの時間とSAまでの時間との両方を示す画像を含んでいる。このようなバナー表示を目にしたドライバは、SAに立ち寄る意思がある場合には、例えば操作デバイス12等を操作することで立ち寄りを承認する意思をHCU11に伝える構成とすればよい。立ち寄りが承認された場合、HCU11では、SAに立ち寄るよう自動運転ECU60に指示を行う構成とすればよい。
他にも、図17に示すようなテキストと画像とを組み合わせたポップアップ表示を行わせる構成としてもよい。図17は、SAまでの残り距離を示す場合の例である。図17の例では、自動運転区間終了(図中のIC)までの距離とSAまでの距離との両方を示す画像、SAの情報を示す画像、及びボタン表示を含んでいる。このボタン表示はタッチスイッチとして機能するものとする。このようなポップアップ表示を目にしたドライバは、SAに立ち寄る意思がある場合には、例えばポップアップ表示中の「立ち寄る」ボタンのボタン表示を操作することで、立ち寄りを承認する意思を携帯端末2に伝える構成とすればよい。また、立ち寄る意思がない場合には、例えばポップアップ表示中の閉じることを示すボタン表示を操作することで、立ち寄りを却下する意思を携帯端末2に伝える構成とすればよい。なお、「立ち寄る」ボタンのボタン表示を支援表示開始から一定時間以上操作しないことで、立ち寄りを却下する意思を携帯端末2に伝える構成とすればよい。
立ち寄りが承認された場合、携帯端末2では、SAに立ち寄る意思があることを示す情報を、通信機20を介してHCU11に送信する。SAに立ち寄る意思があることを示す情報を取得したHCU11では、SAに立ち寄るよう自動運転ECU60に指示を行う構成とすればよい。立ち寄りが却下された場合、携帯端末2では、SAに立ち寄る意思がないことを示す情報を、通信機20を介してHCU11に送信する。SAに立ち寄る意思がないことを示す情報を取得したHCU11では、SAに立ち寄らず自動運転を継続するよう自動運転ECU60に指示を行う構成とすればよい。
(変形例6)
また、自動運転の経路変更のためのドライバによる承認,選択が必要となった場合に、自動運転時においてドライバ動作が必要となったと要否判定部112で判定する構成(以下、変形例6)としてもよい。
また、自動運転の経路変更のためのドライバによる承認,選択が必要となった場合に、自動運転時においてドライバ動作が必要となったと要否判定部112で判定する構成(以下、変形例6)としてもよい。
以下、本開示の変形例6の構成について説明する。変形例6では、車両側ユニット1は、自動運転ECU60で生成した推奨経路を、表示装置14に表示できるものとする。また、自動運転ECU60は、生成した推奨経路が自動運転の経路として設定された後も、推奨経路の候補を新たに生成し直すものとする。一例として、車両側ユニット1は、センタから交通情報,天気情報を取得する通信モジュールを備えており、自動運転ECU60は、通信モジュールで取得した交通情報,天気情報をもとに、渋滞回避,豪雨地域の回避等のために推奨経路の候補を新たに生成し直すものとする。
変形例6の要否判定部112は、設定済みの自動運転の経路とは異なる推奨経路の候補が自動運転ECU60で生成された場合に、自動運転時においてドライバ動作が必要となったと判定する。変形例6の要否判定部112は、設定済みの自動運転の経路とは異なる推奨経路の候補が自動運転ECU60で生成された状況においてドライバ動作が必要となったと判定した場合に、生成した推奨経路の候補に自動運転の経路変更を行うためのドライバによる承認,選択が必要となったことを示す要求通知を送信処理部113に出力する。推奨経路の候補が1つの場合には、自動運転の経路変更の承認が必要となったことを示す要求通知とすればよく、推奨経路の候補が複数の場合には、自動運転の経路変更の候補選択が必要となったことを示す要求通知とすればよい。
そして、携帯端末2の表示制御部201では、車両側ユニット1から送信された上述の要求通知に含まれるドライバ動作の内容に応じた支援表示を表示部210に行わせる。推奨経路の候補の承認,選択が必要となったことを示す要求通知に対しては、前述の非制御関係提案にあたる支援表示を行うことになる。具体例としては、自動運転の経路変更の提案を表す内容の支援表示を行う構成とすればよい。また、ドライバによる承認,選択,却下は、前述したように操作デバイス12の操作,携帯端末2の操作等によって行う構成とすればよい。
変形例6の構成では、車両側ユニット1から携帯端末2へ要求通知を送信する際に、推奨経路の候補の情報も送信し、携帯端末2で支援表示を行う場合に、この推奨経路の候補の情報も表示する構成とすればよい。推奨経路の候補が1つの場合には、ドライバがこの1つの候補を承認するか却下する構成とすればよく、推奨経路の候補が複数の場合には、この複数の候補のいずれかを選択するか却下する構成とすればよい。
承認,選択,却下を操作デバイス12で受け付ける場合には、自動運転ECU60が、自動運転の経路を、承認,選択された推奨経路に変更する構成とすればよい。一方、承認,選択,却下を携帯端末2で受け付ける場合には、携帯端末2では、承認,選択された推奨経路の情報を、通信機20を介して自動運転ECU60に送信する。承認,選択された推奨経路の情報を取得した自動運転ECU60では、自動運転の経路を、承認,選択された推奨経路に変更する構成とすればよい。
(変形例7)
また、情報提供に対するドライバの確認が必要となった場合に、自動運転時においてドライバ動作が必要となったと要否判定部112で判定する構成(以下、変形例7)としてもよい。
また、情報提供に対するドライバの確認が必要となった場合に、自動運転時においてドライバ動作が必要となったと要否判定部112で判定する構成(以下、変形例7)としてもよい。
以下、本開示の変形例7の構成について説明する。変形例7では、自動運転ECU60は、生成した推奨経路での目的地到着予定時刻を逐次算出するものとする。目的地到着予定時刻の算出は公知のナビゲーション装置で行われる目的地到着予定時刻の算出と同様にして行う構成とすればよい。また、車両側ユニット1は、自動運転ECU60で生成した推奨経路での目的地到着予定時刻を、表示装置14に表示できるものとする。
変形例7の要否判定部112は、目的地到着予定時刻が例えば10分等の一定時間以上変更された場合に、自動運転時においてドライバ動作が必要となったと判定する。一例として、直近の過去の目的地到着予定時刻の算出結果から新たな目的地到着予定時刻の算出結果が一定時間以上変更された場合に、自動運転時においてドライバ動作が必要となったと判定すればよい。他にも、表示装置14に表示した直近の目的地到着予定時刻の算出結果から新たな目的地到着予定時刻の算出結果が一定時間以上変更された場合に、自動運転時においてドライバ動作が必要となったと判定してもよい。変形例7の要否判定部112は、目的地到着予定時刻が一定時間以上変更された場合に、変更された目的地到着予定時刻のドライバによる確認が必要となったことを示す要求通知を送信処理部113に出力する。
そして、携帯端末2の表示制御部201では、車両側ユニット1から送信された上述の要求通知に含まれるドライバ動作の内容に応じた支援表示を表示部210に行わせる。変更された目的地到着予定時刻のドライバによる確認が必要となったことを示す要求通知に対しては、前述の情報提供にあたる支援表示を行うことになる。具体例としては、変更された目的地到着予定時刻を表す内容の支援表示を行う構成とすればよい。また、ドライバによる確認済みの意思伝達は、前述したように操作デバイス12の操作,携帯端末2の操作等によって行う構成とすればよい。変形例7の構成では、車両側ユニット1から携帯端末2へ要求通知を送信する際に、変更された目的地到着予定時刻も送信し、携帯端末2で支援表示を行う場合に、この目的地到着予定時刻も表示する構成とすればよい。
なお、自車が交差点近辺に位置するか否かにかかわらず、変形例3で述べたようにしてHCU11で緊急車両の接近を検出した場合に、要否判定部112が、自動運転時においてドライバ動作が必要となったと判定する構成としてもよい。この場合、要否判定部112は、緊急車両接近を知らせる通知のドライバによる確認が必要となったことを示す要求通知を送信処理部113に出力すればよい。そして、携帯端末2の表示制御部201では、前述の情報提供にあたる支援表示として、緊急車両接近を知らせる内容の支援表示を行う構成とすればよい。
(変形例8)
なお、変形例1~7を組み合わせる構成としてもよい。また、実施形態1及び変形例1~7に示した例に限らず、自動運転時においてドライバの操作が必要となるあらゆる状況に対して、本開示は適用可能である。
なお、変形例1~7を組み合わせる構成としてもよい。また、実施形態1及び変形例1~7に示した例に限らず、自動運転時においてドライバの操作が必要となるあらゆる状況に対して、本開示は適用可能である。
(変形例9)
また、実施形態1及び変形例1~7を組み合わせる構成とした場合において、複数種類の支援表示の表示タイミングが重なった場合には、一例として以下のようにすればよい。支援表示の種類は、前述したように、制御関係要求、制御関係提案、非制御関係提案、及び情報提供の4種類とする。また、優先度の高いものから順に、制御関係要求,制御関係提案,非制御関係提案,情報提供であるものとする。
また、実施形態1及び変形例1~7を組み合わせる構成とした場合において、複数種類の支援表示の表示タイミングが重なった場合には、一例として以下のようにすればよい。支援表示の種類は、前述したように、制御関係要求、制御関係提案、非制御関係提案、及び情報提供の4種類とする。また、優先度の高いものから順に、制御関係要求,制御関係提案,非制御関係提案,情報提供であるものとする。
表示制御部201は、複数種類の支援表示の表示タイミングが重なった場合には、優先度の高い種類の支援情報を優先して表示する構成とすればよい。これにより、優先度の高い種類の支援情報ほど優先してドライバの目にとまるようにすることができる。
優先の一例としては、優先度の高い種類の支援情報を先に表示する構成とすればよい。具体的には、表示タイミングが重なった支援表示のうち、優先度の最も高い種類の支援表示のみを表示する。そして、その支援表示が終了した場合に、表示タイミングが重なった支援表示のうち次に優先度の高い種類の支援表示のみを表示するといった処理を繰り返す構成とすればよい。優先の他の例としては、表示タイミングが重なった支援表示を同時にそれぞれ異なる表示領域に表示するものの、優先度が高い種類の支援表示ほど大きく表示する構成としてもよい。
また、表示領域が共通の種類の支援情報の表示タイミングが重なった場合には、優先度の高い種類の支援情報を先に表示する一方、表示領域が異なる種類の支援情報の表示タイミングが重なった場合には、優先度の高い種類の支援情報ほど大きく表示する構成としてもよい。ここで、この構成の一例について図18を用いて説明を行う。図18のNが携帯端末2の表示画面を示しており、O,Qがそれぞれ異なる表示領域を示している。また、図18のPが制御関係要求の表示を示しており、Rが非制御関係提案の表示を示している。
表示領域Oが、制御関係要求を表示する表示領域であり、表示領域Qが、制御関係提案,非制御関係提案,情報提供を表示する表示領域である。制御関係要求は、ドライバに必ず実施してもらわなくてはならない要求を行うための支援表示であるので、目立つように大きく表示する(図18のP参照)。一方、制御関係提案,非制御関係提案,情報提供は、ドライバに必ずしも実施してもらわなくてもよい提案,情報提供を行うための支援表示であるので、制御関係要求よりも小さく表示する。制御関係要求と、表示領域Qに表示する支援表示との表示タイミングが重なった場合にも、制御関係要求の方を大きく表示するので、制御関係要求の方が目立つことになる。なお、制御関係要求を表示させる場合に、表示領域Qに支援表示を表示させない構成としてもよい。
また、制御関係提案,非制御関係提案,情報提供は、表示領域Qが共通であるので、表示タイミングが重なった場合には、優先度の高い種類の支援情報を先に表示する。非制御関係提案と情報提供との表示タイミングが重なった場合には、非制御関係提案を先に表示することになる(図18のR参照)。これにより、制御関係提案,非制御関係提案,情報提供のうちの優先度の高い支援表示ほど先にドライバの目にとまるようになる。図18で例を示す構成によれば、優先度の最も高い支援表示を大きく表示する表示領域を確保して最も目立つようにしつつ、優先度がより低い種類の支援表示の群についても、優先度がより高いものは先に表示することで少ない表示領域を有効に活用することができる。
(実施形態2)
実施形態1及び変形例1~9では、車両側ユニット1と携帯端末2とが近距離無線通信によって情報をやり取りする構成を示したが、必ずしもこれに限らない。例えば、車両HVの外部の機器を介して間接的に接続して通信を行うことにより情報をやり取りする構成(以下、実施形態2)としてもよい。
実施形態1及び変形例1~9では、車両側ユニット1と携帯端末2とが近距離無線通信によって情報をやり取りする構成を示したが、必ずしもこれに限らない。例えば、車両HVの外部の機器を介して間接的に接続して通信を行うことにより情報をやり取りする構成(以下、実施形態2)としてもよい。
以下、本開示の実施形態2の構成の一例について説明する。図19に示すように、実施形態2の支援システム3は、車両側ユニット1a、携帯端末2a、及びサーバ装置4を含む。車両側ユニット1aは、HMIシステム10の代わりにHMIシステム10aを含む点と通信機20の代わりに通信機20aを含む点とを除けば、実施形態1の車両側ユニット1と同様である。携帯端末2aは、主制御部200の代わりに主制御部200aを備える点と、通信部230の代わりに通信部230aを備える点とを除けば、実施形態1の携帯端末2と同様である。
車両側ユニット1aと携帯端末2aとは、サーバ装置4を介して間接的に接続して通信を行う。車両側ユニット1a及び携帯端末2aとサーバ装置4とは、携帯電話網,インターネット等の公共通信網を介して通信を行う構成とすればよい。サーバ装置4は、車両側ユニット1aから受信した情報を携帯端末2aに送信する一方、携帯端末2aから受信した情報を車両側ユニット1aに送信する。このサーバ装置4が車両の外部の機器に相当する。
まず、図20を用いて、車両側ユニット1aの概略構成を説明する。車両側ユニット1aは、HMIシステム10a、通信機20a、ADASロケータ30、車両制御ECU40、周辺監視センサ50、及び自動運転ECU60を含んでいる。HMIシステム10aは、HCU11の代わりにHCU11aを備える点を除けば、実施形態1のHMIシステム10と同様である。
通信機20aは、サーバ装置4と公衆通信網を介した通信を行うための通信モジュールである。通信機20aは、サーバ装置4から受信した情報を車内LANに出力するとともに、車内LANを介してHCU11aから送信されてきた情報をサーバ装置4へ送信する。
HCU11aは、図21に示すように、接続判定部111a、要否判定部112、送信処理部113、受信処理部114、及び提示制御部115を備えている。HCU11aは、接続判定部111の代わりに接続判定部111aを備えている点を除けば、実施形態1のHCU11と同様である。接続判定部111aは、通信機20の状態をモニタし、サーバ装置4を介して携帯端末2と接続可能か否かを判定する。
続いて、図22を用いて、携帯端末2aの概略構成を説明する。携帯端末2aは、主制御部200a、表示部210、操作入力部220、及び通信部230aを備えている。主制御部200aは、機能ブロックとして表示制御部201a、操作判定部202、及び車両内判定部203を備えている。主制御部200aは、表示制御部201の代わりに表示制御部201aを備える点と車両内判定部203を備える点とを除けば、実施形態1の主制御部200と同様である。
通信部230aは、サーバ装置4を介して車両側ユニット1aの通信機20aと通信を行う。通信部230aは、通信機20aから要求通知を受信した場合に、受信した要求通知を主制御部200aに出力する。また、通信部230aは、主制御部200aから携帯操作情報が出力された場合に、この情報を通信機20aへ送信する。
車両内判定部203は、携帯端末2aが車両内で用いられているか否かを判定する。一例として、携帯端末2aがGPS機能等の測位機能を有している場合には、以下のようにすればよい。例えば、車両内判定部203は、この測位機能によって逐次検出した自端末の位置の時間変化量から自端末の移動速度を算出する。そして、算出した移動速度が閾値以上であった場合に、携帯端末2aが車両内で用いられていると判定する。ここで言うところの閾値とは、歩行及び自転車による移動では検出されない程度に高い速度とすればよい。他の例としては、携帯端末2aを車両HVに持ち込んだことを示す操作入力を操作入力部220で受け付けた場合に、車両内判定部203が、携帯端末2aが車両内で用いられていると判定する構成としてもよい。
実施形態2の操作判定部202は、車両内判定部203で携帯端末2aが車両内で用いられていると判定している場合であって、且つ、通信部230から出力される要求通知を取得した場合に、自端末が操作中か否かを判定する。一方、車両内判定部203で携帯端末2aが車両内で用いられていないと判定している場合、若しくは通信部230から出力される要求通知を取得していない場合には、自端末が操作中か否かを判定しない。これにより、携帯端末2aが車両内で用いられていない場合にまで、携帯端末2aで支援表示が行われることを防ぐことが可能になる。
実施形態2の構成であっても、要求通知を車両側ユニット1aから携帯端末2aが受信した場合であって、且つ、携帯端末2aで自端末が操作中と判定した場合に、支援表示を携帯端末2aの表示部210で行う。よって、実施形態1の構成と同様に、ドライバが車両HVに持ち込んだ携帯端末2aの操作を行っている場合であっても、自動運転時において必要となったドライバ動作の実行をよりスムーズに行わせることが可能になる。
(変形例10)
前述の実施形態及び変形例では、携帯端末2,2aが、要求通知を受信した場合に、操作判定部202での判定結果を車両側ユニット1,1aへ送信する構成を示したが、必ずしもこれに限らない。例えば、携帯端末2,2aで要求通知を受信した場合に、操作判定部202での判定結果(つまり、携帯操作情報)を携帯端末2,2aから車両側ユニット1,1aへ送信しない構成(以下、変形例10)としてもよい。
前述の実施形態及び変形例では、携帯端末2,2aが、要求通知を受信した場合に、操作判定部202での判定結果を車両側ユニット1,1aへ送信する構成を示したが、必ずしもこれに限らない。例えば、携帯端末2,2aで要求通知を受信した場合に、操作判定部202での判定結果(つまり、携帯操作情報)を携帯端末2,2aから車両側ユニット1,1aへ送信しない構成(以下、変形例10)としてもよい。
変形例10を採用する場合には、車両側ユニット1,1aのHCU11,11aにおける携帯機操作情報を用いた処理を省略する構成とすればよい。つまり、携帯端末2,2aを操作中か否かに関わらず、支援提示を行わせる構成とすればよい。この場合、提示制御部115は、要否判定部112でドライバによる操作が必要となったと判定した場合であって、且つ、接続判定部111,111aで携帯端末2,2aと接続可能でないと判定した場合に、支援提示を行わせる構成とすればよい。また、要否判定部112でドライバによる操作が必要となったと判定した場合であって、且つ、接続判定部111,111aで携帯端末2,2aと接続可能であると判定した場合には、支援提示を行わせない構成とすればよい。
(変形例11)
前述の実施形態及び変形例では、提示制御部115が、接続判定部111,111aで携帯端末2,2aと接続可能であると判定されたか否かによって、支援提示を行うか否かを変更する構成を示したが、必ずしもこれに限らない。例えば、車両側ユニット1,1aの通信機20,20aと携帯端末2,2aとが接続可能か否かに関わらず、支援提示を行わせる構成としてもよい。この場合、HCU11,11aは接続判定部111,111aを備えない構成としてもよい。
前述の実施形態及び変形例では、提示制御部115が、接続判定部111,111aで携帯端末2,2aと接続可能であると判定されたか否かによって、支援提示を行うか否かを変更する構成を示したが、必ずしもこれに限らない。例えば、車両側ユニット1,1aの通信機20,20aと携帯端末2,2aとが接続可能か否かに関わらず、支援提示を行わせる構成としてもよい。この場合、HCU11,11aは接続判定部111,111aを備えない構成としてもよい。
また、通信機20,20aと携帯端末2,2aとが接続可能か否かに関わらず表示装置14からの支援提示は行わせる一方、通信機20,20aと携帯端末2,2aとが接続可能であるか否かに応じて音声出力装置15からの支援提示を行うか否かは変更する構成としてもよい。詳しくは、通信機20,20aと携帯端末2,2aとが接続可能である場合には、音声出力装置15からの支援提示を行わせない一方、通信機20,20aと携帯端末2,2aとが接続可能でない場合には音声出力装置15からの支援提示を行わせる構成とすればよい。これは、携帯端末2,2aを操作中のドライバにとって、表示装置14からの支援提示は目につきにくいためにわずらわしさが生じにくいが、音声出力装置15からの支援提示は耳に入るためにわずらわしさが生じやすいと考えられるためである。
(実施形態3)
前述の実施形態及び変形例では、携帯端末2が操作中か否かを携帯端末2で判定する構成を示したが、必ずしもこれに限らない。例えば、車両側ユニット1で判定する構成(以下、実施形態3)としてもよい。
前述の実施形態及び変形例では、携帯端末2が操作中か否かを携帯端末2で判定する構成を示したが、必ずしもこれに限らない。例えば、車両側ユニット1で判定する構成(以下、実施形態3)としてもよい。
以下、本開示の実施形態3の構成の一例について説明する。実施形態3の支援システム3は、車両側ユニット1、及び携帯端末2bを含む。実施形態3の車両側ユニット1は、HCU11の代わりにHCU11aを含む点を除けば、実施形態1の車両側ユニット1と同様である。携帯端末2bは、主制御部200の代わりに主制御部200bを備える点と、操作判定部202の代わりに操作情報取得部204を備える点とを除けば、実施形態1の携帯端末2と同様である。
まず、図23を用いて、携帯端末2bの概略構成を説明する。携帯端末2bは、主制御部200b、表示部210、操作入力部220、及び通信部230を備えている。主制御部200bは、機能ブロックとして表示制御部201b及び操作情報取得部204を備えている。主制御部200bは、表示制御部201の代わりに表示制御部201bを備える点と、操作判定部202を備えない代わりに操作情報取得部204を備える点とを除けば、実施形態1の主制御部200と同様である。
操作情報取得部204は、通信部230から出力される要求通知を取得した場合に、携帯端末2bが操作中か否かをHCU11bで判定できる情報(以下、判定用情報)を取得する。判定用情報の一例としては、表示制御部201がスリープモードに移行しているか否かの情報,操作入力部220で操作入力を受け付けているか否かの情報等がある。
表示制御部201bは、通信部230から出力される後述の支援指示を取得した場合に、支援表示を表示部210に行わせる。一方、支援指示を取得していない場合には、表示制御部201bは支援表示を表示部210に行わせない。
続いて、図24を用いて、HCU11bの概略構成を説明する。HCU11bは、要否判定部112、送信処理部113b、受信処理部114b、提示制御部115b、及び操作判定部116を備えている。HCU11bは、送信処理部113、受信処理部114、及び提示制御部115の代わりに送信処理部113b、受信処理部114b、及び提示制御部115bを備える点と、接続判定部111を備えない代わりに操作判定部116を備える点とを除けば、実施形態1のHCU11と同様である。
送信処理部113bは、要求通知を要否判定部112から取得した場合に、通信機20から携帯端末2bへ要求通知を送信させる。また、送信処理部113bは、提示制御部115bから支援表示を行わせる指示(以下、支援指示)を取得した場合に、この支援指示を通信機20から携帯端末2bへ送信させる。この送信処理部113bが指示処理部に相当する。
受信処理部114bは、通信機20で携帯端末2bから送信される判定用情報を受信した場合に、この判定用情報を取得して、操作判定部116に出力する。この受信処理部114bが判定情報取得部に相当する。操作判定部116は、受信処理部114から判定用情報が出力されてきた場合に、この判定用情報をもとに携帯端末2bが操作中か否かを、操作判定部202と同様にして判定する。
提示制御部115bは、操作判定部116で携帯端末2bが操作中であると判定した場合に、支援指示を送信処理部113bに出力する。一方、操作判定部116で携帯端末2bが操作中でないと判定した場合には、支援指示を送信処理部113bに出力しない。こにより、操作判定部116で携帯端末2bが操作中であると判定した場合には、支援指示が携帯端末2bへ送信され、携帯端末2bの表示部210に支援表示が行われることになる。
また、提示制御部115bは、要否判定部112でドライバによる操作が必要となったと判定した場合に、条件に応じて支援提示を行わせる。一例としては、送信処理部113bから要求通知を送信させてから所定時間経過しても、判定用情報を受信処理部114bで受信できない場合に、表示装置14及び/又は音声出力装置15で支援提示を行わせる。ここで言うところの所定時間とは、通信機20と携帯端末2bとが接続されている場合における、要求通知に応じて判定用情報を返信するのにかかる時間よりも長い時間とすればよい。提示制御部115bは、操作判定部116で携帯端末2bが操作中でないと判定した場合にも、表示装置14及び/又は音声出力装置15で支援提示を行わせる。一方、操作判定部116で携帯端末2bが操作中であると判定した場合には、表示装置14及び/又は音声出力装置15で支援提示を行わせない。
実施形態2の構成であっても、要求通知を車両側ユニット1aから携帯端末2aが受信した場合であって、且つ、携帯端末2aが操作中とHCU11bで判定した場合に、支援表示を携帯端末2aの表示部210で行う。よって、実施形態1の構成と同様に、ドライバが車両HVに持ち込んだ携帯端末2aの操作を行っている場合であっても、自動運転時において必要となったドライバ動作の実行をよりスムーズに行わせることが可能になる。
(変形例12)
前述の実施形態及び変形例では、表示装置14だけでなく音声出力装置15からも支援提示を行わせる構成を示したが、必ずしもこれに限らない。例えば、音声出力装置15からは支援提示を行わせない構成としてもよい。
前述の実施形態及び変形例では、表示装置14だけでなく音声出力装置15からも支援提示を行わせる構成を示したが、必ずしもこれに限らない。例えば、音声出力装置15からは支援提示を行わせない構成としてもよい。
ここで、この出願に記載されるフローチャート、あるいは、フローチャートの処理は、複数のセクション(あるいはステップと言及される)から構成され、各セクションは、たとえば、S1と表現される。さらに、各セクションは、複数のサブセクションに分割されることができる、一方、複数のセクションが合わさって一つのセクションにすることも可能である。さらに、このように構成される各セクションは、デバイス、モジュール、ミーンズとして言及されることができる。
本開示は、実施例に準拠して記述されたが、本開示は当該実施例や構造に限定されるものではないと理解される。本開示は、様々な変形例や均等範囲内の変形をも包含する。加えて、様々な組み合わせや形態、さらには、それらに一要素のみ、それ以上、あるいはそれ以下、を含む他の組み合わせや形態をも、本開示の範疇や思想範囲に入るものである。
Claims (13)
- 加速、制動、及び操舵を自動で制御する自動運転を行うとともに、前記自動運転時においてドライバによる操作、回答、及び確認の少なくともいずれかであるドライバ動作が必要となることがある車両で用いられる車載装置(11,11a,11b,20,20a)と、
前記車両のドライバに携行されるとともに前記車載装置と接続して通信を行う携帯端末(2,2a,2b)とを含み、
前記車載装置及び前記携帯端末のいずれかは、前記携帯端末が操作中か否かを判定する操作判定部(202,116)を備え、
前記携帯端末は、前記自動運転時において前記ドライバ動作が必要となった場合であって、且つ、前記操作判定部で前記携帯端末が操作中と判定した場合に、前記自動運転時において必要となった前記ドライバ動作の実行を支援する旨の支援表示を行う表示部(210)を備える支援システム。 - 請求項1において、
前記車載装置(11,11a,20,20a)は、前記自動運転時において前記ドライバ動作が必要となった場合であって、且つ、前記携帯端末と接続可能である場合に、前記ドライバ動作が必要となったことを示す要求通知を前記携帯端末に送信させる通知処理部(113)を備え、
前記携帯端末は、前記操作判定部(202)を備えるものであり、
前記操作判定部は、前記要求通知を前記携帯端末で受信した場合に、前記携帯端末が操作中か否かを判定し、
前記表示部は、前記操作判定部で前記携帯端末が操作中と判定した場合に、前記支援表示を行う支援システム。 - 請求項1において、
前記車載装置(11b,20)は、
前記自動運転時において前記ドライバ動作が必要となった場合であって、且つ、前記携帯端末と接続可能である場合に、前記携帯端末が操作中か否かを判定できる判定用情報を前記携帯端末から取得する判定情報取得部(114b)と、
前記操作判定部(116)とを備え、
前記操作判定部は、前記判定情報取得部で取得した前記判定用情報をもとに前記携帯端末が操作中か否かを判定するものであり、
前記操作判定部で前記携帯端末が操作中と判定した場合に、前記支援表示を行わせる指示を前記携帯端末に送信させる指示処理部(113b)をさらに備え、
前記携帯端末(2b)の前記表示部は、前記指示処理部によって送信された前記指示を前記携帯端末で受信した場合に、前記支援表示を行う支援システム。 - 請求項1~3のいずれか1項において、
前記車載装置(11,11b,20)と前記携帯端末(2,2b)とは直接的に接続して近距離無線通信を行う支援システム。 - 請求項2において、
前記車載装置(11a,20a)と前記携帯端末(2a)とは前記車両の外部の機器(4)を介して間接的に接続して通信を行うものであり、
前記携帯端末は、
前記携帯端末が車両内で用いられているか否かを判定する車両内判定部(203)を備え、
前記操作判定部は、前記要求通知を前記携帯端末で受信した場合であって、且つ、前記車両内判定部で前記携帯端末が車両内で用いられていると判定した場合に、前記携帯端末が操作中か否かを判定する支援システム。 - 請求項1~5のいずれか1項において、
前記支援表示としては、優先度の高いものから順に、車両制御についてドライバへの操作の要求を行うものである制御関係要求、車両制御についてドライバへの提案を行うものである制御関係提案、ドライバへ車両制御に関わらない提案を行うものである非制御関係提案、及びドライバへ情報の提供を行うものである情報提供の少なくともいずれかを含み、
前記表示部は、複数種類の前記支援表示の表示タイミングが重なった場合には、前記優先度の高いものを優先して表示する支援システム。 - 請求項6において、
前記表示部は、前記制御関係要求と前記制御関係要求以外の種類の前記支援表示とを同時に表示する場合には、前記制御関係要求を、前記制御関係要求以外の種類の前記支援表示よりも大きく表示する支援システム。 - 請求項7において、
前記表示部は、前記制御関係要求以外の種類の前記支援表示を表示する表示領域が同じものであって、前記制御関係要求以外の種類の前記支援表示を同時に表示する場合には、前記優先度の高いものから先に表示する支援システム。 - 請求項1~8のいずれか1項において、
前記自動運転時において前記ドライバ動作が必要となる場合とは、前記自動運転からドライバが手動で運転操作を行う手動運転に切り替わる場合を少なくとも含むものであり、
前記表示部は、前記自動運転から前記手動運転に切り替わる場合であって、且つ、前記操作判定部で前記携帯端末が操作中と判定した場合に、前記自動運転から前記手動運転への運転交代を支援する旨の前記支援表示を行う支援システム。 - 請求項1~9のいずれか1項において、
前記自動運転時において前記ドライバ動作が必要となる場合とは、前記自動運転時においてドライバによる回答若しくは確認が必要となる場合を少なくとも含むものであり、
前記表示部は、前記操作判定部で前記携帯端末が操作中と判定した場合に、ドライバに回答若しくは確認を求める問い合わせを支援する旨の前記支援表示を行う支援システム。 - 請求項1~10のいずれか1項において、
前記車載装置は、
音声出力装置から音声を出力させる音声出力処理部(115)を備え、
前記音声出力処理部は、前記自動運転時において前記ドライバ動作が必要となった場合に、前記携帯端末と接続可能でない場合には、前記自動運転時において必要となった前記ドライバ動作の実行を支援する旨の音声を出力させる一方、
前記音声出力処理部は、前記自動運転時において前記ドライバ動作が必要となった場合に、前記携帯端末と接続可能であって、且つ、前記操作判定部で前記携帯端末が操作中と判定した場合には、前記自動運転時において必要となった前記ドライバ動作の実行を支援する旨の音声を出力させない支援システム。 - 車両のドライバに携行される携帯端末であって、
加速、制動、及び操舵を自動で制御する自動運転を行うとともに、前記自動運転時においてドライバによる操作、回答、及び確認の少なくともいずれかであるドライバ動作が必要となることがある前記車両で用いられ、前記自動運転時において前記ドライバ動作が必要となった場合に前記ドライバ動作が必要となったことを示す要求通知を送信させる車載装置(11,20,11a,20a)と接続して通信を行う通信部(230,230a)と、
前記要求通知を前記通信部で受信した場合に、自端末が操作中か否かを判定する操作判定部(202)と、
前記操作判定部で前記携帯端末が操作中と判定した場合に、前記自動運転時において必要となった前記ドライバ動作の実行を支援する旨の支援表示を行う表示部(210)とを備える携帯端末。 - 加速、制動、及び操舵を自動で制御する自動運転を行うとともに、前記自動運転時においてドライバによる操作、回答、及び確認の少なくともいずれかであるドライバ動作が必要となることがある車両で用いられ、前記車両のドライバに携行される携帯端末(2b)と接続して通信を行う車載装置(11b,20)であって、
前記自動運転時において前記ドライバ動作が必要となった場合であって、且つ、前記携帯端末と接続可能である場合に、前記携帯端末が操作中か否かを判定できる判定用情報を前記携帯端末から取得する判定情報取得部(114b)と、
前記判定情報取得部で取得した前記判定用情報をもとに前記携帯端末が操作中か否かを判定する操作判定部(116)と、
前記操作判定部で前記携帯端末が操作中と判定した場合に、前記自動運転時において必要となった前記ドライバ動作の実行を支援する旨の支援表示を行わせる指示を前記携帯端末に送信させる指示処理部(113b)とを備える車載装置。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE112017002235.5T DE112017002235T5 (de) | 2016-04-27 | 2017-02-28 | Assistenzsystem, tragbares Terminal und fahrzeugtechnische Vorrichtung |
US16/096,051 US20190126942A1 (en) | 2016-04-27 | 2017-02-28 | Assistance system, portable terminal, and vehicular device |
Applications Claiming Priority (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016089756 | 2016-04-27 | ||
JP2016-089756 | 2016-04-27 | ||
JP2016-234372 | 2016-12-01 | ||
JP2016234372A JP6508177B2 (ja) | 2016-04-27 | 2016-12-01 | 支援システム、携帯端末、及び車載装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
WO2017187759A1 true WO2017187759A1 (ja) | 2017-11-02 |
Family
ID=60160299
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
PCT/JP2017/007589 WO2017187759A1 (ja) | 2016-04-27 | 2017-02-28 | 支援システム、携帯端末、及び車載装置 |
Country Status (1)
Country | Link |
---|---|
WO (1) | WO2017187759A1 (ja) |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2021002081A1 (ja) * | 2019-07-02 | 2021-01-07 | 株式会社デンソー | 表示制御装置及び表示制御プログラム |
JP2021009133A (ja) * | 2019-07-02 | 2021-01-28 | 株式会社デンソー | 表示制御装置及び表示制御プログラム |
CN112389463A (zh) * | 2019-08-14 | 2021-02-23 | 丰田自动车株式会社 | 自动驾驶系统、便携式终端及行驶控制装置 |
CN113715790A (zh) * | 2020-05-25 | 2021-11-30 | 现代自动车株式会社 | 用于控制自动驾驶车辆的应急停车的方法 |
US20210370984A1 (en) * | 2020-05-28 | 2021-12-02 | Zenuity Ab | System and method for estimating take-over time |
CN114162138A (zh) * | 2020-09-10 | 2022-03-11 | 中国移动通信有限公司研究院 | 自动驾驶模式切换方法及装置 |
US11866073B2 (en) | 2018-04-26 | 2024-01-09 | Sony Semiconductor Solutions Corporation | Information processing device, information processing system, and information processing method for wearable information terminal for a driver of an automatic driving vehicle |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2013128226A (ja) * | 2011-12-19 | 2013-06-27 | Daimler Ag | 携帯端末使用制限装置 |
JP2015210660A (ja) * | 2014-04-25 | 2015-11-24 | 日産自動車株式会社 | 情報呈示装置及び情報呈示方法 |
WO2016013153A1 (ja) * | 2014-07-24 | 2016-01-28 | 株式会社デンソー | 車両用報知システム、報知制御装置、及び報知装置 |
JP2016090274A (ja) * | 2014-10-30 | 2016-05-23 | トヨタ自動車株式会社 | 警報装置、警報システム及び携帯端末 |
-
2017
- 2017-02-28 WO PCT/JP2017/007589 patent/WO2017187759A1/ja active Application Filing
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2013128226A (ja) * | 2011-12-19 | 2013-06-27 | Daimler Ag | 携帯端末使用制限装置 |
JP2015210660A (ja) * | 2014-04-25 | 2015-11-24 | 日産自動車株式会社 | 情報呈示装置及び情報呈示方法 |
WO2016013153A1 (ja) * | 2014-07-24 | 2016-01-28 | 株式会社デンソー | 車両用報知システム、報知制御装置、及び報知装置 |
JP2016090274A (ja) * | 2014-10-30 | 2016-05-23 | トヨタ自動車株式会社 | 警報装置、警報システム及び携帯端末 |
Cited By (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11866073B2 (en) | 2018-04-26 | 2024-01-09 | Sony Semiconductor Solutions Corporation | Information processing device, information processing system, and information processing method for wearable information terminal for a driver of an automatic driving vehicle |
WO2021002081A1 (ja) * | 2019-07-02 | 2021-01-07 | 株式会社デンソー | 表示制御装置及び表示制御プログラム |
JP2021009133A (ja) * | 2019-07-02 | 2021-01-28 | 株式会社デンソー | 表示制御装置及び表示制御プログラム |
JP7173078B2 (ja) | 2019-07-02 | 2022-11-16 | 株式会社デンソー | 表示制御装置及び表示制御プログラム |
CN112389463A (zh) * | 2019-08-14 | 2021-02-23 | 丰田自动车株式会社 | 自动驾驶系统、便携式终端及行驶控制装置 |
CN112389463B (zh) * | 2019-08-14 | 2024-02-23 | 丰田自动车株式会社 | 自动驾驶系统、便携式终端及行驶控制装置 |
CN113715790A (zh) * | 2020-05-25 | 2021-11-30 | 现代自动车株式会社 | 用于控制自动驾驶车辆的应急停车的方法 |
US20210370984A1 (en) * | 2020-05-28 | 2021-12-02 | Zenuity Ab | System and method for estimating take-over time |
US12054181B2 (en) * | 2020-05-28 | 2024-08-06 | Zenuity Ab | System and method for estimating take-over time |
CN114162138A (zh) * | 2020-09-10 | 2022-03-11 | 中国移动通信有限公司研究院 | 自动驾驶模式切换方法及装置 |
CN114162138B (zh) * | 2020-09-10 | 2023-10-27 | 中国移动通信有限公司研究院 | 自动驾驶模式切换方法及装置 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6508177B2 (ja) | 支援システム、携帯端末、及び車載装置 | |
WO2017187759A1 (ja) | 支援システム、携帯端末、及び車載装置 | |
AU2018323983B2 (en) | Identifying unassigned passengers for autonomous vehicles | |
JP6773046B2 (ja) | 運転支援装置及び運転支援方法、並びに移動体 | |
JP6310565B2 (ja) | 運転支援装置 | |
WO2020035896A1 (ja) | 車両の走行制御方法及び走行制御装置 | |
JP6695999B2 (ja) | 車両制御システム、車両制御方法、および車両制御プログラム | |
JP5888407B2 (ja) | 運転支援装置 | |
JP4524673B2 (ja) | 自走車用安全交通管理システム、自走車用安全交通管理方法、及びそのプログラム | |
JP7039940B2 (ja) | 車両制御装置 | |
JP6532170B2 (ja) | 車両制御システム、車両制御方法、および車両制御プログラム | |
CN109416877B (zh) | 驾驶辅助方法、驾驶辅助装置、驾驶辅助系统 | |
CN112601689A (zh) | 车辆的行驶控制方法及行驶控制装置 | |
US20210046949A1 (en) | Automated driving system, portable device and travel control device | |
JP2019008587A (ja) | 自動連携システム | |
US20240336266A1 (en) | Driving assistance device, driving assistance method, and storage medium | |
WO2018105027A1 (ja) | 自動運転支援装置 | |
JP2022104040A (ja) | 車両制御装置、車両制御方法、およびプログラム | |
JP6787299B2 (ja) | 警報制御装置、警報制御方法、および警報制御のためのプログラム | |
EP4102323B1 (en) | Vehicle remote control device, vehicle remote control system, vehicle remote control method, and vehicle remote control program | |
JP2018165078A (ja) | 車両の制御システム及び自動追従システム | |
WO2024181081A1 (ja) | 車両用制御装置及び車両用制御方法 | |
CN113939856A (zh) | 包括通信适配器和协调设备的通信系统及通信适配器、协调设备和执行通信的方法 | |
WO2023085114A1 (ja) | 車両用制御装置及び車両用制御方法 | |
JP7573672B2 (ja) | 車両制御装置、車両制御方法、およびプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 17789048 Country of ref document: EP Kind code of ref document: A1 |
|
122 | Ep: pct application non-entry in european phase |
Ref document number: 17789048 Country of ref document: EP Kind code of ref document: A1 |