+

WO2018180121A1 - 情報処理装置と情報処理方法 - Google Patents

情報処理装置と情報処理方法 Download PDF

Info

Publication number
WO2018180121A1
WO2018180121A1 PCT/JP2018/007213 JP2018007213W WO2018180121A1 WO 2018180121 A1 WO2018180121 A1 WO 2018180121A1 JP 2018007213 W JP2018007213 W JP 2018007213W WO 2018180121 A1 WO2018180121 A1 WO 2018180121A1
Authority
WO
WIPO (PCT)
Prior art keywords
information
driving
unit
dangerous driving
dangerous
Prior art date
Application number
PCT/JP2018/007213
Other languages
English (en)
French (fr)
Inventor
淳史 野田
章人 大里
洋貴 鈴木
英行 松永
Original Assignee
ソニー株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ソニー株式会社 filed Critical ソニー株式会社
Priority to JP2019509020A priority Critical patent/JP7074125B2/ja
Priority to US16/496,657 priority patent/US11235783B2/en
Publication of WO2018180121A1 publication Critical patent/WO2018180121A1/ja

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K28/00Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions
    • B60K28/02Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions responsive to conditions relating to the driver
    • B60K28/06Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions responsive to conditions relating to the driver responsive to incapacity of driver
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07CTIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C5/00Registering or indicating the working of vehicles
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B60W2040/0818Inactivity or incapacity of driver
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2510/00Input parameters relating to a particular sub-units
    • B60W2510/06Combustion engines, Gas turbines
    • B60W2510/0638Engine speed
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2520/00Input parameters relating to overall vehicle dynamics
    • B60W2520/28Wheel speed
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00Input parameters relating to occupants
    • B60W2540/10Accelerator pedal position
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00Input parameters relating to occupants
    • B60W2540/12Brake pedal position
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00Input parameters relating to occupants
    • B60W2540/18Steering angle
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00Input parameters relating to occupants
    • B60W2540/229Attention level, e.g. attentive to driving, reading or sleeping
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00Input parameters relating to occupants
    • B60W2540/26Incapacity

Definitions

  • This technology allows information processing apparatuses and information processing methods to be notified of a situation when a dangerous driving is determined together with a dangerous driving determination result.
  • driving information including control information such as vehicle speed, start / brake, acceleration / deceleration, and steering is transmitted from the in-vehicle device to the server.
  • the server determines the driving situation using the received driving information, and transmits award penalty points according to the determination result to the in-vehicle device that is the driving information transmission source.
  • an accident risk is analyzed based on driving information, and an insurance premium rate is calculated based on the analysis result.
  • the first aspect of this technology is A dangerous driving determination unit that determines whether it is dangerous driving based on driving information;
  • the information processing apparatus includes a supplementary information acquisition unit that acquires situation supplementary information when the dangerous driving determination unit determines that the driving is dangerous.
  • the dangerous driving determination unit determines that the information acquisition instruction of the situation supplementary information is determined to be dangerous driving immediately after it is determined to be dangerous driving immediately after it is determined to be dangerous driving. This is performed with an image or sound when the vehicle stops or when traveling with low driving difficulty, or at the end of driving after it is determined to be dangerous driving.
  • the supplementary information acquisition unit presents driving information when it is determined that the driving is dangerous.
  • the driving information includes, for example, a peripheral captured image, and the supplementary information acquisition unit performs subject recognition using the peripheral captured image, and presents a peripheral captured image by attaching a tag to the recognized subject in the information acquisition instruction.
  • the supplementary information acquisition unit issues an information acquisition instruction to the passenger.
  • the supplementary information acquisition unit acquires, as situation supplementary information, driving information of surrounding vehicles when it is determined that the driving is dangerous using a communication unit that communicates with external devices such as surrounding vehicles. May be.
  • the acquired situation supplement information is recorded in the information recording unit in association with the dangerous driving judgment result. Further, the dangerous driving determination result includes driving information for a predetermined time with reference to the timing determined as dangerous driving.
  • the dangerous driving determination result and the situation supplement information are information transmitted at a predetermined transmission timing by the information transmission unit, for example, a preset date and time, a predetermined period of time has elapsed, a request for information is transmitted at the time of transmission instruction, or information recorded in the information recording unit Is transmitted to the information management apparatus at any timing when the value reaches the predetermined amount.
  • the second aspect of this technology is Based on the driving information, it is determined whether it is dangerous driving by the dangerous driving determination unit,
  • the supplementary information acquisition unit acquires situation supplementary information when the dangerous driving determination unit determines that it is dangerous driving.
  • the situation supplement information is acquired when it is determined as dangerous driving based on the driving information. Therefore, the information management apparatus can be notified of the situation when the dangerous driving is determined by the situation supplement information together with the dangerous driving determination result. Note that the effects described in the present specification are merely examples and are not limited, and may have additional effects.
  • FIG. 3 is a flowchart illustrating an operation of the information processing apparatus. It is a flowchart which shows operation
  • FIG. 3 is a block diagram which shows an example of a schematic structure of a vehicle control system. It is explanatory drawing which shows an example of the installation position of a vehicle exterior information detection part and an imaging part. It is the figure which illustrated the image which provided the tag. It is the figure which illustrated the composition of the information management device.
  • FIG. 1 illustrates a configuration of an information collection system using an information processing apparatus of the present technology.
  • the information collection system 10 includes a driving information generation unit 20, an information processing device 30, and an information management device 40.
  • the driving information generation unit 20 sequentially generates various information indicating the driving state of the vehicle as driving information.
  • the driving information generation unit 20 includes information indicating the date and time when the information indicating the driving state is acquired in the driving information.
  • the driving information generation unit 20 may include position information indicating the acquisition position of information indicating the driving state in the driving information.
  • the driving information generation unit 20 outputs the generated driving information to the information processing device 30.
  • the information processing apparatus 30 includes a dangerous driving determination unit 31, a supplementary information acquisition unit 32, an information recording unit 33, and an information communication unit 34.
  • the information processing apparatus 30 may have either a configuration fixed to the vehicle or a detachable configuration.
  • the information processing device 30 may be provided separately from the vehicle, and may be configured to acquire driving information from the vehicle by communication with the vehicle.
  • the dangerous driving determination unit 31 determines whether the driving is dangerous driving based on the driving information generated by the driving information generation unit 20 and outputs the dangerous driving determination result to the supplementary information acquisition unit 32. Further, the dangerous driving determination unit 31 includes vehicle information (such as a vehicle number) or driver information (such as a license number) in the dangerous driving determination result so that the vehicle or the driver can be identified. Furthermore, the dangerous driving determination unit 31 may include driving information for a predetermined period, for example, a predetermined period before and after the timing determined as dangerous driving, in the dangerous driving determination result.
  • the supplementary information acquisition unit 32 acquires situation supplementary information when the dangerous driving determination unit 31 determines that it is dangerous driving.
  • the supplementary information acquisition unit 32 may acquire the situation supplement information manually or may acquire the situation supplement information automatically.
  • the supplementary information acquisition unit 32 notifies the user (driver or passenger) of an image or voice that it has been determined that the driving is dangerous. Further, the supplementary information acquisition unit 32 notifies the user that the objection to the dangerous driving determination is accepted as situation supplementary information.
  • the supplementary information acquisition unit 32 acquires objections indicated by images, voices, characters, and the like as situation supplementary information using a camera, a microphone, a touch panel, and the like.
  • the supplementary information acquisition unit 32 When the supplementary information acquisition unit 32 automatically acquires the situation supplementary information, the supplementary information acquisition unit 32 communicates with, for example, a vehicle located in the vicinity (hereinafter referred to as a “peripheral vehicle”) in response to the determination that the driving is dangerous. Information, peripheral captured images acquired by surrounding vehicles, and the like are acquired as situation supplement information.
  • the supplementary information acquisition unit 32 communicates with, for example, a monitoring camera installed in the vicinity in response to the determination that the driving is dangerous, and acquires a captured image generated by the monitoring camera as situation supplementary information. Also good.
  • the supplementary information acquisition unit 32 outputs the acquired situation supplementary information to the information recording unit 33 in association with the dangerous driving determination result.
  • the association indicates that the situation supplement information related to the dangerous driving determination result can be referred to when the dangerous driving determination result is used.
  • the dangerous driving determination result and the situation supplement information are collected as the same file, and even if the dangerous driving determination result and the situation supplement information are separate files, the situation supplement information corresponding to the reading of the dangerous driving determination result is not provided. Including readability.
  • the information recording unit 33 records the dangerous driving determination result and the situation supplement information associated with the dangerous driving determination result on the recording medium.
  • the recording medium may be fixed to the information recording unit 33 or may be detachable.
  • the information communication unit 34 acquires the dangerous driving determination result and the situation supplement information from the information recording unit 33 and transmits the result to the information management device 40 at a predetermined transmission timing. For example, the information communication unit 34 performs a preset date and time, a timing when a transmission request is received from the information management device 40, or a timing instructed by the driver.
  • the information management device 40 acquires the dangerous driving determination result and the situation supplement information from the information processing device 30.
  • the dangerous driving determination result and the situation supplement information may be acquired through the information communication unit 34 or may be performed using a recording medium.
  • the information management device 40 determines the validity of the dangerous driving determination result based on the situation supplement information, and even if it is determined that the dangerous driving is based on the driving information, the information management device 40 can perform an appropriate driving operation or the like based on the situation supplement information. When it is clear that there has been a risk, the judgment of dangerous driving is invalidated.
  • FIG. 2 is a flowchart illustrating the operation of the information processing apparatus.
  • the information processing apparatus acquires driving information.
  • the dangerous driving determination unit 31 of the information processing apparatus acquires driving information indicating the driving status of the vehicle from the driving information generation unit 20, and proceeds to step ST2.
  • step ST2 it is determined whether the information processing apparatus is in a dangerous driving.
  • the dangerous driving determination unit 31 of the information processing apparatus determines whether it is dangerous driving based on the driving information acquired in step ST1, and returns to step ST1 if it is not determined to be dangerous driving, and if it determines that it is dangerous driving, it performs step. Proceed to ST3.
  • step ST3 the information processing apparatus acquires situation supplementary information.
  • the supplementary information acquisition unit 32 of the information processing device acquires situation supplemental information manually or automatically in response to the dangerous driving determination unit 31 determining that it is dangerous driving, and proceeds to step ST4.
  • FIG. 3 is a flowchart showing an operation when manually acquiring situation supplement information.
  • the supplementary information acquisition unit notifies the dangerous driving determination result.
  • the supplementary information acquisition unit 32 notifies the user that it has been determined that it is a dangerous driving by an image or sound. In this case, if the driving information when it is determined to be dangerous driving is presented to the user, the user can understand why the driving is determined to be dangerous driving. Further, the supplementary information acquisition unit 32 issues an information acquisition instruction for situation supplementary information using an image or sound, and proceeds to step ST12.
  • step ST12 the supplementary information acquisition unit determines whether there is an objection to the dangerous driving determination result.
  • the supplementary information acquisition unit 32 proceeds to step ST13 when the opposition user operation is performed with respect to the dangerous driving determination result notified at step ST11, and when the opposition user operation is not performed, the supplementary information acquisition unit 32 of FIG. Proceed to step ST4.
  • step ST13 the supplementary information acquisition unit performs an objection acceptance process.
  • the supplementary information acquisition unit 32 acquires objections made by the user with images, sounds, characters, etc. as situation supplementary information, and proceeds to step ST4 in FIG.
  • step ST4 of FIG. 2 the information processing apparatus records the dangerous driving determination result and the situation supplement information.
  • the information recording unit 33 of the information processing apparatus records the dangerous driving determination result and the situation supplement information associated with the dangerous driving determination result on the recording medium, and proceeds to step ST5.
  • step ST5 the information processing apparatus determines whether to transmit information.
  • the information communication unit 34 of the information processing apparatus proceeds to step ST6 when the predetermined transmission timing is reached, and returns to step ST1 when it is not the predetermined transmission timing.
  • step ST6 the information processing apparatus performs information transmission processing.
  • the information communication unit 34 of the information processing device transmits the dangerous driving determination result and the situation supplement information associated with the dangerous driving determination result to the information management device 40 and returns to step ST1.
  • FIG. 3 illustrates the case where the situation supplement information is acquired when it is determined that the vehicle is in a dangerous driving.
  • the supplement information acquisition unit 32 receives the information acquisition instruction. May be performed at a predetermined instruction timing. For example, if it is performed when the vehicle is stopped after it has been determined to be dangerous driving, the user has little time elapsed since it was determined to be dangerous driving, and the supplementary information (risk driving) The objection to the judgment result can be entered.
  • the information acquisition instruction may be performed when traveling with low driving difficulty (for example, traveling on a straight road). Furthermore, if it is performed at the end of driving after it is determined as dangerous driving, it is possible to input situation supplementary information without causing any hindrance to driving.
  • the supplementary information acquiring unit 32 instructs the passenger to acquire information so that the driver can concentrate on driving the vehicle. May be.
  • the information management apparatus when it is determined that the vehicle is dangerous driving, it is possible to provide the information management apparatus with the objection of the user and the driving information of the surrounding vehicles as situation supplement information for the dangerous driving determination result. Therefore, in the information management device, the effectiveness of the dangerous driving determination result can be confirmed by the situation supplementary information, and when giving incentives (for example, discounting of insurance premiums, granting of benefits, etc.) according to the dangerous driving determination result In addition, it is possible to enhance the user's satisfaction.
  • FIG. 4 is a block diagram illustrating a schematic configuration example of a vehicle control system 7000 that is an example of a mobile control system to which the technology according to the present disclosure can be applied.
  • the vehicle control system 7000 includes a plurality of electronic control units connected via a communication network 7010.
  • the vehicle control system 7000 includes a drive system control unit 7100, a body system control unit 7200, a battery control unit 7300, an outside information detection unit 7400, an in-vehicle information detection unit 7500, and an integrated control unit 7600. .
  • the communication network 7010 for connecting the plurality of control units conforms to an arbitrary standard such as CAN (Controller Area Network), LIN (Local Interconnect Network), LAN (Local Area Network), or FlexRay (registered trademark). It may be an in-vehicle communication network.
  • Each control unit includes a microcomputer that performs arithmetic processing according to various programs, a storage unit that stores programs executed by the microcomputer or parameters used for various calculations, and a drive circuit that drives various devices to be controlled. Is provided.
  • Each control unit includes a network I / F for communicating with other control units via a communication network 7010, and is connected to devices or sensors inside and outside the vehicle by wired communication or wireless communication. A communication I / F for performing communication is provided. In FIG.
  • a microcomputer 7610 As a functional configuration of the integrated control unit 7600, a microcomputer 7610, a general-purpose communication I / F 7620, a dedicated communication I / F 7630, a positioning unit 7640, a beacon receiving unit 7650, an in-vehicle device I / F 7660, an audio image output unit 7670, An in-vehicle network I / F 7680 and a storage unit 7690 are illustrated.
  • other control units include a microcomputer, a communication I / F, a storage unit, and the like.
  • the drive system control unit 7100 controls the operation of the device related to the drive system of the vehicle according to various programs.
  • the drive system control unit 7100 includes a driving force generator for generating a driving force of a vehicle such as an internal combustion engine or a driving motor, a driving force transmission mechanism for transmitting the driving force to wheels, and a steering angle of the vehicle. It functions as a control device such as a steering mechanism that adjusts and a braking device that generates a braking force of the vehicle.
  • the drive system control unit 7100 may have a function as a control device such as ABS (Antilock Brake System) or ESC (Electronic Stability Control).
  • a vehicle state detection unit 7110 is connected to the drive system control unit 7100.
  • the vehicle state detection unit 7110 includes, for example, a gyro sensor that detects the angular velocity of the rotational movement of the vehicle body, an acceleration sensor that detects the acceleration of the vehicle, an operation amount of an accelerator pedal, an operation amount of a brake pedal, and steering of a steering wheel. At least one of sensors for detecting an angle, an engine speed, a rotational speed of a wheel, or the like is included.
  • the drive system control unit 7100 performs arithmetic processing using a signal input from the vehicle state detection unit 7110, and controls an internal combustion engine, a drive motor, an electric power steering device, a brake device, or the like.
  • the body system control unit 7200 controls the operation of various devices mounted on the vehicle body according to various programs.
  • the body system control unit 7200 functions as a keyless entry system, a smart key system, a power window device, or a control device for various lamps such as a headlamp, a back lamp, a brake lamp, a blinker, or a fog lamp.
  • the body control unit 7200 can be input with radio waves or various switch signals transmitted from a portable device that substitutes for a key.
  • the body system control unit 7200 receives input of these radio waves or signals, and controls a door lock device, a power window device, a lamp, and the like of the vehicle.
  • the battery control unit 7300 controls the secondary battery 7310 that is a power supply source of the drive motor according to various programs. For example, information such as battery temperature, battery output voltage, or remaining battery capacity is input to the battery control unit 7300 from a battery device including the secondary battery 7310. The battery control unit 7300 performs arithmetic processing using these signals, and controls the temperature adjustment of the secondary battery 7310 or the cooling device provided in the battery device.
  • the outside information detection unit 7400 detects information outside the vehicle on which the vehicle control system 7000 is mounted.
  • the outside information detection unit 7400 is connected to at least one of the imaging unit 7410 and the outside information detection unit 7420.
  • the imaging unit 7410 includes at least one of a ToF (Time Of Flight) camera, a stereo camera, a monocular camera, an infrared camera, and other cameras.
  • the outside information detection unit 7420 detects, for example, current weather or an environmental sensor for detecting weather, or other vehicles, obstacles, pedestrians, etc. around the vehicle equipped with the vehicle control system 7000. At least one of the surrounding information detection sensors.
  • the environmental sensor may be, for example, at least one of a raindrop sensor that detects rainy weather, a fog sensor that detects fog, a sunshine sensor that detects sunlight intensity, and a snow sensor that detects snowfall.
  • the ambient information detection sensor may be at least one of an ultrasonic sensor, a radar device, and a LIDAR (Light Detection and Ranging, Laser Imaging Detection and Ranging) device.
  • the imaging unit 7410 and the outside information detection unit 7420 may be provided as independent sensors or devices, or may be provided as a device in which a plurality of sensors or devices are integrated.
  • FIG. 5 shows an example of installation positions of the imaging unit 7410 and the vehicle outside information detection unit 7420.
  • the imaging units 7910, 7912, 7914, 7916, and 7918 are provided at, for example, at least one of the front nose, the side mirror, the rear bumper, the back door, and the upper part of the windshield in the vehicle interior of the vehicle 7900.
  • An imaging unit 7910 provided in the front nose and an imaging unit 7918 provided in the upper part of the windshield in the vehicle interior mainly acquire an image in front of the vehicle 7900.
  • Imaging units 7912 and 7914 provided in the side mirror mainly acquire an image of the side of the vehicle 7900.
  • An imaging unit 7916 provided in the rear bumper or the back door mainly acquires an image behind the vehicle 7900.
  • the imaging unit 7918 provided on the upper part of the windshield in the passenger compartment is mainly used for detecting a preceding vehicle or a pedestrian, an obstacle, a traffic light, a traffic sign, a lane, or
  • FIG. 5 shows an example of shooting ranges of the respective imaging units 7910, 7912, 7914, and 7916.
  • the imaging range a indicates the imaging range of the imaging unit 7910 provided in the front nose
  • the imaging ranges b and c indicate the imaging ranges of the imaging units 7912 and 7914 provided in the side mirrors, respectively
  • the imaging range d The imaging range of the imaging part 7916 provided in the rear bumper or the back door is shown. For example, by superimposing the image data captured by the imaging units 7910, 7912, 7914, and 7916, an overhead image when the vehicle 7900 is viewed from above is obtained.
  • the vehicle outside information detection units 7920, 7922, 7924, 7926, 7928, and 7930 provided on the front, rear, sides, corners of the vehicle 7900 and the upper part of the windshield in the vehicle interior may be, for example, an ultrasonic sensor or a radar device.
  • the vehicle outside information detection units 7920, 7926, and 7930 provided on the front nose, the rear bumper, the back door, and the windshield in the vehicle interior of the vehicle 7900 may be, for example, LIDAR devices.
  • These outside information detection units 7920 to 7930 are mainly used for detecting a preceding vehicle, a pedestrian, an obstacle, and the like.
  • the vehicle exterior information detection unit 7400 causes the imaging unit 7410 to capture an image outside the vehicle and receives the captured image data. Further, the vehicle exterior information detection unit 7400 receives detection information from the vehicle exterior information detection unit 7420 connected thereto.
  • the vehicle exterior information detection unit 7420 is an ultrasonic sensor, a radar device, or a LIDAR device
  • the vehicle exterior information detection unit 7400 transmits ultrasonic waves, electromagnetic waves, or the like, and receives received reflected wave information.
  • the outside information detection unit 7400 may perform an object detection process or a distance detection process such as a person, a car, an obstacle, a sign, or a character on a road surface based on the received information.
  • the vehicle exterior information detection unit 7400 may perform environment recognition processing for recognizing rainfall, fog, road surface conditions, or the like based on the received information.
  • the vehicle outside information detection unit 7400 may calculate a distance to an object outside the vehicle based on the received information.
  • the outside information detection unit 7400 may perform image recognition processing or distance detection processing for recognizing a person, a car, an obstacle, a sign, a character on a road surface, or the like based on the received image data.
  • the vehicle exterior information detection unit 7400 performs processing such as distortion correction or alignment on the received image data, and combines the image data captured by the different imaging units 7410 to generate an overhead image or a panoramic image. Also good.
  • the vehicle exterior information detection unit 7400 may perform viewpoint conversion processing using image data captured by different imaging units 7410.
  • the vehicle interior information detection unit 7500 detects vehicle interior information.
  • a driver state detection unit 7510 that detects the driver's state is connected to the in-vehicle information detection unit 7500.
  • Driver state detection unit 7510 may include a camera that captures an image of the driver, a biosensor that detects biometric information of the driver, a microphone that collects sound in the passenger compartment, and the like.
  • the biometric sensor is provided, for example, on a seat surface or a steering wheel, and detects biometric information of an occupant sitting on the seat or a driver holding the steering wheel.
  • the vehicle interior information detection unit 7500 may calculate the degree of fatigue or concentration of the driver based on the detection information input from the driver state detection unit 7510, and determines whether the driver is asleep. May be.
  • the vehicle interior information detection unit 7500 may perform a process such as a noise canceling process on the collected audio signal.
  • the integrated control unit 7600 controls the overall operation in the vehicle control system 7000 according to various programs.
  • An input unit 7800 is connected to the integrated control unit 7600.
  • the input unit 7800 is realized by a device that can be input by a passenger, such as a touch panel, a button, a microphone, a switch, or a lever.
  • the integrated control unit 7600 may be input with data obtained by recognizing voice input through a microphone.
  • the input unit 7800 may be, for example, a remote control device using infrared rays or other radio waves, or may be an external connection device such as a mobile phone or a PDA (Personal Digital Assistant) that supports the operation of the vehicle control system 7000. May be.
  • the input unit 7800 may be, for example, a camera.
  • the passenger can input information using a gesture.
  • data obtained by detecting the movement of the wearable device worn by the passenger may be input.
  • the input unit 7800 may include, for example, an input control circuit that generates an input signal based on information input by a passenger or the like using the input unit 7800 and outputs the input signal to the integrated control unit 7600.
  • a passenger or the like operates the input unit 7800 to input various data or instruct a processing operation to the vehicle control system 7000.
  • the storage unit 7690 may include a ROM (Read Only Memory) that stores various programs executed by the microcomputer, and a RAM (Random Access Memory) that stores various parameters, calculation results, sensor values, and the like.
  • the storage unit 7690 may be realized by a magnetic storage device such as an HDD (Hard Disc Drive), a semiconductor storage device, an optical storage device, a magneto-optical storage device, or the like.
  • General-purpose communication I / F 7620 is a general-purpose communication I / F that mediates communication with various devices existing in the external environment 7750.
  • General-purpose communication I / F7620 is a cellular communication protocol such as GSM (Global System of Mobile communications), WiMAX, LTE (Long Term Evolution) or LTE-A (LTE-Advanced), or wireless LAN (Wi-Fi (registered trademark)). Other wireless communication protocols such as Bluetooth (registered trademark) may also be implemented.
  • the general-purpose communication I / F 7620 is connected to a device (for example, an application server or a control server) existing on an external network (for example, the Internet, a cloud network, or an operator-specific network) via, for example, a base station or an access point.
  • the general-purpose communication I / F 7620 is a terminal (for example, a driver, a pedestrian or a store terminal, or an MTC (Machine Type Communication) terminal) that exists in the vicinity of the vehicle using, for example, P2P (Peer To Peer) technology. You may connect with.
  • a terminal for example, a driver, a pedestrian or a store terminal, or an MTC (Machine Type Communication) terminal
  • P2P Peer To Peer
  • the dedicated communication I / F 7630 is a communication I / F that supports a communication protocol formulated for use in vehicles.
  • the dedicated communication I / F 7630 is a standard protocol such as WAVE (Wireless Access in Vehicle Environment), DSRC (Dedicated Short Range Communications), or cellular communication protocol, which is a combination of the lower layer IEEE 802.11p and the upper layer IEEE 1609. May be implemented.
  • the dedicated communication I / F 7630 typically includes vehicle-to-vehicle communication, vehicle-to-infrastructure communication, vehicle-to-home communication, and vehicle-to-pedestrian communication. ) Perform V2X communication, which is a concept that includes one or more of the communications.
  • the positioning unit 7640 receives, for example, a GNSS signal from a GNSS (Global Navigation Satellite System) satellite (for example, a GPS signal from a GPS (Global Positioning System) satellite), performs positioning, and performs latitude, longitude, and altitude of the vehicle.
  • the position information including is generated.
  • the positioning unit 7640 may specify the current position by exchanging signals with the wireless access point, or may acquire position information from a terminal such as a mobile phone, PHS, or smartphone having a positioning function.
  • the beacon receiving unit 7650 receives, for example, radio waves or electromagnetic waves transmitted from a radio station installed on the road, and acquires information such as the current position, traffic jam, closed road, or required time. Note that the function of the beacon receiving unit 7650 may be included in the dedicated communication I / F 7630 described above.
  • the in-vehicle device I / F 7660 is a communication interface that mediates the connection between the microcomputer 7610 and various in-vehicle devices 7760 present in the vehicle.
  • the in-vehicle device I / F 7660 may establish a wireless connection using a wireless communication protocol such as a wireless LAN, Bluetooth (registered trademark), NFC (Near Field Communication), or WUSB (Wireless USB).
  • the in-vehicle device I / F 7660 is connected to a USB (Universal Serial Bus), HDMI (High-Definition Multimedia Interface), or MHL (Mobile High-definition Link) via a connection terminal (and a cable if necessary). ) Etc. may be established.
  • the in-vehicle device 7760 may include, for example, at least one of a mobile device or a wearable device that a passenger has, or an information device that is carried into or attached to the vehicle.
  • In-vehicle device 7760 may include a navigation device that searches for a route to an arbitrary destination.
  • In-vehicle device I / F 7660 exchanges control signals or data signals with these in-vehicle devices 7760.
  • the in-vehicle network I / F 7680 is an interface that mediates communication between the microcomputer 7610 and the communication network 7010.
  • the in-vehicle network I / F 7680 transmits and receives signals and the like in accordance with a predetermined protocol supported by the communication network 7010.
  • the microcomputer 7610 of the integrated control unit 7600 is connected via at least one of a general-purpose communication I / F 7620, a dedicated communication I / F 7630, a positioning unit 7640, a beacon receiving unit 7650, an in-vehicle device I / F 7660, and an in-vehicle network I / F 7680.
  • the vehicle control system 7000 is controlled according to various programs based on the acquired information. For example, the microcomputer 7610 calculates a control target value of the driving force generation device, the steering mechanism, or the braking device based on the acquired information inside and outside the vehicle, and outputs a control command to the drive system control unit 7100. Also good.
  • the microcomputer 7610 realizes ADAS (Advanced Driver Assistance System) functions including vehicle collision avoidance or impact mitigation, following traveling based on inter-vehicle distance, vehicle speed maintaining traveling, vehicle collision warning, or vehicle lane departure warning. You may perform the cooperative control for the purpose. Further, the microcomputer 7610 controls the driving force generator, the steering mechanism, the braking device, or the like based on the acquired information on the surroundings of the vehicle, so that the microcomputer 7610 automatically travels independently of the driver's operation. You may perform the cooperative control for the purpose of driving.
  • ADAS Advanced Driver Assistance System
  • the microcomputer 7610 is information acquired via at least one of the general-purpose communication I / F 7620, the dedicated communication I / F 7630, the positioning unit 7640, the beacon receiving unit 7650, the in-vehicle device I / F 7660, and the in-vehicle network I / F 7680.
  • the three-dimensional distance information between the vehicle and the surrounding structure or an object such as a person may be generated based on the above and local map information including the peripheral information of the current position of the vehicle may be created.
  • the microcomputer 7610 may generate a warning signal by predicting a danger such as a collision of a vehicle, approach of a pedestrian or the like or an approach to a closed road based on the acquired information.
  • the warning signal may be, for example, a signal for generating a warning sound or lighting a warning lamp.
  • the audio image output unit 7670 transmits an output signal of at least one of audio and image to an output device capable of visually or audibly notifying information to a vehicle occupant or the outside of the vehicle.
  • an audio speaker 7710, a display unit 7720, and an instrument panel 7730 are illustrated as output devices.
  • Display unit 7720 may include at least one of an on-board display and a head-up display, for example.
  • the display portion 7720 may have an AR (Augmented Reality) display function.
  • the output device may be other devices such as headphones, wearable devices such as glasses-type displays worn by passengers, projectors, and lamps.
  • the display device can display the results obtained by various processes performed by the microcomputer 7610 or information received from other control units in various formats such as text, images, tables, and graphs. Display visually. Further, when the output device is an audio output device, the audio output device converts an audio signal made up of reproduced audio data or acoustic data into an analog signal and outputs it aurally.
  • At least two control units connected via the communication network 7010 may be integrated as one control unit.
  • each control unit may be configured by a plurality of control units.
  • the vehicle control system 7000 may include another control unit not shown.
  • some or all of the functions of any of the control units may be given to other control units. That is, as long as information is transmitted and received via the communication network 7010, the predetermined arithmetic processing may be performed by any one of the control units.
  • a sensor or device connected to one of the control units may be connected to another control unit, and a plurality of control units may transmit / receive detection information to / from each other via the communication network 7010. .
  • the driving information generation unit 20 is configured using the vehicle state detection unit 7110, the imaging unit 7410, the outside information detection unit 7420, and the like.
  • the microcomputer 7610 is used as the dangerous driving determination unit 31.
  • the supplementary information acquisition unit 32 is configured by using the microcomputer 7610, the dedicated communication I / F 7630, the audio image output unit 7670, the audio speaker 7710, the display unit 7720, the input unit 7800, and the like.
  • the storage unit 7690 is used as the information recording unit 33
  • the information communication unit 34 is configured by using the microcomputer 7610 and the general-purpose communication I / F 7620.
  • the driving information generation unit 20 uses the vehicle acceleration, accelerator pedal operation, brake pedal operation, steering wheel steering, engine speed or wheel rotation speed detected by the vehicle state detection unit 7110 as driving information. Further, the driving information generation unit 20 may use the captured image generated by the imaging unit 7410 as driving information. Furthermore, the driving information generation unit 20 may use the current weather or weather detected by the vehicle outside information detection unit 7420 and the detection results of other vehicles, obstacles, pedestrians, and the like as driving information. Note that the integrated control unit 7600 is provided with a clock unit (not shown) so that date information is included in the operation information. Further, the position information generated by the positioning unit 7640 may be included in the driving information.
  • the microcomputer 7610 having the function of the dangerous driving determination unit 31 determines whether it is dangerous driving based on the detection result of the vehicle state detection unit 7110, the captured image generated by the imaging unit 7410, and the detection result of the outside information detection unit 7420.
  • the dangerous driving is, for example, sudden acceleration or sudden deceleration, excessive speed, sudden steering, insufficient distance between vehicles, and the like.
  • the dangerous driving determination unit 31 outputs the dangerous driving determination result to the supplementary information acquisition unit 32.
  • the dangerous driving determination unit 31 includes vehicle information (such as a vehicle number) or driver information (such as a license number) in the dangerous driving determination result.
  • the dangerous driving determination unit 31 includes, for example, driving information for a predetermined time before and after the timing determined as dangerous driving in the dangerous driving determination result.
  • the supplementary information acquisition unit 32 acquires situation supplementary information when the dangerous driving determination unit 31 determines that it is dangerous driving. For example, when acquiring supplementary situation information manually, the microcomputer 7610 controls the audio image output unit 7670 to notify the user of the dangerous driving determination result using an audio speaker 7710 or a display unit 7720 with an image or audio. To do. Further, the microcomputer 7610 may notify the result of the dangerous driving determination including the driving information when it is determined that the driving is dangerous, so that the user can recognize the factor determined as the dangerous driving. For example, a factor (judging the acceleration / deceleration state, etc.), characters (information indicating operation, distance between vehicles, etc.) or voice (for any reason, judging the driving as dangerous driving) Etc.), etc.
  • the microcomputer 7610 issues an information acquisition instruction at a predetermined instruction timing.
  • the predetermined instruction timing is, for example, immediately after being determined to be dangerous driving, when stopping after being determined to be dangerous driving, during driving with low driving difficulty, or at the end of driving after being determined to be dangerous driving. including.
  • Driving difficulty is high when driving on highways, winding roads, urban roads, and when driving is easy, such as straight roads in the suburbs. Is low.
  • the user is requested to collect evidence on the spot determined to be dangerous driving.
  • evidence collection for example, take a picture of the scene determined to be dangerous driving, take witness testimony (text, voice) about the situation determined to be dangerous driving, take the testimony of the other party if there is the other party, etc. May be instructed.
  • the objection may be prompted to be input with an image, sound, text, or the like.
  • driving information for a predetermined time with reference to the timing determined as dangerous driving for example, a captured image captured by the imaging unit 7410 or the outside information detection unit 7420
  • the microcomputer 7610 performs object recognition using the captured image, adds a tag to the recognized object, and displays the image on the display unit 7720. May be presented.
  • FIG. 6 illustrates an image with a tag attached.
  • a tag is used so that an object (for example, a vehicle or a person) that causes a movement is recognized using the captured image GA acquired by the imaging unit 7918 shown in FIG. Give.
  • FIG. 6 illustrates a case where a vehicle and a person are recognized, and a tag “vehicle T” is given to the recognized vehicle, and a tag “pedestrian P” is given to the recognized person. .
  • the recognized object is tagged and the driving information is presented, the user can easily and appropriately make an objection using the tag for the dangerous driving determination result.
  • the input unit 7800 includes a touch panel, a microphone, and the like, and acquires objections (such as witness testimony) input by the user as situation supplement information.
  • the microcomputer 7610 When acquiring the situation supplement information automatically, the microcomputer 7610 communicates with an external device located in the vicinity using, for example, the dedicated communication I / F 7630 to automatically obtain the situation supplement information.
  • the microcomputer 7610 obtains driving information for a predetermined time from the surrounding vehicle as situation supplement information based on the timing determined to be dangerous driving.
  • the microcomputer 7610 acquires captured images for a predetermined time with reference to the timing determined as dangerous driving from the monitoring camera as situation supplement information.
  • the dangerous driving determination result is presented to the user immediately after it is determined to be dangerous driving, and the user instructs acquisition of situation supplementary information, it may be automatically acquired by communicating with an external device. Good.
  • the supplementary information acquisition unit 32 is not limited to notifying the driver of the dangerous driving determination result and instructing the information acquisition, and when there is a passenger, the supplementary information acquiring unit 32 notifies the passenger of the dangerous driving determination result.
  • An information acquisition instruction may be issued. In this case, the driver can concentrate on the driving operation.
  • the storage unit 7690 used as the information recording unit 33 records the acquired situation supplement information in association with the dangerous driving determination result. Note that the recording medium of the storage unit 7690 may be fixed or removable.
  • the information communication unit 34 transmits the dangerous driving determination result and the situation supplement information to the information management device 40 at a predetermined transmission timing.
  • the microcomputer 7610 communicates with the information management device 40 using, for example, the general-purpose communication IF 7620 at a predetermined transmission timing, and transmits the dangerous driving determination result and the situation supplement information recorded in the storage unit 7690.
  • the predetermined transmission timing is a preset date and time, the elapse of a predetermined period, the information request is the transmission instruction, or the amount of information of the dangerous driving determination result and situation supplementary information recorded in the storage unit 7690
  • the timing includes any one when the predetermined amount is reached.
  • provision of the dangerous driving determination result and the situation supplement information to the information management device 40 is not limited to the case where the information communication unit 34 performs the provision.
  • the storage medium of the storage unit 7690 is configured to be detachable
  • the recording medium on which the dangerous driving determination result and the situation supplement information are recorded is sent to the information management apparatus side, and the dangerous driving determination result and the situation supplement information are used. You may be able to do it.
  • the vehicle control system provided with the information processing apparatus is not limited to the configuration shown in FIG. 4, and may be a vehicle control system provided with functional blocks having other functions, and is a part of the configuration shown in FIG. 4. It may be a vehicle control system that does not have.
  • FIG. 7 is a diagram illustrating a configuration of the information management apparatus.
  • the information management device 40 includes, for example, a CPU 41, a memory unit 42, an input / output interface (I / F) unit 43, a communication unit 44, a recording unit 45, and the like, and each unit is connected via a bus 49.
  • the CPU 41 executes a program recorded in the memory unit 42 and acquires a dangerous driving determination result and situation supplementary information from the information processing device 30 via, for example, the communication unit 44. Further, the CPU 41 can use the input / output I / F unit 43 to present situation supplementary information associated with the dangerous driving determination result to the information manager and determine the effectiveness of the dangerous driving determination result. To. In addition, the CPU 41 gives an incentive to the corresponding vehicle or driver based on the dangerous driving determination result for which the validity is determined.
  • the memory unit 42 is configured using a RAM (Random Access Memory), a ROM (Read Only Memory), or the like.
  • the memory unit 42 stores a program for performing a desired operation in the information management apparatus 40.
  • the memory unit 42 is used as a work memory or the like when performing various processes.
  • the input / output I / F unit 43 is configured using a display unit, an input unit, and the like.
  • the display unit is configured using a liquid crystal display element, an organic EL display element, and the like, and displays information recorded in the recording unit 45, information processed by the CPU 41, and the like.
  • the input unit is configured using a keyboard, a mouse, a touch panel, and the like, and accepts user operations.
  • the communication unit 44 communicates with the information processing apparatus 30 and acquires the dangerous driving determination result and the situation supplement information.
  • the recording unit 45 is configured using a hard disk, a non-volatile memory, or the like, and records a dangerous driving determination result, situation supplement information, and the like acquired from the information processing apparatus 30. Note that the configuration of the information management apparatus 40 is not limited to the configuration shown in FIG. 7, and functional blocks having other functions may be provided.
  • the information management apparatus 40 configured in this way can acquire the dangerous driving determination result and the situation supplement information from the information processing apparatus 30, the information management apparatus 40 can validate the dangerous driving determination result based on the situation supplement information associated with the dangerous driving determination result. Can determine gender. Therefore, when giving an incentive based on the dangerous driving determination result, it is possible to enhance the user's satisfaction with the vehicle.
  • a mobile communication terminal device for example, a smartphone or a tablet
  • a communication unit that communicates with a sensor that can acquire a captured image, acceleration, position information, and the like and an external device
  • the mobile communication terminal device is provided with a microcomputer, a display unit, an input unit, and a recording unit. Therefore, the mobile communication terminal device can be used as an information processing device of the present technology.
  • information acquired by the sensor of the mobile communication terminal device is used as driving information. Further, dangerous driving is determined by the microcomputer of the mobile communication terminal device, and the situation supplement information is acquired using the display unit and the input unit.
  • the recording unit of the mobile communication terminal device records the situation supplement information in association with the dangerous driving determination result. Furthermore, the dangerous driving determination result and the situation supplement information recorded in the recording unit are transmitted to the information management device using the communication unit. Note that vehicle information and driving information not acquired by the sensor are acquired from the vehicle using the communication unit.
  • a mobile communication terminal device is used as the information processing device, it is possible to provide the information management device with dangerous driving determination results and situation supplementary information even when driving a vehicle without the information processing device. .
  • the series of processes described in the specification can be executed by hardware, software, or a combined configuration of both.
  • a program in which a processing sequence is recorded is installed and executed in a memory in a computer incorporated in dedicated hardware.
  • the program can be installed and executed on a general-purpose computer capable of executing various processes.
  • the program can be recorded in advance on a hard disk, SSD (Solid State Drive), or ROM (Read Only Memory) as a recording medium.
  • the program is a flexible disk, a CD-ROM (Compact Disc Read Only Memory), an MO (Magneto optical disc), a DVD (Digital Versatile Disc), a BD (Blu-Ray Disc (registered trademark)), a magnetic disk, or a semiconductor memory card. It can be stored (recorded) in a removable recording medium such as temporarily or permanently. Such a removable recording medium can be provided as so-called package software.
  • the program may be transferred from the download site to the computer wirelessly or by wire via a network such as a LAN (Local Area Network) or the Internet.
  • the computer can receive the program transferred in this way and install it on a recording medium such as a built-in hard disk.
  • the information processing apparatus may have the following configuration.
  • a dangerous driving determination unit that determines whether the vehicle is dangerous driving based on driving information;
  • An information processing apparatus comprising: a supplementary information acquisition unit that acquires situation supplementary information when the dangerous driving determination unit determines that it is dangerous driving.
  • the supplementary information acquisition unit issues an information acquisition instruction for situation supplementary information in response to the determination that the driving is dangerous.
  • the supplementary information acquisition unit performs the information acquisition instruction with an image or sound.
  • the supplementary information acquisition unit presents driving information when it is determined that the driving is dangerous.
  • the driving information includes a peripheral captured image
  • the information processing apparatus according to (4), wherein the supplementary information acquisition unit performs subject recognition using the peripheral captured image, and adds a tag to the recognized subject in the information acquisition instruction to present the peripheral captured image.
  • the supplementary information acquisition unit may use the dangerous driving when the information acquisition instruction is determined to be the dangerous driving immediately after the vehicle is stopped or the driving difficulty is low after the dangerous driving is determined.
  • the information processing apparatus according to any one of (2) to (5), which is performed at a predetermined instruction timing including any one at the end of the operation after being determined.
  • the information processing apparatus according to any one of (2) to (6), wherein the supplementary information acquisition unit instructs the passenger to acquire the information.
  • the supplementary information acquisition unit issues, as the information acquisition instruction, an object to acquire an objection to the determination that the driving is dangerous driving in an image, voice, or text
  • the information processing apparatus described in 1. The information according to any one of (1) to (8), wherein the supplementary information acquisition unit includes a communication unit that communicates with an external device located in the vicinity and acquires the situation supplementary information from the external device. Processing equipment. (10) The external device is a surrounding vehicle, The information processing apparatus according to (9), wherein the supplementary information acquisition unit acquires driving information when the dangerous driving is determined as the situation supplemental information.
  • any one of (1) to (10) further including an information recording unit that records the situation supplementary information acquired by the supplementary information acquisition unit in association with the dangerous driving determination result obtained by the dangerous driving determination unit An information processing apparatus according to claim 1.
  • the information transmission unit is configured to send a request for transmission of the dangerous driving determination result and the situation supplement information associated with the dangerous driving determination result when a predetermined date and time and a predetermined period have elapsed.
  • the information processing apparatus according to (13), wherein the information is transmitted to the information management apparatus at a predetermined transmission timing including either the time or when the information recorded in the information recording unit reaches a predetermined amount.
  • the situation supplement information is acquired when it is determined as dangerous driving based on the driving information. For this reason, it becomes possible to notify the information management apparatus of the situation when the dangerous driving is determined by the situation supplement information together with the dangerous driving determination result. Therefore, when performing a service that gives an incentive according to the driving situation of the vehicle, it is possible to provide a service with high user satisfaction.

Landscapes

  • Engineering & Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • General Physics & Mathematics (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Mathematical Physics (AREA)
  • Traffic Control Systems (AREA)
  • Time Recorders, Dirve Recorders, Access Control (AREA)
  • Navigation (AREA)

Abstract

運転情報生成部20は、車両の運転状態を示す種々の情報を運転情報として逐次生成する。危険運転判定部31は、運転情報生成部20で生成された運転情報に基づき危険運転であるか判定する。補足情報取得部32は、危険運転判定部31で危険運転と判定されたことに応じて状況補足情報を手動または自動で取得して、取得した状況補足情報を危険運転判定結果に関連付ける。情報通信部34は、危険運転判定結果と状況補足情報を情報管理装置40へ送信する。情報管理装置40は、状況補足情報に基づき危険運転と判定されたされた場合の状況を把握できるようになり、危険運転判定結果の有効性を正しく判断することが可能となる。

Description

情報処理装置と情報処理方法
 この技術は、情報処理装置と情報処理方法に関し、危険運転と判定された場合の状況を危険運転判定結果と共に通知できるようにする。
 近年、車両の運転状況を示す運転情報を利用する様々なサービスが普及してきている。例えば特許文献1では、車速、発進・制動、加速・減速度、操舵等の制御情報を含む運転情報を車載装置からサーバに送信する。また、サーバは受信した運転情報を用いて運転状況を判断し、判断結果に応じた賞罰ポイントを運転情報発信元の車載装置に送信している。また、運転情報を利用するサービスとしては、運転情報に基づいて事故リスクの分析を行い、分析結果に基づき保険料率を算定することも行われている。
特開2002-230696号公報
 ところで、車速、発進・制動、加速・減速度、操舵等の制御情報を含む運転情報に基づきサーバで危険運転の検出を行うと、例えば事故回避のための適切な運転操作によって急な減速や操舵が生じた場合でも危険運転と判定されてしまうことが考えられる。
 そこで、この技術では危険運転と判定されたされた場合の状況を危険運転判定結果と共に通知できる情報処理装置と情報処理方法を提供することを目的とする。
 この技術の第1の側面は、
 運転情報に基づき危険運転であるか判定する危険運転判定部と、
 前記危険運転判定部で危険運転と判定されたことに応じて状況補足情報を取得する補足情報取得部と
を備える情報処理装置にある。
 この技術においては、運転情報に基づき危険運転であるか危険運転判定部で判定されて、危険運転と判定されたことに応じて状況補足情報を補足情報取得部で取得する。補足情報取得部は、危険運転であると判定されたことに応じて状況補足情報の情報取得指示を所定の指示タイミング、例えば危険運転であると判定された直後、危険運転と判定された後の停車時または運転難易度が低い走行時、危険運転と判定された後の運転終了時の何れで、画像または音声で行う。また、補足情報取得部は、危険運転であると判定されたときの運転情報を提示する。運転情報は例えば周辺撮像画像を含み、補足情報取得部は、周辺撮像画像を用いて被写体認識を行い、情報取得指示では認識した被写体にタグを付与して周辺撮像画像を提示する。
 また、情報取得指示では、危険運転であると判定されたことに対する異議を画像または音声または文字で取得する指示を行う。補足情報取得部は、同乗者がいる場合に、同乗者に対して情報取得指示を行う。また、補足情報取得部は、周辺に位置する外部機器例えは周辺車両と通信を行う通信部を用いて、危険運転であると判定されたときの周辺車両の運転情報を状況補足情報として取得してもよい。
 取得した状況補足情報は危険運転判定結果に関連付けて情報記録部に記録する。また、危険運転判定結果には、危険運転であると判定されたタイミングを基準とする所定時間分の運転情報を含める。
 危険運転判定結果と状況補足情報は情報送信部によって所定の送信タイミング、例えば予め設定された日時、所定期間の経過時、情報の要求は送信の指示時、または情報記録部に記録されている情報が所定量となった時の何れかのタイミングで情報管理装置に送信される。
 この技術の第2の側面は、
 運転情報に基づき危険運転であるか危険運転判定部で判定することと、
 前記危険運転判定部で危険運転と判定されたことに応じて状況補足情報を補足情報取得部で取得することと
を含む情報処理方法にある。
 この技術によれば、運転情報に基づき危険運転と判定されたことに応じて状況補足情報が取得される。したがって、状況補足情報によって危険運転と判定されたされた場合の状況を危険運転判定結果と共に情報管理装置へ通知できるようになる。なお、本明細書に記載された効果はあくまで例示であって限定されるものではなく、また付加的な効果があってもよい。
情報収集システムの構成を示す図である。 情報処理装置の動作を例示したフローチャートである。 手動で状況補足情報を取得する場合の動作を示すフローチャートである。 車両制御システムの概略的な構成の一例を示すブロック図である。 車外情報検出部及び撮像部の設置位置の一例を示す説明図である。 タグを付与した画像を例示した図である。 情報管理装置の構成を例示した図である。
 以下、本技術を実施するための形態について説明する。なお、説明は以下の順序で行う。
 1.情報収集システムの構成と動作
 2.情報処理装置を車両に設けた場合の構成と動作
 3.情報管理装置の構成と動作
 4.情報処理装置の他の構成と動作
 <1.情報収集システムの構成と動作>
 図1は、本技術の情報処理装置を用いた情報収集システムの構成を例示している。情報収集システム10は、運転情報生成部20と情報処理装置30と情報管理装置40を有する。
 運転情報生成部20は、車両の運転状態を示す種々の情報を運転情報として逐次生成する。また、運転情報生成部20は、運転状態を示す情報を取得した日時を示す情報を運転情報に含める。なお、運転情報生成部20は、運転状態を示す情報の取得位置を示す位置情報を運転情報に含めてもよい。運転情報生成部20は、生成した運転情報を情報処理装置30へ出力する。
 情報処理装置30は、危険運転判定部31、補足情報取得部32、情報記録部33、情報通信部34を有する。情報処理装置30は、車両に固定された構成または着脱可能な構成の何れであってもよい。また、情報処理装置30は、車両と別個に設けられて、車両との通信によって運転情報を車両から取得できる構成であってもよい。
 危険運転判定部31は、運転情報生成部20で生成された運転情報に基づき危険運転であるか判定して、危険運転判定結果を補足情報取得部32へ出力する。また、危険運転判定部31は、危険運転判定結果に車両情報(車両ナンバー等)または運転者情報(免許番号等)等を含めて、車両または運転者を特定できるようにする。さらに、危険運転判定部31は、危険運転と判定されたタイミングを基準とする所定期間、例えば前後所定時間分の運転情報を、危険運転判定結果に含めてもよい。
 補足情報取得部32は、危険運転判定部31で危険運転と判定されたことに応じて状況補足情報を取得する。補足情報取得部32は、手動で状況補足情報を取得してもよく、自動で状況補足情報を取得してもよい。補足情報取得部32は、手動で状況補足情報を取得する場合、危険運転と判定されたことを画像や音声でユーザ(運転者または同乗者)に通知する。また、補足情報取得部32は、危険運転の判定に対する異議を状況補足情報として受け付けることをユーザに通知する。補足情報取得部32は、カメラやマイクロフォン、タッチパネル等を用いて画像や音声,文字等で示された異議を状況補足情報として取得する。補足情報取得部32は、自動で状況補足情報を取得する場合、危険運転と判定されたことに応じて例えば周辺に位置する車両(以下「周辺車両」という)と通信を行い、周辺車両の運転情報や周辺車両で取得された周辺撮像画像等を状況補足情報として取得する。また、補足情報取得部32は、危険運転と判定されたことに応じて例えば周辺に設置されている監視カメラと通信を行い、監視カメラで生成されている撮像画像を状況補足情報として取得してもよい。補足情報取得部32は、取得した状況補足情報を、危険運転判定結果と関連付けて情報記録部33へ出力する。関連付けとは、危険運転判定結果を利用する際に、危険運転判定結果に関した状況補足情報を参照できることを示している。例えは、関連付けは、危険運転判定結果と状況補足情報を同一のファイルとして纏めること、危険運転判定結果と状況補足情報が別ファイルとされても危険運転判定結果の読み出し時に対応する状況補足情報が読出可能となること等を含む。
 情報記録部33は、危険運転判定結果と危険運転判定結果に関連付けられている状況補足情報を記録媒体に記録する。なお、記録媒体は情報記録部33に固定であってもよく着脱可能であってもよい。
 情報通信部34は、危険運転判定結果と状況補足情報を情報記録部33から取得して所定の送信タイミングで情報管理装置40へ送信する。例えば、情報通信部34は、予め設定されている日時、あるいは情報管理装置40から送信の要求があったタイミング、あるいは運転者が指示したタイミング等で行う。
 情報管理装置40は、情報処理装置30から危険運転判定結果と状況補足情報を取得する。危険運転判定結果と状況補足情報の取得は、情報通信部34を介して行ってもよく、記録媒体を用いて行ってもよい。情報管理装置40は、状況補足情報に基づき危険運転判定結果の有効性の判定を行い、運転情報に基づき危険運転と判定されている場合であっても、状況補足情報によって適切な運転操作等であったことが明らかであるときは危険運転の判定を無効とする。
 図2は、情報処理装置の動作を例示したフローチャートである。ステップST1で情報処理装置は運転情報を取得する。情報処理装置の危険運転判定部31は運転情報生成部20から車両の運転状況を示す運転情報を取得してステップST2に進む。
 ステップST2で情報処理装置は危険運転であるか判定する。情報処理装置の危険運転判定部31はステップST1で取得した運転情報に基づき危険運転であるか判定して、危険運転と判定されていない場合はステップST1に戻り、危険運転と判定した場合はステップST3に進む。
 ステップST3で情報処理装置は状況補足情報を取得する。情報処理装置の補足情報取得部32は、危険運転判定部31で危険運転と判定されたことに応じて状況補足情報を、手動または自動で取得してステップST4に進む。
 図3は、手動で状況補足情報を取得する場合の動作を示すフローチャートである。ステップST11で補足情報取得部は危険運転判定結果を通知する。補足情報取得部32は、危険運転であると判定されたことを画像や音声でユーザに通知する。この場合、危険運転と判定されたときの運転情報をユーザに提示すれば、ユーザはどのような理由で危険運転と判定されたか把握できるようになる。また、補足情報取得部32は、状況補足情報の情報取得指示を画像や音声で行いステップST12に進む。
 ステップST12で補足情報取得部は危険運転判定結果に対する異議があるか判定する。補足情報取得部32は、ステップST11で通知した危険運転判定結果に対して異議申立のユーザ操作が行われた場合はステップST13に進み、異議申立のユーザ操作が行われていない場合は図2のステップST4に進む。
 ステップST13で補足情報取得部は異議受付処理を行う。補足情報取得部32は、ユーザによって画像や音声,文字等で行われた異議を状況補足情報として取得して図2のステップST4に進む。
 図2のステップST4で情報処理装置は危険運転判定結果と状況補足情報を記録する。情報処理装置の情報記録部33は、危険運転判定結果と危険運転判定結果に関連付けられている状況補足情報を記録媒体に記録してステップST5に進む。
 ステップST5で情報処理装置は情報を送信するか判定する。情報処理装置の情報通信部34は、所定の送信タイミングとなった場合にステップST6に進み、所定の送信タイミングでない場合にステップST1に戻る。
 ステップST6で情報処理装置は情報送信処理を行う。情報処理装置の情報通信部34は、危険運転判定結果と危険運転判定結果に関連付けられている状況補足情報を情報管理装置40へ送信してステップST1に戻る。
 なお、図3は、危険運転であると判定されたときに状況補足情報を取得する場合を例示しているが、手動で状況補足情報を取得する場合、補足情報取得部32は、情報取得指示を所定の指示タイミングで行うようにしてもよい。例えば危険運転と判定された後の停車時に行うようにすれば、ユーザは、危険運転であると判定されてからの経過時間が少なく、事故等の危険性が少ない状態で状況補足情報(危険運転判定結果に対する異議)を入力できる。また、情報取得指示は、運転難易度が低い走行時(例えば直線道路の走行時等)に行うようにしてもよい。さらに、危険運転と判定された後の運転終了時に行うようにすれば、運転に支障をきたすことなく状況補足情報を入力できる。
 また、危険運転であると判定されたときに状況補足情報を取得する場合、運転者が車両の運転に集中できるように、補足情報取得部32は同乗者に対して情報取得指示を行うようにしてもよい。
 このように、本技術によれば危険運転と判定された場合、危険運転判定結果に対する状況補足情報としてユーザの異議や周辺車両の運転情報を関連付けて情報管理装置に提供できる。したがって、情報管理装置では、危険運転判定結果の有効性を状況補足情報によって確認できるようになり、危険運転判定結果に応じてインセンティブの付与(例えば保険料の割引や特典の付与等)を行う際に、ユーザの納得感を高めることが可能となる。
 <2.情報処理装置を車両に設けた場合の構成と動作>
 次に、本開示に係る技術を、自動車、電気自動車、ハイブリッド電気自動車、自動二輪車などの何れかの種類の車両に設けた場合について説明する。
 図4は、本開示に係る技術が適用され得る移動体制御システムの一例である車両制御システム7000の概略的な構成例を示すブロック図である。車両制御システム7000は、通信ネットワーク7010を介して接続された複数の電子制御ユニットを備える。図4に示した例では、車両制御システム7000は、駆動系制御ユニット7100、ボディ系制御ユニット7200、バッテリ制御ユニット7300、車外情報検出ユニット7400、車内情報検出ユニット7500、及び統合制御ユニット7600を備える。これらの複数の制御ユニットを接続する通信ネットワーク7010は、例えば、CAN(Controller Area Network)、LIN(Local Interconnect Network)、LAN(Local Area Network)又はFlexRay(登録商標)等の任意の規格に準拠した車載通信ネットワークであってよい。
 各制御ユニットは、各種プログラムにしたがって演算処理を行うマイクロコンピュータと、マイクロコンピュータにより実行されるプログラム又は各種演算に用いられるパラメータ等を記憶する記憶部と、各種制御対象の装置を駆動する駆動回路とを備える。各制御ユニットは、通信ネットワーク7010を介して他の制御ユニットとの間で通信を行うためのネットワークI/Fを備えるとともに、車内外の装置又はセンサ等との間で、有線通信又は無線通信により通信を行うための通信I/Fを備える。図4では、統合制御ユニット7600の機能構成として、マイクロコンピュータ7610、汎用通信I/F7620、専用通信I/F7630、測位部7640、ビーコン受信部7650、車内機器I/F7660、音声画像出力部7670、車載ネットワークI/F7680及び記憶部7690が図示されている。他の制御ユニットも同様に、マイクロコンピュータ、通信I/F及び記憶部等を備える。
 駆動系制御ユニット7100は、各種プログラムにしたがって車両の駆動系に関連する装置の動作を制御する。例えば、駆動系制御ユニット7100は、内燃機関又は駆動用モータ等の車両の駆動力を発生させるための駆動力発生装置、駆動力を車輪に伝達するための駆動力伝達機構、車両の舵角を調節するステアリング機構、及び、車両の制動力を発生させる制動装置等の制御装置として機能する。駆動系制御ユニット7100は、ABS(Antilock Brake System)又はESC(Electronic Stability Control)等の制御装置としての機能を有してもよい。
 駆動系制御ユニット7100には、車両状態検出部7110が接続される。車両状態検出部7110には、例えば、車体の軸回転運動の角速度を検出するジャイロセンサ、車両の加速度を検出する加速度センサ、あるいは、アクセルペダルの操作量、ブレーキペダルの操作量、ステアリングホイールの操舵角、エンジン回転数又は車輪の回転速度等を検出するためのセンサのうちの少なくとも一つが含まれる。駆動系制御ユニット7100は、車両状態検出部7110から入力される信号を用いて演算処理を行い、内燃機関、駆動用モータ、電動パワーステアリング装置又はブレーキ装置等を制御する。
 ボディ系制御ユニット7200は、各種プログラムにしたがって車体に装備された各種装置の動作を制御する。例えば、ボディ系制御ユニット7200は、キーレスエントリシステム、スマートキーシステム、パワーウィンドウ装置、あるいは、ヘッドランプ、バックランプ、ブレーキランプ、ウィンカー又はフォグランプ等の各種ランプの制御装置として機能する。この場合、ボディ系制御ユニット7200には、鍵を代替する携帯機から発信される電波又は各種スイッチの信号が入力され得る。ボディ系制御ユニット7200は、これらの電波又は信号の入力を受け付け、車両のドアロック装置、パワーウィンドウ装置、ランプ等を制御する。
 バッテリ制御ユニット7300は、各種プログラムにしたがって駆動用モータの電力供給源である二次電池7310を制御する。例えば、バッテリ制御ユニット7300には、二次電池7310を備えたバッテリ装置から、バッテリ温度、バッテリ出力電圧又はバッテリの残存容量等の情報が入力される。バッテリ制御ユニット7300は、これらの信号を用いて演算処理を行い、二次電池7310の温度調節制御又はバッテリ装置に備えられた冷却装置等の制御を行う。
 車外情報検出ユニット7400は、車両制御システム7000を搭載した車両の外部の情報を検出する。例えば、車外情報検出ユニット7400には、撮像部7410及び車外情報検出部7420のうちの少なくとも一方が接続される。撮像部7410には、ToF(Time Of Flight)カメラ、ステレオカメラ、単眼カメラ、赤外線カメラ及びその他のカメラのうちの少なくとも一つが含まれる。車外情報検出部7420には、例えば、現在の天候又は気象を検出するための環境センサ、あるいは、車両制御システム7000を搭載した車両の周囲の他の車両、障害物又は歩行者等を検出するための周囲情報検出センサのうちの少なくとも一つが含まれる。
 環境センサは、例えば、雨天を検出する雨滴センサ、霧を検出する霧センサ、日照度合いを検出する日照センサ、及び降雪を検出する雪センサのうちの少なくとも一つであってよい。周囲情報検出センサは、超音波センサ、レーダ装置及びLIDAR(Light Detection and Ranging、Laser Imaging Detection and Ranging)装置のうちの少なくとも一つであってよい。これらの撮像部7410及び車外情報検出部7420は、それぞれ独立したセンサないし装置として備えられてもよいし、複数のセンサないし装置が統合された装置として備えられてもよい。
 ここで、図5は、撮像部7410及び車外情報検出部7420の設置位置の例を示す。撮像部7910,7912,7914,7916,7918は、例えば、車両7900のフロントノーズ、サイドミラー、リアバンパ、バックドア及び車室内のフロントガラスの上部のうちの少なくとも一つの位置に設けられる。フロントノーズに備えられる撮像部7910及び車室内のフロントガラスの上部に備えられる撮像部7918は、主として車両7900の前方の画像を取得する。サイドミラーに備えられる撮像部7912,7914は、主として車両7900の側方の画像を取得する。リアバンパ又はバックドアに備えられる撮像部7916は、主として車両7900の後方の画像を取得する。車室内のフロントガラスの上部に備えられる撮像部7918は、主として先行車両又は、歩行者、障害物、信号機、交通標識又は車線等の検出に用いられる。
 なお、図5には、それぞれの撮像部7910,7912,7914,7916の撮影範囲の一例が示されている。撮像範囲aは、フロントノーズに設けられた撮像部7910の撮像範囲を示し、撮像範囲b,cは、それぞれサイドミラーに設けられた撮像部7912,7914の撮像範囲を示し、撮像範囲dは、リアバンパ又はバックドアに設けられた撮像部7916の撮像範囲を示す。例えば、撮像部7910,7912,7914,7916で撮像された画像データが重ね合わせられることにより、車両7900を上方から見た俯瞰画像が得られる。
 車両7900のフロント、リア、サイド、コーナ及び車室内のフロントガラスの上部に設けられる車外情報検出部7920,7922,7924,7926,7928,7930は、例えば超音波センサ又はレーダ装置であってよい。車両7900のフロントノーズ、リアバンパ、バックドア及び車室内のフロントガラスの上部に設けられる車外情報検出部7920,7926,7930は、例えばLIDAR装置であってよい。これらの車外情報検出部7920~7930は、主として先行車両、歩行者又は障害物等の検出に用いられる。
 図4に戻って説明を続ける。車外情報検出ユニット7400は、撮像部7410に車外の画像を撮像させるとともに、撮像された画像データを受信する。また、車外情報検出ユニット7400は、接続されている車外情報検出部7420から検出情報を受信する。車外情報検出部7420が超音波センサ、レーダ装置又はLIDAR装置である場合には、車外情報検出ユニット7400は、超音波又は電磁波等を発信させるとともに、受信された反射波の情報を受信する。車外情報検出ユニット7400は、受信した情報に基づいて、人、車、障害物、標識又は路面上の文字等の物体検出処理又は距離検出処理を行ってもよい。車外情報検出ユニット7400は、受信した情報に基づいて、降雨、霧又は路面状況等を認識する環境認識処理を行ってもよい。車外情報検出ユニット7400は、受信した情報に基づいて、車外の物体までの距離を算出してもよい。
 また、車外情報検出ユニット7400は、受信した画像データに基づいて、人、車、障害物、標識又は路面上の文字等を認識する画像認識処理又は距離検出処理を行ってもよい。車外情報検出ユニット7400は、受信した画像データに対して歪補正又は位置合わせ等の処理を行うとともに、異なる撮像部7410により撮像された画像データを合成して、俯瞰画像又はパノラマ画像を生成してもよい。車外情報検出ユニット7400は、異なる撮像部7410により撮像された画像データを用いて、視点変換処理を行ってもよい。
 車内情報検出ユニット7500は、車内の情報を検出する。車内情報検出ユニット7500には、例えば、運転者の状態を検出する運転者状態検出部7510が接続される。運転者状態検出部7510は、運転者を撮像するカメラ、運転者の生体情報を検出する生体センサ又は車室内の音声を集音するマイク等を含んでもよい。生体センサは、例えば、座面又はステアリングホイール等に設けられ、座席に座った搭乗者又はステアリングホイールを握る運転者の生体情報を検出する。車内情報検出ユニット7500は、運転者状態検出部7510から入力される検出情報に基づいて、運転者の疲労度合い又は集中度合いを算出してもよいし、運転者が居眠りをしていないかを判別してもよい。車内情報検出ユニット7500は、集音された音声信号に対してノイズキャンセリング処理等の処理を行ってもよい。
 統合制御ユニット7600は、各種プログラムにしたがって車両制御システム7000内の動作全般を制御する。統合制御ユニット7600には、入力部7800が接続されている。入力部7800は、例えば、タッチパネル、ボタン、マイクロフォン、スイッチ又はレバー等、搭乗者によって入力操作され得る装置によって実現される。統合制御ユニット7600には、マイクロフォンにより入力される音声を音声認識することにより得たデータが入力されてもよい。入力部7800は、例えば、赤外線又はその他の電波を利用したリモートコントロール装置であってもよいし、車両制御システム7000の操作に対応した携帯電話又はPDA(Personal Digital Assistant)等の外部接続機器であってもよい。入力部7800は、例えばカメラであってもよく、その場合搭乗者はジェスチャにより情報を入力することができる。あるいは、搭乗者が装着したウェアラブル装置の動きを検出することで得られたデータが入力されてもよい。さらに、入力部7800は、例えば、上記の入力部7800を用いて搭乗者等により入力された情報に基づいて入力信号を生成し、統合制御ユニット7600に出力する入力制御回路などを含んでもよい。搭乗者等は、この入力部7800を操作することにより、車両制御システム7000に対して各種のデータを入力したり処理動作を指示したりする。
 記憶部7690は、マイクロコンピュータにより実行される各種プログラムを記憶するROM(Read Only Memory)、及び各種パラメータ、演算結果又はセンサ値等を記憶するRAM(Random Access Memory)を含んでいてもよい。また、記憶部7690は、HDD(Hard Disc Drive)等の磁気記憶デバイス、半導体記憶デバイス、光記憶デバイス又は光磁気記憶デバイス等によって実現してもよい。
 汎用通信I/F7620は、外部環境7750に存在する様々な機器との間の通信を仲介する汎用的な通信I/Fである。汎用通信I/F7620は、GSM(Global System of Mobile communications)、WiMAX、LTE(Long Term Evolution)若しくはLTE-A(LTE-Advanced)などのセルラー通信プロトコル、又は無線LAN(Wi-Fi(登録商標)ともいう)、Bluetooth(登録商標)などのその他の無線通信プロトコルを実装してよい。汎用通信I/F7620は、例えば、基地局又はアクセスポイントを介して、外部ネットワーク(例えば、インターネット、クラウドネットワーク又は事業者固有のネットワーク)上に存在する機器(例えば、アプリケーションサーバ又は制御サーバ)へ接続してもよい。また、汎用通信I/F7620は、例えばP2P(Peer To Peer)技術を用いて、車両の近傍に存在する端末(例えば、運転者、歩行者若しくは店舗の端末、又はMTC(Machine Type Communication)端末)と接続してもよい。
 専用通信I/F7630は、車両における使用を目的として策定された通信プロトコルをサポートする通信I/Fである。専用通信I/F7630は、例えば、下位レイヤのIEEE802.11pと上位レイヤのIEEE1609との組合せであるWAVE(Wireless Access in Vehicle Environment)、DSRC(Dedicated Short Range Communications)、又はセルラー通信プロトコルといった標準プロトコルを実装してよい。専用通信I/F7630は、典型的には、車車間(Vehicle to Vehicle)通信、路車間(Vehicle to Infrastructure)通信、車両と家との間(Vehicle to Home)の通信及び歩車間(Vehicle to Pedestrian)通信のうちの1つ以上を含む概念であるV2X通信を遂行する。
 測位部7640は、例えば、GNSS(Global Navigation Satellite System)衛星からのGNSS信号(例えば、GPS(Global Positioning System)衛星からのGPS信号)を受信して測位を実行し、車両の緯度、経度及び高度を含む位置情報を生成する。なお、測位部7640は、無線アクセスポイントとの信号の交換により現在位置を特定してもよく、又は測位機能を有する携帯電話、PHS若しくはスマートフォンといった端末から位置情報を取得してもよい。
 ビーコン受信部7650は、例えば、道路上に設置された無線局等から発信される電波あるいは電磁波を受信し、現在位置、渋滞、通行止め又は所要時間等の情報を取得する。なお、ビーコン受信部7650の機能は、上述した専用通信I/F7630に含まれてもよい。
 車内機器I/F7660は、マイクロコンピュータ7610と車内に存在する様々な車内機器7760との間の接続を仲介する通信インタフェースである。車内機器I/F7660は、無線LAN、Bluetooth(登録商標)、NFC(Near Field Communication)又はWUSB(Wireless USB)といった無線通信プロトコルを用いて無線接続を確立してもよい。また、車内機器I/F7660は、図示しない接続端子(及び、必要であればケーブル)を介して、USB(Universal Serial Bus)、HDMI(High-Definition Multimedia Interface)、又はMHL(Mobile High-definition Link)等の有線接続を確立してもよい。車内機器7760は、例えば、搭乗者が有するモバイル機器若しくはウェアラブル機器、又は車両に搬入され若しくは取り付けられる情報機器のうちの少なくとも1つを含んでいてもよい。また、車内機器7760は、任意の目的地までの経路探索を行うナビゲーション装置を含んでいてもよい。車内機器I/F7660は、これらの車内機器7760との間で、制御信号又はデータ信号を交換する。
 車載ネットワークI/F7680は、マイクロコンピュータ7610と通信ネットワーク7010との間の通信を仲介するインタフェースである。車載ネットワークI/F7680は、通信ネットワーク7010によりサポートされる所定のプロトコルに則して、信号等を送受信する。
 統合制御ユニット7600のマイクロコンピュータ7610は、汎用通信I/F7620、専用通信I/F7630、測位部7640、ビーコン受信部7650、車内機器I/F7660及び車載ネットワークI/F7680のうちの少なくとも一つを介して取得される情報に基づき、各種プログラムにしたがって、車両制御システム7000を制御する。例えば、マイクロコンピュータ7610は、取得される車内外の情報に基づいて、駆動力発生装置、ステアリング機構又は制動装置の制御目標値を演算し、駆動系制御ユニット7100に対して制御指令を出力してもよい。例えば、マイクロコンピュータ7610は、車両の衝突回避あるいは衝撃緩和、車間距離に基づく追従走行、車速維持走行、車両の衝突警告、又は車両のレーン逸脱警告等を含むADAS(Advanced Driver Assistance System)の機能実現を目的とした協調制御を行ってもよい。また、マイクロコンピュータ7610は、取得される車両の周囲の情報に基づいて駆動力発生装置、ステアリング機構又は制動装置等を制御することにより、運転者の操作に拠らずに自律的に走行する自動運転等を目的とした協調制御を行ってもよい。
 マイクロコンピュータ7610は、汎用通信I/F7620、専用通信I/F7630、測位部7640、ビーコン受信部7650、車内機器I/F7660及び車載ネットワークI/F7680のうちの少なくとも一つを介して取得される情報に基づき、車両と周辺の構造物や人物等の物体との間の3次元距離情報を生成し、車両の現在位置の周辺情報を含むローカル地図情報を作成してもよい。また、マイクロコンピュータ7610は、取得される情報に基づき、車両の衝突、歩行者等の近接又は通行止めの道路への進入等の危険を予測し、警告用信号を生成してもよい。警告用信号は、例えば、警告音を発生させたり、警告ランプを点灯させたりするための信号であってよい。
 音声画像出力部7670は、車両の搭乗者又は車外に対して、視覚的又は聴覚的に情報を通知することが可能な出力装置へ音声及び画像のうちの少なくとも一方の出力信号を送信する。図4の例では、出力装置として、オーディオスピーカ7710、表示部7720及びインストルメントパネル7730が例示されている。表示部7720は、例えば、オンボードディスプレイ及びヘッドアップディスプレイの少なくとも一つを含んでいてもよい。表示部7720は、AR(Augmented Reality)表示機能を有していてもよい。出力装置は、これらの装置以外の、ヘッドホン、搭乗者が装着する眼鏡型ディスプレイ等のウェアラブルデバイス、プロジェクタ又はランプ等の他の装置であってもよい。出力装置が表示装置の場合、表示装置は、マイクロコンピュータ7610が行った各種処理により得られた結果又は他の制御ユニットから受信された情報を、テキスト、イメージ、表、グラフ等、様々な形式で視覚的に表示する。また、出力装置が音声出力装置の場合、音声出力装置は、再生された音声データ又は音響データ等からなるオーディオ信号をアナログ信号に変換して聴覚的に出力する。
 なお、図4に示した例において、通信ネットワーク7010を介して接続された少なくとも二つの制御ユニットが一つの制御ユニットとして一体化されてもよい。あるいは、個々の制御ユニットが、複数の制御ユニットにより構成されてもよい。さらに、車両制御システム7000が、図示されていない別の制御ユニットを備えてもよい。また、上記の説明において、いずれかの制御ユニットが担う機能の一部又は全部を、他の制御ユニットに持たせてもよい。つまり、通信ネットワーク7010を介して情報の送受信がされるようになっていれば、所定の演算処理が、いずれかの制御ユニットで行われるようになってもよい。同様に、いずれかの制御ユニットに接続されているセンサ又は装置が、他の制御ユニットに接続されるとともに、複数の制御ユニットが、通信ネットワーク7010を介して相互に検出情報を送受信してもよい。
 本技術の情報処理装置を図4に示す車両制御システム7000に設けた場合、車両状態検出部7110や撮像部7410,車外情報検出部7420等を用いて運転情報生成部20を構成する。また、マイクロコンピュータ7610を危険運転判定部31として用いる。また、マイクロコンピュータ7610,専用通信I/F7630,音声画像出力部7670,オーディオスピーカ7710,表示部7720,入力部7800等を用いて補足情報取得部32を構成する。また、記憶部7690を情報記録部33として用いる、さらに、マイクロコンピュータ7610と汎用通信I/F7620を用いて情報通信部34を構成する。
 運転情報生成部20は、車両状態検出部7110で検出された車両の加速度、アクセルペダルの操作、ブレーキペダルの操作、ステアリングホイールの操舵、エンジン回転数又は車輪の回転速度等を運転情報として用いる。また、運転情報生成部20は、撮像部7410で生成された撮像画像を運転情報として用いてもよい。さらに、運転情報生成部20は、車外情報検出部7420で検出された現在の天候又は気象や、周囲の他の車両、障害物又は歩行者等の検出結果を運転情報として用いてもよい。なお、統合制御ユニット7600には時計部(図示せず)が設けられており、運転情報に日時情報を含めるようにする。また、測位部7640で生成された位置情報を運転情報に含めてもよい。
 危険運転判定部31の機能を有するマイクロコンピュータ7610は、車両状態検出部7110の検出結果や撮像部7410で生成された撮像画像、車外情報検出部7420の検出結果に基づき危険運転であるか判定する。ここで危険運転とは、例えば、急加速や急減速、速度超過、急ハンドル、車間距離不足等である。危険運転判定部31は、危険運転判定結果を補足情報取得部32へ出力する。また、危険運転判定部31は、危険運転判定結果に車両情報(車両ナンバー等)または運転者情報(免許番号等)等を含める。さらに、危険運転判定部31は、危険運転と判定されたタイミングを基準とする例えば前後所定時間分の運転情報を危険運転判定結果に含める。
 補足情報取得部32は、危険運転判定部31で危険運転と判定されたことに応じて状況補足情報を取得する。例えば、状況補足情報を手動で取得する場合、マイクロコンピュータ7610は、音声画像出力部7670を制御して、危険運転判定結果をオーディオスピーカ7710や表示部7720を利用してユーザに画像や音声で通知する。また、マイクロコンピュータ7610は、危険運転判定結果に危険運転であると判定されたときの運転情報を含めて通知して、危険運転と判定された要因をユーザが認識できるようにしてもよい。例えば、危険運転と判定された要因と判定基準をグラフ(加減速状態の推移等を示すグラフ等)や文字(操作や車間距離等を示す情報)あるいは音声(どのような理由で危険運転と判定されたかを解説した音声等)等で提示する。このように、危険運転と判定された要因を提示すれば、どのような運転操作が危険運転と判定されたか認識できるようになり、危険運転判定結果に対して適格な異議申立を行うことが可能となる。次に、マイクロコンピュータ7610は、情報取得指示を所定の指示タイミングで行う。所定の指示タイミングは、例えば危険運転であると判定された直後、危険運転と判定された後の停車時または運転難易度が低い走行時、危険運転と判定された後の運転終了時の何れかを含む。なお、運転難易度は、例えば高速道路や曲がりくねった道路、市街地の道路を走行しているときは運転難易度が高く、郊外の直線道路等のように運転操作が容易であるときは運転難易度が低いとする。このように情報取得指示を行うことで、ユーザは危険運転判定結果に対する異議申立の機会が与えられたことを認識できる。情報取得指示では、危険運転と判定された現場の証拠集めをユーザに要請する。証拠集めの要請では、例えば危険運転と判定された現場の写真を撮る、危険運転と判定された状況について目撃者の証言(文章,音声)を取る、相手方がいる場合は相手方の証言を取る等の指示を行うようにしてもよい。また、情報取得指示では、異議を画像や音声,文章等で入力するように促してもよい。
 さらに、情報取得指示では、危険運転と判定されたタイミングを基準とした所定時間分の運転情報(例えば撮像部7410や車外情報検出部7420で撮像された撮像画像等)を提示して異議を文章や音声で入力するように促してもよい。また、撮像部7410や車外情報検出部7420で撮像された撮像画像を提示する場合、例えばマイクロコンピュータ7610は撮像画像を用いて物体認識を行い、認識した物体にタグを付与して表示部7720で提示してもよい。図6は、タグを付与した画像を例示している。物体認識では、例えば図5に示す撮像部7918で取得された撮像画像GAを用いて動きを生じる物体(例えば車両や人等)を認識して、認識した個々の物体を区分できるようにタグを付与する。なお、図6では、車両と人が認識されて、認識された車両には「車両T」のタグ、認識された人には「歩行者P」のタグが付与された場合を例示している。このように、認識した物体にタグ付けを行って運転情報を提示すれば、ユーザは、危険運転判定結果に対してタグを利用して異議申立を容易かつ適格に行うことができるようになる。
 入力部7800はタッチパネルやマイクロフォン等で構成されており、ユーザが入力した異議(目撃者の証言等)を状況補足情報として取得する。
 状況補足情報を自動で取得する場合、マイクロコンピュータ7610は、例えば専用通信I/F7630を用いて周辺に位置する外部機器と通信を行い、状況補足情報を自動的に取得する。外部機器が例えば周辺車両である場合、マイクロコンピュータ7610は、危険運転であると判定されたタイミングを基準とする所定時間分の運転情報を状況補足情報として周辺車両から取得する。また、外部機器が例えば監視カメラである場合、マイクロコンピュータ7610は、危険運転であると判定されたタイミングを基準とする所定時間分の撮像画像を状況補足情報として監視カメラから取得する。なお、状況補足情報の取得は、例えば危険運転であると判定された直後に自動的に行うようにしてもよい。また、危険運転であると判定された直後に危険運転判定結果をユーザに提示して、ユーザが状況補足情報の取得を指示した場合に、外部機器と通信を行って自動的に取得してもよい。
 また、補足情報取得部32は、運転者に対して危険運転判定結果の通知や情報取得指示を行う場合に限らず、同乗者がいる場合は、同乗者に対して危険運転判定結果の通知や情報取得指示を行うようにしてもよい。この場合、運転者は運転操作に集中できるようになる。
 情報記録部33として用いる記憶部7690は、危険運転判定結果にと取得した状況補足情報を関連付けて記録する。なお、記憶部7690の記録媒体は固定されていてもよく着脱可能であってもよい。
 情報通信部34は、危険運転判定結果と状況補足情報を所定の送信タイミングで情報管理装置40へ送信する。マイクロコンピュータ7610は、所定の送信タイミングで例えば汎用通信IF7620を用いて情報管理装置40と通信を行い、記憶部7690に記録されている危険運転判定結果と状況補足情報を送信する。なお、所定の送信タイミングは、予め設定された日時、所定期間の経過時、情報の要求は送信の指示時、または記憶部7690に記録されている危険運転判定結果と状況補足情報の情報量が所定量となったときの何れかを含むタイミングとする。
 なお、情報管理装置40に対する危険運転判定結果と状況補足情報の提供は、情報通信部34を介して行う場合に限られない。例えば記憶部7690の記録媒体が着脱可能に構成されている場合、危険運転判定結果と状況補足情報が記録された記録媒体を情報管理装置側に送付して危険運転判定結果と状況補足情報を利用できるようにしてもよい。
 また、情報処理装置が設けられる車両制御システムは、図4に示す構成に限られず、他の機能を有する機能ブロックが設けられた車両制御システムであってもよく、図4に示す構成の一部を有していない車両制御システムであってもよい。
 <3.情報管理装置の構成と動作>
 図7は、情報管理装置の構成を例示した図である。情報管理装置40は、例えばCPU41、メモリ部42、入出力インタフェース(I/F)部43、通信部44、記録部45等を有しており、各部はバス49を介して接続されている。CPU41は、メモリ部42に記録されているプログラムを実行して、例えば通信部44を介して情報処理装置30から危険運転判定結果と状況補足情報を取得する。さらに、CPU41は、入出力I/F部43を用いて、情報管理者に対して危険運転判定結果と関連付けられている状況補足情報を提示して、危険運転判定結果に対する有効性を判断できるようにする。また、CPU41は、有効性の判断が行われた危険運転判定結果に基づき、対応する車両や運転者に対してインセンティブの付与等を行う。
 メモリ部42はRAM(Random Access Memory)やROM(Read Only Memory)等を用いて構成されている。メモリ部42は情報管理装置40で所望の動作を行うためのプログラムを記憶する。また、メモリ部42は、種々の処理を行う際のワークメモリ等として用いられる。
 入出力I/F部43は、表示部や入力部等を用いて構成されている。表示部は、液晶表示素子や有機EL表示素子等を用いて構成されており、記録部45に記録されている情報やCPU41等により処理された情報等を表示する。入力部は、キーボードやマウス、タッチパネル等を用いて構成されておりユーザ操作を受け付ける。
 通信部44は、情報処理装置30と通信を行い、危険運転判定結果と状況補足情報を取得する。記録部45はハードディスクや不揮発性メモリ等を用いて構成されており、情報処理装置30から取得した危険運転判定結果と状況補足情報等を記録する。なお、情報管理装置40の構成は図7に示す構成に限られず、他の機能を有する機能ブロック等が設けられていてもよい。
 このように構成された情報管理装置40は、情報処理装置30から危険運転判定結果と状況補足情報を取得できることから、危険運転判定結果に関連付けられている状況補足情報に基づき危険運転判定結果の有効性を判断できる。したがって、危険運転判定結果に基づきインセンティブの付与等を行う場合に、車両を利用したユーザの納得感を高めることが可能となる。
 <4.情報処理装置の他の構成と動作>
 次に、情報処理装置が車両と別個に設けられる場合について説明する。携帯通信端末装置(例えばスマートフォンやタブレット)等では、撮像画像や加速度、位置情報等を取得できるセンサや外部機器と通信を行う通信部が設けられている。また、携帯通信端末装置には、マイクロコンピュータや表示部,入力部,記録部が設けられている。したがって、携帯通信端末装置を本技術の情報処理装置として用いることができる。この場合、携帯通信端末装置のセンサで取得される情報を運転情報として利用する。また、携帯通信端末装置のマイクロコンピュータで危険運転の判定を行い、表示部や入力部を利用して状況補足情報を取得する。さらに、携帯通信端末装置の記録部は、危険運転判定結果に状況補足情報を関連付けて記録する。さらに、記録部に記録されている危険運転判定結果と状況補足情報を、通信部を用いて情報管理装置に送信する。なお、車両情報やセンサで取得されていない運転情報は、通信部を用いて車両から取得する。
 また、情報処理装置として携帯通信端末装置を用いれば、情報処理装置が設けられていない車両を運転する場合であっても、危険運転判定結果や状況補足情報を情報管理装置に提供できるようになる。
 明細書中において説明した一連の処理はハードウェア、またはソフトウェア、あるいは両者の複合構成によって実行することが可能である。ソフトウェアによる処理を実行する場合は、処理シーケンスを記録したプログラムを、専用のハードウェアに組み込まれたコンピュータ内のメモリにインストールして実行させる。または、各種処理が実行可能な汎用コンピュータにプログラムをインストールして実行させることが可能である。
 例えば、プログラムは記録媒体としてのハードディスクやSSD(Solid State Drive)、ROM(Read Only Memory)に予め記録しておくことができる。あるいは、プログラムはフレキシブルディスク、CD-ROM(Compact Disc Read Only Memory),MO(Magneto optical)ディスク,DVD(Digital Versatile Disc)、BD(Blu-Ray Disc(登録商標))、磁気ディスク、半導体メモリカード等のリムーバブル記録媒体に、一時的または永続的に格納(記録)しておくことができる。このようなリムーバブル記録媒体は、いわゆるパッケージソフトウェアとして提供することができる。
 また、プログラムは、リムーバブル記録媒体からコンピュータにインストールする他、ダウンロードサイトからLAN(Local Area Network)やインターネット等のネットワークを介して、コンピュータに無線または有線で転送してもよい。コンピュータでは、そのようにして転送されてくるプログラムを受信し、内蔵するハードディスク等の記録媒体にインストールすることができる。
 なお、本明細書に記載した効果はあくまで例示であって限定されるものではなく、記載されていない付加的な効果があってもよい。また、本技術は、上述した実施の形態に限定して解釈されるべきではない。この技術の実施の形態は、例示という形態で本技術を開示しており、本技術の要旨を逸脱しない範囲で当業者が実施の形態の修正や代用をなし得ることは自明である。すなわち、本技術の要旨を判断するためには、請求の範囲を参酌すべきである。
 また、本技術の情報処理装置は以下のような構成も取ることができる。
 (1) 運転情報に基づき危険運転であるか判定する危険運転判定部と、
 前記危険運転判定部で危険運転と判定されたことに応じて状況補足情報を取得する補足情報取得部と
を備える情報処理装置。
 (2) 前記補足情報取得部は、前記危険運転であると判定されたことに応じて状況補足情報の情報取得指示を行う(1)に記載の情報処理装置。
 (3) 前記補足情報取得部は、前記情報取得指示を画像または音声で行う(2)に記載の情報処理装置。
 (4) 前記補足情報取得部は、前記危険運転であると判定されたときの運転情報を提示する(3)に記載の情報処理装置。
 (5) 前記運転情報は周辺撮像画像を含み、
 前記補足情報取得部は、前記周辺撮像画像を用いて被写体認識を行い、前記情報取得指示では認識した被写体にタグを付与して前記周辺撮像画像を提示する(4)に記載の情報処理装置。
 (6) 前記補足情報取得部は、前記情報取得指示を、前記危険運転であると判定された直後、前記危険運転と判定された後の停車時または運転難易度が低い走行時、前記危険運転と判定された後の運転終了時の何れかを含む所定の指示タイミングで行う(2)乃至(5)の何れかに記載の情報処理装置。
 (7) 前記補足情報取得部は、同乗者に対して前記情報取得指示を行う(2)乃至(6)の何れかに記載の情報処理装置。
 (8) 前記補足情報取得部は、前記情報取得指示として、前記危険運転であると判定されたことに対する異議を画像または音声または文字で取得する指示を行う(2)乃至(7)の何れかに記載の情報処理装置。
 (9) 前記補足情報取得部は、周辺に位置する外部機器と通信を行い、前記状況補足情報を前記外部機器から取得する通信部を備える(1)乃至(8)の何れかに記載の情報処理装置。
 (10) 前記外部機器は周辺車両であり、
 前記補足情報取得部は、前記状況補足情報として前記危険運転であると判定されたときの運転情報を取得する(9)に記載の情報処理装置。
 (11) 前記危険運転判定部で得られた危険運転判定結果に対して前記補足情報取得部で取得した状況補足情報を関連付けて記録する情報記録部をさらに備える(1)乃至(10)の何れかに記載の情報処理装置。
 (12) 前記補足情報取得部は、前記危険運転判定結果に、前記危険運転であると判定されたタイミングを基準とする所定時間分の運転情報を含める(11)に記載の情報処理装置。
 (13) 前記情報記録部で記録されている前記危険運転判定結果と前記状況補足情報を情報管理装置に送信する情報送信部をさらに備える(1)乃至(12)の何れかに記載の情報処理装置。
 (14) 前記情報送信部は、前記危険運転判定結果と前記危険運転判定結果に関連付けられている前記状況補足情報を、予め設定された日時、所定期間の経過時、情報の要求は送信の指示時、または前記情報記録部に記録されている情報が所定量となった時の何れかを含む所定の送信タイミングで情報管理装置へ送信する(13)に記載の情報処理装置。
 この技術の情報処理装置と情報処理方法によれば、運転情報に基づき危険運転と判定されたことに応じて状況補足情報が取得される。このため、状況補足情報によって危険運転と判定されたされた場合の状況を危険運転判定結果と共に情報管理装置へ通知できるようになる。したがって、車両の運転状況に応じてインセンティブを付与するようなサービスを行う際に、利用者の納得感の高いサービスを提供できるようになる。
 10・・・情報収集システム
 20・・・運転情報生成部
 30・・・情報処理装置
 31・・・危険運転判定部
 32・・・補足情報取得部
 33・・・情報記録部
 34・・・情報通信部
 40・・・情報管理装置
 41・・・CPU
 42・・・メモリ部
 43・・・入出力インタフェース(I/F)部
 44・・・通信部
 45・・・記録部
 49・・・バス

Claims (15)

  1.  運転情報に基づき危険運転であるか判定する危険運転判定部と、
     前記危険運転判定部で危険運転と判定されたことに応じて状況補足情報を取得する補足情報取得部と
    を備える情報処理装置。
  2.  前記補足情報取得部は、前記危険運転であると判定されたことに応じて状況補足情報の情報取得指示を行う
    請求項1に記載の情報処理装置。 
  3.  前記補足情報取得部は、前記情報取得指示を画像または音声で行う
    請求項2に記載の情報処理装置。
  4.  前記補足情報取得部は、前記危険運転であると判定されたときの運転情報を提示する
    請求項3に記載の情報処理装置。
  5.  前記運転情報は周辺撮像画像を含み、
     前記補足情報取得部は、前記周辺撮像画像を用いて被写体認識を行い、前記情報取得指示では認識した被写体にタグを付与して前記周辺撮像画像を提示する
    請求項4に記載の情報処理装置。
  6.  前記補足情報取得部は、前記情報取得指示を、前記危険運転であると判定された直後、前記危険運転と判定された後の停車時または運転難易度が低い走行時、前記危険運転と判定された後の運転終了時の何れかを含む所定の指示タイミングで行う
    請求項2に記載の情報処理装置。
  7.  前記補足情報取得部は、同乗者に対して前記情報取得指示を行う
    請求項2に記載の情報処理装置。
  8.  前記補足情報取得部は、前記情報取得指示として、前記危険運転であると判定されたことに対する異議を画像または音声または文字で取得する指示を行う
    請求項2に記載の情報処理装置。
  9.  前記補足情報取得部は、周辺に位置する外部機器と通信を行い、前記状況補足情報を前記外部機器から取得する通信部を備える
    請求項1に記載の情報処理装置。
  10.  前記外部機器は周辺車両であり、
     前記補足情報取得部は、前記状況補足情報として前記危険運転であると判定されたときの運転情報を取得する
    請求項9に記載の情報処理装置。
  11.  前記危険運転判定部で得られた危険運転判定結果に対して前記補足情報取得部で取得した状況補足情報を関連付けて記録する情報記録部をさらに備える
    請求項1に記載の情報処理装置。
  12.  前記補足情報取得部は、前記危険運転判定結果に、前記危険運転であると判定されたタイミングを基準とする所定時間分の運転情報を含める
    請求項11に記載の情報処理装置。
  13.  前記情報記録部で記録されている前記危険運転判定結果と前記状況補足情報を情報管理装置に送信する情報送信部をさらに備える
    請求項1に記載の情報処理装置。
  14.  前記情報送信部は、前記危険運転判定結果と前記危険運転判定結果に関連付けられている前記状況補足情報を、予め設定された日時、所定期間の経過時、情報の要求は送信の指示時、または前記情報記録部に記録されている情報が所定量となった時の何れかを含む所定の送信タイミングで情報管理装置へ送信する
    請求項13に記載の情報処理装置。
  15.  運転情報に基づき危険運転であるか危険運転判定部で判定することと、
     前記危険運転判定部で危険運転と判定されたことに応じて状況補足情報を補足情報取得部で取得することと
    を含む情報処理方法。
PCT/JP2018/007213 2017-03-30 2018-02-27 情報処理装置と情報処理方法 WO2018180121A1 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2019509020A JP7074125B2 (ja) 2017-03-30 2018-02-27 情報処理装置と情報処理方法
US16/496,657 US11235783B2 (en) 2017-03-30 2018-02-27 Information processing apparatus and information processing method

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2017067389 2017-03-30
JP2017-067389 2017-03-30

Publications (1)

Publication Number Publication Date
WO2018180121A1 true WO2018180121A1 (ja) 2018-10-04

Family

ID=63675281

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2018/007213 WO2018180121A1 (ja) 2017-03-30 2018-02-27 情報処理装置と情報処理方法

Country Status (3)

Country Link
US (1) US11235783B2 (ja)
JP (1) JP7074125B2 (ja)
WO (1) WO2018180121A1 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2021117126A (ja) * 2020-01-27 2021-08-10 トヨタ自動車株式会社 表示制御装置、表示制御方法及びプログラム
JP2022511093A (ja) * 2018-12-13 2022-01-28 ズークス インコーポレイテッド デバイスメッセージフレームワーク

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6610693B2 (ja) * 2018-03-20 2019-11-27 株式会社Jvcケンウッド 車両用撮像記録装置、車両用撮像制御方法及びプログラム
JP7287291B2 (ja) * 2020-01-16 2023-06-06 トヨタ自動車株式会社 情報処理装置、プログラム、及び、情報処理方法

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010238214A (ja) * 2008-06-19 2010-10-21 Rohm Co Ltd ドライブレコーダ
JP2011041320A (ja) * 2010-10-28 2011-02-24 Fujitsu Ten Ltd ドライブレコーダ
JP2014010496A (ja) * 2012-06-27 2014-01-20 Toyota Central R&D Labs Inc ドライブレコーダ及びドライブレコード管理システム
JP2015038773A (ja) * 2014-10-27 2015-02-26 富士通株式会社 危険運転記録方法、危険運転記録プログラム及び危険運転記録装置
JP2016177375A (ja) * 2015-03-18 2016-10-06 株式会社リコー 運転特性評価用情報取得システムおよび取得方法
WO2016166791A1 (ja) * 2015-04-13 2016-10-20 三菱電機株式会社 運転支援装置

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3044025B1 (ja) * 1998-12-09 2000-05-22 株式会社データ・テック 運転傾向性の分析が可能な運行管理システム及びその構成装置
JP3694654B2 (ja) 2001-02-06 2005-09-14 株式会社日立製作所 車両走行情報管理方法、車両走行情報管理システム、車載情報端末装置、及び、コンピュータ読み取り可能な記録媒体
JP4199614B2 (ja) 2003-08-06 2008-12-17 株式会社堀場製作所 車両の運行管理システム
JP2012084136A (ja) 2010-09-13 2012-04-26 Shinano Kenshi Co Ltd 車両運行管理システム
US20140309930A1 (en) * 2013-04-15 2014-10-16 Flextronics Ap, Llc Automatic camera image retrieval based on route traffic and conditions
WO2015134311A1 (en) * 2014-03-03 2015-09-11 Inrix Inc Traffic obstruction detection
JP6201927B2 (ja) * 2014-08-01 2017-09-27 トヨタ自動車株式会社 車両制御装置
JP6641916B2 (ja) * 2015-11-20 2020-02-05 オムロン株式会社 自動運転支援装置、自動運転支援システム、自動運転支援方法および自動運転支援プログラム

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010238214A (ja) * 2008-06-19 2010-10-21 Rohm Co Ltd ドライブレコーダ
JP2011041320A (ja) * 2010-10-28 2011-02-24 Fujitsu Ten Ltd ドライブレコーダ
JP2014010496A (ja) * 2012-06-27 2014-01-20 Toyota Central R&D Labs Inc ドライブレコーダ及びドライブレコード管理システム
JP2015038773A (ja) * 2014-10-27 2015-02-26 富士通株式会社 危険運転記録方法、危険運転記録プログラム及び危険運転記録装置
JP2016177375A (ja) * 2015-03-18 2016-10-06 株式会社リコー 運転特性評価用情報取得システムおよび取得方法
WO2016166791A1 (ja) * 2015-04-13 2016-10-20 三菱電機株式会社 運転支援装置

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2022511093A (ja) * 2018-12-13 2022-01-28 ズークス インコーポレイテッド デバイスメッセージフレームワーク
JP7367938B2 (ja) 2018-12-13 2023-10-24 ズークス インコーポレイテッド デバイスメッセージフレームワーク
JP2021117126A (ja) * 2020-01-27 2021-08-10 トヨタ自動車株式会社 表示制御装置、表示制御方法及びプログラム
JP7298491B2 (ja) 2020-01-27 2023-06-27 トヨタ自動車株式会社 表示制御装置、表示制御方法及びプログラム

Also Published As

Publication number Publication date
US20200377114A1 (en) 2020-12-03
JP7074125B2 (ja) 2022-05-24
US11235783B2 (en) 2022-02-01
JPWO2018180121A1 (ja) 2020-02-13

Similar Documents

Publication Publication Date Title
JP6773046B2 (ja) 運転支援装置及び運転支援方法、並びに移動体
US20180357484A1 (en) Video processing device and video processing method
JP7294148B2 (ja) キャリブレーション装置とキャリブレーション方法およびプログラム
US20200322585A1 (en) Image processing device, image processing method, and vehicle
JP7074125B2 (ja) 情報処理装置と情報処理方法
WO2020195965A1 (ja) 情報処理装置、情報処理方法及びプログラム
WO2018051810A1 (ja) 画像処理装置および方法、並びに画像処理システム
US11585898B2 (en) Signal processing device, signal processing method, and program
EP3669358B1 (en) Server, method, non-transitory computer-readable medium, and system
US20200035100A1 (en) Driving support apparatus and driving support method
JP7139584B2 (ja) 情報処理装置、情報処理方法、プログラム、および情報処理システム
US12067795B2 (en) Information processing device and information processing method
WO2020085101A1 (ja) 画像処理装置と画像処理方法およびプログラム
JP7160085B2 (ja) 画像処理装置、画像処理方法及びプログラム
WO2022044830A1 (ja) 情報処理装置、および情報処理方法
WO2018123714A1 (ja) カメラ、カメラの処理方法、サーバ、サーバの処理方法および情報処理装置
JP7173056B2 (ja) 認識装置と認識方法およびプログラム
WO2020195969A1 (ja) 情報処理装置、情報処理方法及びプログラム
CN119998807A (zh) 信息处理装置、信息处理方法及程序

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 18777271

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2019509020

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 18777271

Country of ref document: EP

Kind code of ref document: A1

点击 这是indexloc提供的php浏览器服务,不要输入任何密码和下载