WO2025022861A1 - 物体検出方法及び物体検出システム - Google Patents

物体検出方法及び物体検出システム Download PDF

Info

Publication number
WO2025022861A1
WO2025022861A1 PCT/JP2024/021688 JP2024021688W WO2025022861A1 WO 2025022861 A1 WO2025022861 A1 WO 2025022861A1 JP 2024021688 W JP2024021688 W JP 2024021688W WO 2025022861 A1 WO2025022861 A1 WO 2025022861A1
Authority
WO
WIPO (PCT)
Prior art keywords
vehicle
position information
landmark
detected
side device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
PCT/JP2024/021688
Other languages
English (en)
French (fr)
Inventor
双▲偉▼ 耿
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nissan Motor Co Ltd
Original Assignee
Nissan Motor Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nissan Motor Co Ltd filed Critical Nissan Motor Co Ltd
Priority to JP2025535628A priority Critical patent/JPWO2025022861A1/ja
Priority to CN202480048715.6A priority patent/CN121568865A/zh
Publication of WO2025022861A1 publication Critical patent/WO2025022861A1/ja
Anticipated expiration legal-status Critical
Pending legal-status Critical Current

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/02Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/09Arrangements for giving variable traffic instructions

Definitions

  • the present invention relates to an object detection method and an object detection system.
  • Self-driving cars Vehicles that run on autonomous driving control (hereinafter also referred to as self-driving cars) detect surrounding objects and driving ranges using on-board sensors (lidar, camera, millimeter wave radar, etc.), and it is known that if there is an obstacle that blocks the field of view of the sensor within the detection range of the self-driving car's sensor, a certain blind spot area will be formed (Patent Document 1).
  • a pedestrian emerges from a blind spot that has been created (a so-called "jump-out"), detection of the pedestrian may be delayed, which may cause the behavior of the self-driving vehicle to change significantly.
  • auxiliary means to eliminate the blind spots of the on-board sensors and accurately recognize the position of objects in the blind spots.
  • the problem that this invention aims to solve is to provide an object detection method and an object detection system that can accurately recognize the position of an object in a blind spot area.
  • the present invention solves the above problem by using first position information of objects around the vehicle detected by the vehicle and second position information of the objects obtained based on the detection results of a roadside device installed on the road along which the vehicle is traveling to identify objects in blind spots where the objects cannot be detected from the vehicle's position due to obstructions, the second position information including only the position information of objects within the effective distance range of landmarks detected by the roadside device.
  • the present invention makes it possible to accurately recognize the position of an object in a blind spot area.
  • FIG. 1 is a block diagram showing an example of an object detection system according to the present invention.
  • 2 is a flowchart showing an example of a process in the object detection system of FIG. 1 .
  • FIG. 2 is a plan view (part 1) showing an example of a scene in which an object in a blind spot is detected by the object detection system of FIG. 1 .
  • FIG. 2 is a plan view (part 2) showing an example of a scene in which an object in a blind spot is detected by the object detection system of FIG. 1 .
  • FIG. 4 is a plan view showing another example of a scene in which an object in a blind spot is detected by the object detection system of FIG. 1.
  • FIG. 4 is a plan view showing still another example of a scene in which an object in a blind spot is detected by the object detection system of FIG. 10 is a plan view showing yet another example of a scene in which an object in a blind spot area is detected by the object detection system of FIG. 1 .
  • 10 is a flowchart showing another example of the process in the object detection system of FIG. 1 .
  • objects detected by the vehicle-mounted sensor are compared with objects detected by the roadside device to recognize objects in blind spots.
  • an object detected by the roadside device is not detected by the vehicle-side sensor, the object can be identified as being in a blind spot.
  • the present invention provides an object detection method and system for detecting objects in blind spots, which significantly reduces the amount of calculations and the amount of data received and transmitted by recognizing objects in blind spots only within the effective distance range without recognizing objects in the blind spots in unnecessary ranges, thereby saving calculation resources and reducing hardware costs.
  • FIG. 1 is a block diagram showing an example of an object detection system 1 for detecting objects in blind spots according to the present invention.
  • the system for detecting objects in blind spots includes a road-side device 20 and a vehicle-side device 10.
  • the vehicle-side device 10 may be a vehicle or a device mounted (or added) to a vehicle, for example, an on-board control device.
  • the vehicle-side device 10 will also be simply referred to as a vehicle.
  • the vehicle-side device 10 includes a vehicle-side sensor 11 that detects objects around the vehicle, a vehicle-side calculation module 12, a vehicle-side transmission/reception module 13, and a vehicle-side memory module 14.
  • the road-side device 20 is provided on a road on which a vehicle equipped with the vehicle-side device 10 travels, and detects surrounding objects.
  • the road-side device 20 may be, for example, a fixed-point camera installed on the road, or may be a traffic signal or a device fixed or movable on the road.
  • the road-side device 20 includes a road-side sensor 21 that detects objects on the road, a road-side calculation module 22, a road-side transmission/reception module 23, and a road-side memory module 24.
  • the vehicle-side sensor 11 and the road-side sensor 21 may each be a device capable of acquiring information about the position and type of an object, such as a distance measuring device (e.g., a radar device), a camera (including a video camera), or an infrared detector.
  • the vehicle-side sensor 11 and the road-side sensor 21 also include a vehicle speed sensor, an acceleration sensor, a yaw rate sensor, a steering angle sensor, and the like.
  • the objects detected by the distance measuring device and the camera are the road and objects present around it, including lane boundaries, center lines, road markings, medians, guardrails, curbs, road signs, traffic lights, and crosswalks.
  • the objects also include obstacles that may affect the travel of the vehicle, such as other automobiles (other vehicles), motorcycles, bicycles, and pedestrians.
  • the vehicle-side computing module 12 and the road-side computing module 22 control the devices that make up the object detection system 1 to cooperate with each other and detect objects in blind spots.
  • the vehicle-side computing module 12 and the road-side computing module 22 are, for example, computers, and include a CPU (Central Processing Unit) which is a processor, a ROM (Read Only Memory) in which programs are stored, and a RAM (Random Access Memory) which functions as an accessible storage device.
  • the CPU is an operating circuit for executing the programs stored in the ROM and realizing the object detection function.
  • the vehicle-side computing module 12 and the road-side computing module 22 may include processing devices such as a microprocessor, a digital signal processor ("DSP"), an application specific integrated circuit (“ASIC”), or a field programmable gate array (“FPGA”).
  • DSP digital signal processor
  • ASIC application specific integrated circuit
  • FPGA field programmable gate array
  • the vehicle-side device 10 and the road-side device 20 can communicate and send and receive data via their respective transmission/reception modules.
  • the communication format of the transmission/reception modules is not particularly limited.
  • the vehicle-side memory module 14 is a non-volatile memory such as a brush memory, and is used to store vehicle-side maps, landmark position information and identification information, etc.
  • the road-side memory module 24 is a non-volatile memory such as a brush memory, and is used to store landmark position information and identification information, etc.
  • FIG. 2 is a flowchart showing an example of processing in an object detection method for detecting an object in a blind spot area according to the present invention.
  • the method can be implemented by an object detection system 1 including a road-side device 20 and a vehicle-side device 10 as shown in FIG. 1.
  • the method includes the following steps executed on the vehicle side.
  • step S11 the vehicle-side device 10 detects an object around the vehicle by using the vehicle-side sensor 11 to obtain first position information of the object.
  • the first position information may include position information of the object in the vehicle-side map or position information relative to the vehicle itself detected by the vehicle-side sensor 11, which is an on-board sensor, and information regarding the type of the corresponding object.
  • step S12 the vehicle-side device 10 uses the vehicle-side calculation module 12 to identify potential blind spots.
  • Potential blind spots are blind spots that have not been recognized by the vehicle-side device 10. For example, potential blind spots can be identified and recognized based on state history information of objects around the vehicle.
  • the vehicle-side device 10 can use the vehicle-side calculation module 12 to detect specific landmarks on the object from both the vehicle and the road-side device 20, and determine the effective distance range.
  • a landmark is an object that serves as a landmark among the objects around the vehicle and/or the road-side device 20, and includes traffic signs, traffic lights, buildings, large outdoor monitors, etc.
  • the effective distance range is the range of effective distance based on the landmark, for example, the range of a circle with a radius of the effective distance centered on the landmark. The effective distance can be set to an appropriate value within the range in which objects in blind spots can be properly detected.
  • the vehicle-side device 10 can transmit the identification information and effective distance range of the determined landmark to the road-side device 20 via the vehicle-side transmitting/receiving module 13.
  • the vehicle-side device 10 receives second position information of the object from the road-side device 20 via the vehicle-side transmitting/receiving module 13.
  • the vehicle-side device 10 identifies the object in the blind spot area based on the second position information from the road-side device 20 and the first position information.
  • the method further includes the following steps executed by the roadside device 20.
  • step S21 the roadside device 20 detects objects within a predetermined range on the road by using the roadside sensor 21, and obtains fourth position information of the objects.
  • the predetermined range is, for example, the detection range of the roadside sensor 21.
  • the objects on the road include objects around the vehicle.
  • the fourth position information may include position information of the object detected by the roadside sensor 21 relative to the roadside device 20, information on the type of object, etc.
  • step S22 the roadside device 20 uses the roadside calculation module 22 to determine whether or not a request from a vehicle-side device 10 has been received via the roadside transmission/reception module 23.
  • the request includes landmark identification information and an effective distance range.
  • the roadside device 20 instructs the vehicle-side device 10 to request the roadside device 20 to transmit position information of an object detected by the roadside device 20 in order to identify an object in a blind spot area. If no request has been received from any vehicle-side device 10, the process returns to step S21. On the other hand, if a request has been received from a vehicle-side device 10, the process proceeds to step S23.
  • step S23 the roadside device 20 uses the roadside calculation module 22 to read the position of the landmark based on the landmark's identification information, and determines whether the landmark can be detected (or "seen") or not. If the landmark cannot be detected, the roadside device 20 sends a message to the vehicle-side device 10 indicating that the request has failed. On the other hand, if the landmark can be detected, the process proceeds to step S24.
  • step S24 the roadside device 20 uses the roadside calculation module 22 to obtain second position information based on the fourth position information, the landmark position information, and the effective distance range. Specifically, it extracts position information of objects within the effective distance range from the landmark from the fourth position information, and generates second position information.
  • step S25 the roadside device 20 transmits the second position information to the vehicle-side device 10.
  • step S26 the roadside device 20 judges whether or not a request to stop transmission has been received from the vehicle-side device 10. If a request to stop transmission has not been received from the vehicle-side device 10, the process proceeds to step S21a. In contrast, if a request to stop transmission has been received from the vehicle-side device 10, the process ends. In step S21a, the roadside device 20 continues to detect objects on the road using the roadside sensor 21, acquires fourth position information, and then proceeds to step S23.
  • Figures 3A and 3B are plan views showing an example of a scene in which an object in a blind spot is detected by the object detection system 1 of Figure 1.
  • the vehicle-side device 10 detects objects around the vehicle and acquires the first position information.
  • the vehicle-side device 10 cannot detect a pedestrian in the blind spot.
  • the roadside device 20 also detects objects around the vehicle and acquires fourth position information. At this time, the roadside device 20 can detect the presence of a pedestrian in the blind spot area. Then, as shown in FIG. 3B, in step S24, the roadside device 20 acquires second position information.
  • the second position information includes only the position information of objects within the effective distance range of the landmark detected by the roadside device 20. In this step S24, the roadside device 20 acquires the second position information based on the fourth position information, the position information of the landmark, and the effective distance range.
  • step S25 the roadside device 20 transmits only the second position information to the vehicle-side device 10.
  • the second position information omits information about objects outside the effective distance range of the landmark, which is unnecessary for identifying objects in the blind spot.
  • the amount of data transmitted and received between the roadside device 20 and the vehicle-side device 10 and the amount of calculation required to identify objects in the blind spot are significantly reduced.
  • step S16 the vehicle-side device 10 identifies an object in the blind spot area based on the second position information and the first position information. Specifically, the vehicle acquires third position information of the object based on the landmark and the first position information. Then, the vehicle identifies the object in the blind spot area based on the second position information and the third position information.
  • the vehicle-side device 10 extracts position information of objects within the effective distance range of the landmark from the first position information, and generates third position information.
  • the third position information includes only position information of objects within the effective distance range of the landmark detected by the vehicle-side device 10. Compared to the first position information, the third position information omits information about objects outside the effective distance range of the landmark, which is also unnecessary for identifying objects in blind spots. As a result, the amount of calculation required to identify objects in blind spots is further reduced.
  • the third position information may include relative position information of the object detected by the vehicle-side device 10 with respect to the vehicle, and relative position information of the landmark detected by the vehicle with respect to the vehicle.
  • the second position information may also include relative position information of the object detected by the road-side device 20 with respect to the landmark.
  • the fourth position information may include relative position information of the object with respect to the road-side device 20.
  • the roadside device 20 calculates the distance and direction of the object detected by the roadside device 20 relative to the roadside device 20, as well as the distance and direction of the landmark relative to the roadside device 20, and determines the distance and direction of the object detected by the roadside device 20 relative to the landmark based on the distance and direction of the object relative to the roadside device 20 and the distance and direction of the landmark relative to the roadside device 20.
  • the first position information may include relative position information of the object relative to the vehicle.
  • the vehicle-side device 10 acquires the distance and direction of the object detected by the road-side device 20 relative to the vehicle based on the distance and direction of the object detected by the road-side device 20 relative to the landmark and the distance and direction of the landmark relative to the vehicle.
  • the vehicle-side device 10 compares the distance and direction of the object detected by the vehicle-side device 10 relative to the vehicle with the distance and direction of the object detected by the road-side device 20 relative to the vehicle, and detects (identifies) an object in the blind spot.
  • the present invention is not limited to the above-described embodiment, and objects in the blind spot may be identified using other coordinate systems such as a local coordinate system or a polar coordinate system.
  • the vehicle-side device 10 selects a landmark.
  • the landmark is identified from an object that can be detected by both the vehicle-side device 10 and the road-side device 20 (i.e., an object detected by both the vehicle-side device 10 and the road-side device 20).
  • the landmark may be identified after being detected by both the vehicle-side device 10 and the road-side device 20, or may be identified in advance based on map information.
  • the landmark may be a stationary object on the road that has a certain shape that can be recognized by a vehicle. This reduces the difficulty of recognizing the landmark.
  • the vehicle-side device 10 can compare the position information of stationary objects around the vehicle detected by the vehicle-side device 10 with the position information of landmarks pre-stored in the vehicle-side memory module 14. If the position information of the stationary object is the same as the position information of the landmark pre-stored, the stationary object can be identified as a landmark. Furthermore, the stationary object is selected as a landmark for obtaining the second position information and the third position information.
  • the landmark may be different from the roadside device 20.
  • the roadside device 20 may be located at a corner and may have limited position information of objects within the effective distance determined from the roadside device 20 as the origin.
  • the landmark may be a stationary object closer to the vehicle or a potential blind spot area. This facilitates further optimization of the calculation and data for transmission and reception.
  • the landmark may be the same as the road-side device 20.
  • the landmark may also be a stationary object located at an intersection.
  • the landmark may be a traffic light. In this way, by detecting objects around the traffic light, it is possible to identify whether there is an object in the blind spot that may pose a risk.
  • the landmark closest to the predetermined position among these multiple landmarks may be determined as the landmark for determining the second position information and the third position information.
  • the predetermined position satisfies the requirements of 1) being in a potential blind spot area, and 2) being closest to the lane in which the vehicle is traveling. Since there are multiple landmarks and the landmark closest to the blind spot area and the lane in which the vehicle is traveling is selected, objects in the blind spot area can be detected more reliably without performing extra calculations.
  • a landmark corresponding to each blind spot area is identified, and the landmark closest to the vehicle is selected as the identified landmark from among the multiple landmarks corresponding to the multiple blind spot areas.
  • FIG. 4 is a plan view showing another example of a scene in which an object in a blind spot is detected by the object detection system 1 of FIG. 1.
  • there are two landmarks on the road a first landmark and a second landmark, and the vehicle identifies the first landmark, which is closer to a predetermined position, as the landmark to be used to determine the second position information and the third position information.
  • This predetermined position is in a potential blind spot area and is closest to the lane of the current vehicle configuration.
  • FIG. 5 is a plan view showing another example of a scene in which an object in a blind spot is detected by the object detection system 1 of FIG. 1.
  • there are three landmarks on the road a first landmark, a second landmark, and a third landmark, and two potential blind spot areas, a first blind spot area and a second blind spot area.
  • a first predetermined position and a second predetermined position are determined for each of the first blind spot area and the second blind spot area, and then, since the third landmark is closest to both the first predetermined position and the second predetermined position, the third landmark is identified as the landmark for obtaining the second position information and the third position information.
  • the distances of the first and third landmarks from the vehicle are further compared, and the third landmark closest to the vehicle is determined as the landmark for determining the second position information and the third position information.
  • the landmarks to be used can be pre-selected on a vehicle-side map (e.g., a high-resolution map), which is map information provided in the vehicle, and identification information can be assigned to the pre-selected landmarks.
  • the identification information can be, for example, an identification number assigned to each landmark, and can be associated with the location information of the landmark.
  • the identification information is the same as the identification information of the landmark stored in the road-side memory module 24.
  • the road-side device 20 does not need to have the same high-resolution map as the vehicle-side device 10, and only needs to store the location information and the identification information of the landmark in advance, and the road-side device 20 can recognize the presence of an object in a blind spot by measuring the distance and direction of the object relative to the landmark.
  • the vehicle-side device 10 selects a roadside device 20. Then, in step S14, the vehicle-side device 10 transmits a request including the landmark identification information and the effective distance range to the selected roadside device 20. In step S15, the vehicle receives second position information from the selected roadside device 20.
  • the vehicle-side device 10 may select a roadside device 20 located in front of the vehicle and determine the roadside device 20.
  • the vehicle-side device 10 may also select a roadside device 20 located on the opposite side of the vehicle from the obstruction in the left-right direction of the vehicle and farther away from the obstruction in the front-rear direction of the vehicle than a predetermined margin distance and determine the roadside device 20.
  • FIG. 6 is a plan view showing yet another example of a scene in which an object in a blind spot is detected by the object detection system 1 of FIG. 1.
  • the roadside device 20a is on the opposite side of the road from the obstruction (or potential blind spot) relative to the vehicle, and is farther away from the obstruction than the vehicle in front of the vehicle by a predetermined margin.
  • the roadside device 20b is in substantially the same position as the vehicle in the front-rear direction (side by side) and is on the same side of the road as the obstruction relative to the vehicle.
  • the roadside device 20a is selected and a request including the landmark identification information and the effective distance range is sent to the roadside device 20a.
  • the predetermined margin can be set to an appropriate value within a range in which an object in the blind spot can be properly detected.
  • FIG. 7 is a flowchart showing another example of processing in the object detection system 1 of FIG. 1.
  • the method includes steps S31 to S37 executed on the vehicle side.
  • Step S31, step S31a and the steps preceding them can refer to step S16 and the steps preceding it executed by the vehicle-side device 10 shown in FIG. 2.
  • the steps executed by the road-side device 20 shown in FIG. 2 can be referred to.
  • step S31 of FIG. 7 the vehicle-side device 10 receives the second position information from the road-side device 20 via the vehicle-side transceiver module 13.
  • step S31a the vehicle-side calculation module 12 of the vehicle-side device 10 identifies an object in the blind spot area based on the second position information from the road-side device 20 and the first position information.
  • step S32 the vehicle-side calculation module 12 of the vehicle-side device 10 determines whether an object in the same blind spot has been detected in a specified number of consecutive frames.
  • an object in the same blind spot may be an object of the same type (pedestrian, bicycle, automobile, etc.) and position.
  • the specified number of frames may be three frames.
  • step S33 the vehicle maintains its current driving state.
  • step S34 the time-to-collision (TTC) between the object in the blind spot and the vehicle is determined by the vehicle-side calculation module 12, and the process proceeds to step S35.
  • step S35 it is determined whether the TTC is less than a predetermined threshold time. If the TTC is equal to or greater than the threshold time, the process proceeds to step S33. If the TTC is less than the threshold time, the process proceeds to step S36.
  • the threshold time can be set to an appropriate time within a range in which contact between the vehicle and the object can be avoided, for example, 1 to 3 seconds.
  • step S36 the vehicle is decelerated to a safe speed (i.e., a threshold speed, for example, 15 to 30 km/h).
  • a threshold speed for example, 15 to 30 km/h.
  • the vehicle speed may be adjusted in other ways based on the TTC. For example, if the collision time is longer than the threshold time and the vehicle speed is equal to or greater than the first speed, the vehicle is decelerated to the first vehicle speed before the collision time reaches the threshold time, and when the collision time reaches the threshold time, the vehicle is decelerated from the first vehicle speed to the second vehicle speed. By decelerating the vehicle in advance, it is possible to avoid sudden braking when passing near a blind spot area.
  • the present invention is not limited to selecting only one landmark or transmitting data to only one road-side device 20, but may identify one or more objects in one or more potential blind spots based on multiple landmarks, or may transmit data to multiple road-side devices 20 to identify one or more objects in one or more potential blind spots.
  • the vehicle may obtain second position information based on the fourth position information. The steps described above may be omitted, the order may be changed, or they may be performed in parallel.
  • an object detection method executed by a vehicle-side device 10 of a vehicle comprising: The vehicle-side device 10 detects an object around the vehicle by the vehicle and acquires first position information of the object, identifies a landmark that is a landmark from among the objects that can be detected by both the vehicle and a road-side device 20 provided on the road on which the vehicle travels, determines an effective distance range from the landmark, and identifies the object in a blind spot area where the object cannot be detected from the position of the vehicle due to an obstruction based on the first position information and second position information of the object acquired based on the detection result of the road-side device 20, and the second position information includes only the position information of the object within the effective distance range of the landmark detected by the road-side device 20. This reduces the amount of calculation and the amount of data to be received and transmitted, saves calculation resources, and reduces hardware costs.
  • the vehicle-side device 10 acquires third position information of the object based on the landmark, the effective distance range, and the first position information, and identifies the object in the blind spot area based on the third position information and the second position information, and the third position information includes only the position information of the object within the effective distance range of the landmark detected by the vehicle. This further reduces the amount of calculations and the amount of data received and transmitted, and further conserves calculation resources.
  • the third position information includes the relative position information of the object detected by the vehicle with respect to the vehicle and the relative position information of the landmark detected by the vehicle with respect to the vehicle
  • the second position information includes the relative position information of the object detected by the roadside device 20 with respect to the landmark
  • the vehicle-side device 10 acquires the relative position information of the object detected by the roadside device 20 with respect to the vehicle based on the relative position information of the object detected by the roadside device 20 with respect to the landmark and the relative position information of the landmark detected by the vehicle with respect to the vehicle, and identifies the object in the blind spot area by comparing the relative position of the object detected by the vehicle with the relative position of the object detected by the roadside device 20 with respect to the vehicle.
  • the vehicle-side device 10 transmits the identification information of the landmark determined by the vehicle and the effective distance range to the road-side device 20, the road-side device 20 detects the object around the vehicle and obtains the fourth position information of the object, and the road-side device 20 obtains the second position information based on the identification information of the determined landmark, the effective distance range, and the fourth position information. This makes it possible to accurately recognize the position of an object in a blind spot area.
  • the vehicle-side device 10 identifies the landmark by comparing position information of stationary objects around the vehicle detected by the vehicle with the position information of the landmark pre-stored in the vehicle, and the second position information is obtained based on the landmark. This allows the landmark to be identified quickly.
  • the vehicle-side device 10 identifies potential blind spot areas, compares position information of stationary objects around the vehicle detected by the vehicle with position information of the landmarks pre-stored in the vehicle, and if multiple landmarks are obtained, identifies the landmark closest to a predetermined position from among the multiple landmarks, and the predetermined position is the position closest to the vehicle's driving lane within the potential blind spot area. This allows landmarks to be identified quickly.
  • the vehicle-side device 10 identifies the landmark corresponding to each potential blind spot area, and selects the landmark closest to the vehicle from the multiple landmarks corresponding to the multiple potential blind spot areas as the identified landmark. This allows landmarks to be identified quickly.
  • the vehicle-side device 10 preselects the landmarks to be used from the map information provided in the vehicle, and assigns identification information to the preselected landmarks, which is the same as the identification information of the landmarks stored in the road-side device. This allows the landmarks to be quickly identified.
  • the vehicle-side device 10 selects the road-side device 20, and the vehicle transmits the identification information of the selected landmark and the effective distance range to the selected road-side device 20, which is located in front of the vehicle. This makes it possible to select an appropriate road-side device 20 from multiple road-side devices 20.
  • the roadside device 20 is located on the opposite side of the vehicle from the obstruction in the left-right direction of the vehicle. This makes it possible to select an appropriate roadside device 20.
  • the roadside device 20 is farther away from the obstruction in the front-rear direction of the vehicle than a predetermined margin distance. This makes it possible to select an appropriate roadside device 20.
  • the vehicle-side device 10 calculates the collision time for the vehicle to reach the blind spot area where the object is located, adjusts the vehicle speed based on the collision time, and if the collision time is longer than a threshold time and the vehicle speed is faster than a first vehicle speed, decelerates the vehicle to the first vehicle speed before the collision time reaches the threshold time, and decelerates the vehicle from the first vehicle speed to a second vehicle speed when the collision time reaches the threshold time. This makes it possible to avoid sudden braking when passing near a blind spot area.
  • the vehicle-side device 10 calculates the collision time when the vehicle reaches the blind spot where the object is located, adjusts the vehicle speed based on the collision time, and if the collision time is less than a threshold time and the vehicle speed is faster than the threshold speed, decelerates the vehicle to the threshold speed. This makes it possible to avoid sudden braking when passing near the blind spot.
  • the vehicle-side device 10 calculates, by the road-side device 20, the distance and direction of the object detected by the road-side device 20 relative to the road-side device 20 and the distance and direction of the landmark relative to the road-side device 20, determines the distance and direction of the object detected by the road-side device 20 relative to the landmark based on the distance and direction of the object relative to the road-side device 20 and the distance and direction of the landmark relative to the road-side device 20, calculates, by the vehicle, the distance and direction of the object detected by the vehicle relative to the vehicle and the distance and direction of the landmark relative to the vehicle, and the second position information is calculated based on the distance and direction of the object detected by the road-side device 20 relative to the landmark.
  • the first position information includes the distance and direction of the object detected by the vehicle relative to the vehicle, and when identifying the object in the blind spot area based on the first position information and the second position information, the vehicle acquires the distance and direction of the object detected by the roadside device 20 relative to the vehicle based on the distance and direction of the object detected by the roadside device 20 relative to the landmark and the distance and direction of the landmark detected by the vehicle relative to the vehicle, and the vehicle identifies the object in the blind spot area by comparing the distance and direction of the object detected by the vehicle relative to the vehicle with the distance and direction of the object detected by the roadside device 20 relative to the vehicle. This makes it possible to accurately recognize the position of the object in the blind spot area.
  • an object detection system 1 which includes a vehicle-side sensor 11 of a vehicle-side device 10 configured to detect an object around a vehicle and obtain first position information of the object, and a vehicle-side calculation module 12 of the vehicle-side device 10 that identifies an object in a blind spot area where the object cannot be detected from the position of the vehicle due to an obstruction based on the first position information and second position information of the object obtained based on the detection result of a road-side device 20 provided on the road along which the vehicle travels, and the second position information includes only position information of the object detected by the road-side device 20 within an effective distance range from a landmark, which is the object that can be detected by both the vehicle-side device 10 and the road-side device 20. This reduces the amount of calculation and the amount of data received and transmitted, saves calculation resources, and reduces hardware costs.
  • 1... object detection system 10... vehicle-side device, 11... vehicle-side sensor, 12... vehicle-side calculation module, 13... vehicle-side transmission/reception module, 14... vehicle-side memory module, 20, 20a, 20b... road-side device, 21... road-side sensor, 22... road-side calculation module, 23... road-side transmission/reception module, 24... road-side memory module

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Automation & Control Theory (AREA)
  • Mathematical Physics (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • General Physics & Mathematics (AREA)
  • Traffic Control Systems (AREA)

Abstract

本発明では、車両により検出された車両の周囲の物体の第1位置情報と、車両の走行する道路に設けられた道路側装置(20)の検出結果に基づいて取得された物体の第2位置情報とに基づいて、遮蔽物により車両の位置から物体を検出できない死角領域の物体を特定する場合に、道路側装置(20)により検出されたランドマークの有効距離範囲における物体の位置情報のみを含む第2位置情報を用いる。

Description

物体検出方法及び物体検出システム
 本発明は、物体検出方法及び物体検出システムに関するものである。
 自律走行制御により走行する車両(以下、自動運転車とも言う。)は、車載センサ(ライダー、カメラ、ミリ波レーダーなど)によって周囲の物体や走行可能範囲を検出し、自動運転車のセンサの検出範囲にセンサの視界を遮る遮蔽物がある場合は、一定の死角領域が形成されることが知られている(特許文献1)。
特開2022-090341号公報
 形成された死角領域から歩行者が出てくる(いわゆる「飛び出し」)場合は、歩行者の検出が遅れ、自動運転車の挙動が大きく変化するおそれがある。この問題を解決するためには、車載センサの死角領域を解消し、死角領域における対象物の位置を正確に認識するための補助的な手段を用いる必要がある。
 本発明が解決しようとする課題は、死角領域における対象物の位置を正確に認識できる物体検出方法及び物体検出システムを提供することである。
 本発明は、車両により検出された車両の周囲の物体の第1位置情報と、車両の走行する道路に設けられた道路側装置の検出結果に基づいて取得された物体の第2位置情報とに基づいて、遮蔽物により車両の位置から物体を検出できない死角領域の物体を特定する場合に、道路側装置により検出されたランドマークの有効距離範囲における物体の位置情報のみを含む第2位置情報を用いることによって上記課題を解決する。
 本発明によれば、死角領域における対象物の位置を正確に認識できる。
本発明に係る物体検出システムの一例を示すブロック図である。 図1の物体検出システムにおける処理の一例を示すフローチャートである。 図1の物体検出システムにより死角領域の物体を検出するシーンの一例を示す平面図(その1)である。 図1の物体検出システムにより死角領域の物体を検出するシーンの一例を示す平面図(その2)である。 図1の物体検出システムにより死角領域の物体を検出するシーンの他の例を示す平面図である。 図1の物体検出システムにより死角領域の物体を検出するシーンのまた他の例を示す平面図である。 図1の物体検出システムにより死角領域の物体を検出するシーンのさらに他の例を示す平面図である。 図1の物体検出システムにおける処理の他の例を示すフローチャートである。
 以下、本発明の実施形態の一例を図面に基づいて説明する。なお、以下で使用される「第1」、「第2」などの用語は、いかなる順序、量及び重要さを示すものでなく、異なる構成要素を区別するためにのみ用いられる。「含む」、「包含する」などの語句は、他の構成要素及び対象を除外することなく、この語句より先に記載された構成要素及び対象が、この語句の後に列挙される構成要素及び対象並びにその等価物を包含することを意味する。
 通常、車載センサが検出した物体と、道路側装置が検出した物体とを比較し、死角領域における物体が認識される。つまり、道路側装置により検出された物体が、車両側センサにより検出されていなければ、当該物体が死角領域の物体であると特定できる。この場合、大量のデータを演算したり、車両側装置と道路側装置との間で大量のデータの受送信を行ったりする必要があるため、ハードウェアに対する要求が高く、その結果、大量の演算資源の占有や、高いハードウェアのコストという問題がある。
 本発明は、余計な範囲で死角領域の物体を認識することなく、有効距離範囲でのみ死角領域の物体の認識を行うことにより演算量及び受送信するデータ量を大幅に削減し、演算資源を節約し、ハードウェアのコストを削減する、死角領域の物体を検出するための物体検出方法及び物体検出システムを提供する。
 図1は、本発明に係る、死角領域の物体を検出する物体検出システム1の一例を示すブロック図である。図1に示すように、死角領域の物体を検出するシステムは、道路側装置20と車両側装置10とを含む。
 車両側装置10は、車両や車両に搭載(又は増設)された装置であってもよく、例えば車載制御装置である。以下、車両側装置10を単に車両とも称する。車両側装置10は、車両の周囲の物体を検出する車両側センサ11、車両側演算モジュール12、車両側送受信モジュール13及び車両側記憶モジュール14を含む。一方、道路側装置20は、車両側装置10を備えた車両の走行する道路に設けられ、周囲の対象物を検出する。道路側装置20は、例えば、道路に設置された定点カメラであり、交通信号機や、道路上に固定された又は移動可能に設けられた装置であってもよい。道路側装置20は、道路上の物体を検出する道路側センサ21、道路側演算モジュール22、道路側送受信モジュール23及び道路側記憶モジュール24を含む。
 車両側センサ11と道路側センサ21は、それぞれ、測距装置(例えばレーダ装置)、カメラ(ビデオカメラを含む。)、赤外線探知機など、物体の位置や種類に関する情報を取得できる装置であってもよい。また、車両側センサ11と道路側センサ21には、車速センサ、加速度センサ、ヨーレートセンサ、舵角センサなどが含まれる。測距装置とカメラの検出する対象物は、道路とその周囲に存在する物体であり、道路の車線境界線、中央線、路面標識、中央分離帯、ガードレール、縁石、道路標識、信号機、横断歩道などが含まれる。対象物には、他の自動車(他車両)、自動二輪車、自転車、歩行者など、車両の走行に影響を与え得る障害物も含まれる。
 車両側演算モジュール12と道路側演算モジュール22は、物体検出システム1を構成する装置を制御して協働させ、死角領域の物体を検出する。車両側演算モジュール12と道路側演算モジュール22は、例えばコンピュータであり、プロセッサであるCPU(Central Processing Unit)と、プログラムが格納されたROM(Read Only Memory)と、アクセス可能な記憶装置として機能するRAM(Random Access Memory)とを備える。CPUは、ROMに格納されたプログラムを実行し、物体検出機能を実現するための動作回路である。車両側演算モジュール12と道路側演算モジュール22は、マイクロプロセッサ、デジタル・シグナル・プロセッサ(「DSP」)、特定用途向け集積回路(「ASIC」)、フィールド・プログラマブル・ゲート・アレイ(「FPGA」)などの処理装置を含んでいてもよい。
 車両側装置10と道路側装置20は、それぞれの送受信モジュールを介して通信してデータを受送信できる。送受信モジュールの通信形式は特に限定されない。車両側記憶モジュール14は、ブラッシュメモリなどの不揮発性メモリであり、車両側マップ、ランドマークの位置情報及び識別情報などを記憶するために用いる。道路側記憶モジュール24は、ブラッシュメモリなどの不揮発性メモリであり、ランドマークの位置情報や識別情報などを記憶するために用いる。
 図2は、本発明に係る死角領域の物体を検出する物体検出方法における処理の一例を示すフローチャートである。例えば、当該方法は、図1に示すような道路側装置20と車両側装置10を含む物体検出システム1により実施できる。
 図2に示すように、当該方法は、車両側で実行される以下のステップを含む。まず、ステップS11において、車両側装置10は、車両側センサ11を利用することにより車両の周囲の物体を検出して物体の第1位置情報を取得する。第1位置情報は、車載センサである車両側センサ11によって検出された、物体の車両側マップにおける位置情報又は車両自体に対する位置情報と、対応する物体の種類に関する情報とを含んでいてもよい。
 ステップS12において、車両側装置10は、車両側演算モジュール12を利用して潜在する死角領域を特定する。潜在する死角領域とは、車両側装置10により認識されていない死角領域である。例えば、車両の周囲の物体の状態履歴情報に基づいて潜在する死角領域を特定し、認識することができる。
 ステップS13において、車両側装置10は、車両側演算モジュール12を利用し、車両と道路側装置20のいずれからも物体における特定のランドマークを検出し、有効距離範囲を決定することができる。ランドマークとは、車両及び/又は道路側装置20の周囲の物体のうち目印となる物体であり、交通標識、信号機、建築物、屋外の大型モニターなどが含まれる。有効距離範囲とは、ランドマークを基準とした有効距離の範囲であり、例えば、ランドマークを中心とした、半径が有効距離の円周の範囲である。有効距離は、死角領域の物体が適切に検出できる範囲内で適宜の値を設定できる。
 ステップS14において、車両側装置10は、車両側送受信モジュール13を介して、決定されたランドマークの識別情報及び有効距離範囲を道路側装置20に送信することができる。ステップS15において、車両側装置10は、車両側送受信モジュール13を介して、道路側装置20からの物体の第2位置情報を受信する。ステップS16において、車両側装置10は、道路側装置20からの第2位置情報と、第1位置情報とに基づいて死角領域の物体を特定する。
 当該方法は、道路側装置20で実行される以下のステップをさらに含む。まず、ステップS21において、道路側装置20は、道路側センサ21を利用することにより道路上の所定範囲の物体を検出して物体の第4位置情報を取得する。所定範囲とは、例えば、道路側センサ21の検出範囲である。道路上の物体は、車両の周囲の物体を含む。第4位置情報は、道路側センサ21によって検出された物体の道路側装置20に対する位置情報、及び物体の種類に関する情報などを含んでいてもよい。
 ステップS22において、道路側装置20は、道路側演算モジュール22を利用し、車両側装置10からの要求を、道路側送受信モジュール23を介して受信したか否かを判断する。当該要求は、ランドマークの識別情報及び有効距離範囲を含む。道路側装置20は、車両側装置10に対して、死角領域の物体を特定するため、道路側装置20により検出された対象物の位置情報の送信を道路側装置20に要求するよう指示する。いずれの車両側装置10からも要求を受信していない場合は、ステップS21に戻る。これに対し、車両側装置10からの要求を受信した場合は、ステップS23に進む。
 ステップS23において、道路側装置20は、道路側演算モジュール22を利用し、ランドマークの識別情報に基づいてランドマークの位置を読み取り、当該ランドマークを検出(又は「視認」)できるかどうかを判断する。当該ランドマークを検出できない場合は、道路側装置20は、要求が失敗したことを示すメッセージを車両側装置10に送信する。これに対し、当該ランドマークを検出できた場合は、ステップS24に進む。
 ステップS24において、道路側装置20は、道路側演算モジュール22を利用し、第4位置情報と、ランドマークの位置情報と、有効距離範囲とに基づいて第2位置情報を取得する。具体的には、第4位置情報から、ランドマークから有効距離範囲の物体の位置情報を抽出し、第2位置情報を生成する。ステップS25において、道路側装置20は、第2位置情報を車両側装置10に送信する。
 ステップS26において、道路側装置20は、車両側装置10からの送信停止の要求を受信したか否かを判断する。車両側装置10からの送信停止の要求を受信していない場合は、ステップS21aに進む。これに対し、車両側装置10からの送信停止の要求を受信した場合は、処理を終了する。ステップS21aにおいて、道路側装置20は引き続き道路側センサ21を利用して道路上の物体を検出し、第4位置情報を取得した後、ステップS23に進む。
 図3A及び3Bは、それぞれ、図1の物体検出システム1により死角領域の物体を検出するシーンの一例を示す平面図である。図3Aに示すように、ステップS11において、車両側装置10は、車両の周囲の物体を検出して、第1位置情報を取得する。このとき、遮蔽物としての他車両が存在して車両側センサの視界を遮ったため、車両側装置10は、死角領域に存在する歩行者を検出できない。
 図3Bに示すように、ステップS21において、道路側装置20も車両の周囲の物体を検出して第4位置情報を取得する。このとき、死角領域の歩行者の存在は、道路側装置20によって検出され得る。そして、図3Bに示すように、ステップS24において、道路側装置20は、第2位置情報を取得する。当該第2位置情報は、道路側装置20によって検出されたランドマークの有効距離範囲における物体の位置情報のみを含む。このステップS24において、道路側装置20は、第4位置情報と、ランドマークの位置情報と、有効距離範囲とに基づいて第2位置情報を取得する。
 ステップS25において、道路側装置20は、第2位置情報のみを車両側装置10に送信する。第2位置情報は、第4位置情報に比べ、死角領域の物体の特定に余計なものとなる、ランドマークの有効距離範囲外の物体に関する情報を省略したものである。その結果、道路側装置20と車両側装置10との間で受送信されるデータ量と、死角領域の物体の特定に必要な計算量とは大幅に削減される。
 図2に戻り、ステップS16において、車両側装置10は、第2位置情報と第1位置情報とに基づいて死角領域の物体を特定する。具体的には、車両は、ランドマークと第1位置情報に基づいて物体の第3位置情報を取得する。そして、第2位置情報と第3位置情報とに基づき、死角領域の物体を特定する。
 車両側装置10は、例えば、第1位置情報から、ランドマークから有効距離範囲の物体の位置情報を抽出し、第3位置情報を生成する。第3位置情報は、車両側装置10によって検出されたランドマークの有効距離範囲における物体の位置情報のみを含む。第3位置情報は、第1位置情報に比べ、同様に死角領域の物体の特定に余計なものとなる、ランドマークの有効距離範囲外の物体に関する情報を省略したものである。その結果、死角領域の物体の特定に必要な計算量はさらに削減される。
 一例において、第3位置情報は、車両側装置10によって検出された物体の車両に対する相対位置情報と、車両によって検出されたランドマークの車両に対する相対位置情報とを含んでいてもよい。また、第2位置情報は、道路側装置20によって検出された物体のランドマークに対する相対位置情報を含んでいてもよい。例えば、第4位置情報は、物体の道路側装置20に対する相対位置情報を含んでいてもよい。
 道路側装置20は、道路側装置20によって検出された物体の道路側装置20に対する距離及び方位並びにランドマークの道路側装置20に対する距離及び方位を算出し、物体の道路側装置20に対する距離及び方位並びにランドマークの道路側装置20に対する距離及び方位に基づいて、道路側装置20によって検出された物体のランドマークに対する距離及び方位を決定する。例えば、第1位置情報は、物体の車両に対する相対位置情報を含んでいてもよい。
 車両側装置10は、道路側装置20によって検出された物体のランドマークに対する距離及び方位並びにランドマークの車両に対する距離及び方位に基づいて、道路側装置20によって検出された物体の車両に対する距離及び方位を取得する。車両側装置10は、車両側装置10によって検出された物体の車両に対する距離及び方位を、道路側装置20によって検出された物体の車両に対する距離及び方位と比較し、死角領域の物体を検出(特定)する。なお、本発明は上述の実施形態に限定されるものではなく、ローカル座標系、極座標系などの他の座標系を用いて死角領域の物体を特定してもよい。
 ステップS13において、車両側装置10はランドマークを選択する。ランドマークは、車両側装置10と道路側装置20とのいずれによっても検出可能な物体(つまり、車両側装置10と道路側装置20の両方により検出された物体)から特定される。ランドマークは、車両側装置10と道路側装置20との双方で検出された後に特定されてもよく、マップ情報に基づいて予め特定されていてもよい。また、ランドマークは、車両が認識可能な一定の形状を有する道路上の静止物であってもよい。これにより、ランドマークを認識する困難性が低減される。
 車両側装置10は、車両側装置10によって検出された車両の周囲の静止物の位置情報を、車両側記憶モジュール14に予め記憶されたランドマークの位置情報と比較できる。静止物の位置情報が予め記憶されたランドマークの位置情報と同じである場合は、当該静止物がランドマークであると特定できる。また、当該静止物は、第2位置情報及び第3位置情報を取得するためのランドマークとして選択される。
 ランドマークは、道路側装置20とは異なっていてもよい。例えば、道路側装置20は隅に位置し、道路側装置20を原点として決定される有効距離内の物体の位置情報が限られていることもある。ランドマークは、車両や潜在する死角領域により近い静止物であってもよい。これにより、計算と受送信のためのデータのさらなる最適化が容易になる。
 なお、本開示はこれに限定されず、ランドマークは道路側装置20と同じであってもよい。また、ランドマークは、交差点に位置する静止物であってもよい。例えば、ランドマークは信号機であってもよい。このように、信号機の周囲の物体を検出することで、リスクにつながる可能性のある死角領域の物体が存在するか否かを特定できる。
 車両が複数のランドマークを特定した場合は、これら複数のランドマークの中から所定位置に最も近いランドマークを、第2位置情報及び第3位置情報を決定するためのランドマークとして決定してもよい。所定位置は、1)潜在する死角領域にあることと、2)車両の走行車線に最も近いこととの要件を満たす。ランドマークが複数存在し、死角領域と車両の走行車線により近いランドマークが選定されたため、余計な計算を行うことなく、より確実に死角領域の物体を検出することができる。
 複数の死角領域が存在する場合は、各死角領域に対して対応するランドマークを特定し、複数の死角領域に対応する複数のランドマークの中から、車両に最も近いランドマークを特定したランドマークとして選択する。
 図4は、図1の物体検出システム1により死角領域の物体を検出するシーンの他の例を示す平面図である。図4に示すように、道路上に第1ランドマークと第2ランドマークの2つのランドマークがあり、車両は、第2位置情報及び第3位置情報を決定するために使用するランドマークとして、所定位置に近い方の第1ランドマークを特定する。この所定位置は、潜在する死角領域にあり、現在の車両形態の車線に最も近い。
 図5は、図1の物体検出システム1により死角領域の物体を検出するシーンのまた他の例を示す平面図である。図5に示すように、道路上には第1ランドマーク、第2ランドマーク及び第3ランドマークの3つのランドマークと、第1死角領域及び第2死角領域の2つの潜在する死角領域とがある。第1死角領域と第2死角領域のそれぞれに対して第1所定位置と第2所定位置を決定し、その後、第3ランドマークが第1所定位置と第2所定位置の両方に最も近いため、第2位置情報及び第3位置情報を取得するためのランドマークとして第3ランドマークを特定する。
 他の例示において、第1所定位置に基づいて第1ランドマークを特定し、第2所定位置に基づいて第3ランドマークを決定した場合は、第1ランドマークと第3ランドマークの自車両からの距離をさらに比較し、第2位置情報及び第3位置情報を決定するためのランドマークとして、自車両に最も近い第3ランドマークを決定する。
 使用に供するランドマークを、車両が備える地図情報である車両側マップ(例えば高精細マップ)において予め選定し、予め選定されたランドマークに識別情報を付与することができる。識別情報とは、例えば、ランドマークごとに付与された識別番号であり、ランドマークの位置情報と関連付けられていてもよい。当該識別情報は、道路側記憶モジュール24に記憶されているランドマークの識別情報と同一である。この場合、道路側装置20は、車両側装置10と同じ高精細マップを持つ必要がなく、位置情報とランドマークの識別情報を予め記憶しておくだけでよく、道路側装置20により、物体のランドマークに対する距離及び方位を測定することで、死角内の物体の存在を認識できる。
 図2に戻り、車両側装置10は、道路側装置20が複数存在する場合は、道路側装置20を選択する。その後、ステップS14において、ランドマークの識別情報と有効距離範囲とを含む要求を選択された道路側装置20に送信する。ステップS15において、車両により、選択された道路側装置20から第2位置情報を受信する。車両側装置10は、車両の前方にある道路側装置20を選択し、道路側装置20を決定してもよい。また、車両側装置10は、車両の左右方向において車両に対して遮蔽物とは反対側に位置し、車両の前後方向において遮蔽物から所定の余裕距離より遠く離れている道路側装置20を選択し、道路側装置20を決定してもよい。
 図6は、図1の物体検出システム1により死角領域の物体を検出するシーンのさらに他の例を示す平面図である。図6に示すように、車両の近傍には2つの道路側装置20a,20bがあり、道路側装置20aは、車両に対して、遮蔽物(又は潜在する死角領域)とは道路の反対側にあり、車両の前方において、車両よりも遮蔽物から所定の余裕距離より遠く離れている。これに対し、道路側装置20bは、前後方向において車両と実質的に同じ位置であり(並んでおり)、車両に対して遮蔽物とは道路の同じ側にある。この場合は、道路側装置20bからは死角領域の歩行者を検出できない可能性があるため、道路側装置20aを選択し、ランドマークの識別情報と有効距離範囲とを含む要求を道路側装置20aに送信する。なお、所定の余裕距離は、死角領域の物体が適切に検出できる範囲内で適宜の値を設定できる。
 図7は、図1の物体検出システム1における処理の他の例を示すフローチャートである。図7に示すように、当該方法は、車両側で実行されるステップS31~S37を含む。ステップS31、ステップS31a及びその前のステップは、図2に示す車両側装置10で実行されるステップS16及びその前のステップを参照できる。道路側装置20で実行されるステップは、図2に示す道路側装置20で実行されるステップを参照できる。
 図7のステップS31において、車両側装置10は、車両側送受信モジュール13を介して、第2位置情報を道路側装置20から受信する。ステップS31aにおいて、車両側装置10の車両側演算モジュール12は、道路側装置20からの第2位置情報と、第1位置情報とに基づいて、死角領域の物体を特定する。
 ステップS32において、車両側装置10の車両側演算モジュール12は、連続した所定フレームにおいて同一の死角領域の物体が検出されたか否かを特定する。例えば、同一の死角領域の物体は、種類(歩行者、自転車、自動車など)及び位置がいずれも同一である物体であってもよい。例えば、所定フレームは3フレームであってもよい。
 連続する所定フレームにおいて同一の死角領域の物体が検出されない場合は、ステップS33に進む。ステップS33において、車両は現在の走行状態を保持する。これに対し、連続する所定フレーム内に同一の死角領域の物体が検出された場合は、ステップS34に進む。ステップS34において、死角領域の物体と車両との衝突時間(Time-To-Collision、TTC)が車両側演算モジュール12により決定され、ステップS35に進む。
 ステップS35において、TTCが所定の閾値時間未満であるか否かが判定される。TTCが閾値時間以上である場合は、ステップS33に進み、TTCが閾値時間未満である場合は、ステップS36に進む。閾値時間は、車両と物体との接触を回避できる範囲内で適宜の時間を設定でき、例えば1~3秒である。ステップS36において、車両を安全速度(すなわち閾値速度、例えば15~30km/h)まで減速させる。ステップS33とステップS36の後、ステップS37に進む。ステップS37において、道路側装置20に送信停止要求を送信する。
 他の実施例において、ステップS34にTTCを算出した後、TTCに基づいて車速を他の方法で調整してもよい。例えば、衝突時間が閾値時間より長く、車速が第1の速度以上である場合は、衝突時間が閾値時間に達する前に、車両を第1車速まで減速させ、衝突時間が閾値時間に達すると、当該車両を第1車速から第2車速まで減速させる。予め車両を減速させておくことで、死角領域付近を通過する際の急ブレーキを回避できる。
 車両側装置10について、本発明は、1つのランドマークのみを選択することや、ただ1つの道路側装置20とデータの送信を行うことに限られず、複数のランドマークに基づいて、1つ又は複数の潜在する死角領域における1つ又は複数の死角領域の物体を特定してもよく、複数の道路側装置20とデータの送信を行って1つ又は複数の潜在する死角領域における1つ又は複数の死角領域の物体を特定してもよい。また、車両により、第4位置情報に基づいて第2位置情報を取得してもよい。前述されたステップは省略されてもよいし、順序が変更されたり、並行して実行されたりしてもよい。
[本発明の実施態様]
 本実施形態によれば、車両の車両側装置10により実行される物体検出方法であって、
 前記車両側装置10は、前記車両により前記車両の周囲の物体を検出して前記物体の第1位置情報を取得し、前記車両と、前記車両の走行する道路に設けられた道路側装置20とのいずれによっても検出可能な前記物体から、目印となる前記物体であるランドマークを特定し、前記ランドマークからの有効距離範囲を決定し、前記第1位置情報と、前記道路側装置20の検出結果に基づいて取得された前記物体の第2位置情報とに基づいて、遮蔽物により前記車両の位置から前記物体を検出できない死角領域の前記物体を特定し、前記第2位置情報は、前記道路側装置20により検出された前記ランドマークの前記有効距離範囲における前記物体の位置情報のみを含む、物体検出方法が提供される。これにより、演算量及び受送信するデータ量を削減し、演算資源を節約し、ハードウェアのコストを削減できる。
 本実施形態の物体検出方法では、前記車両側装置10は、前記ランドマークと、前記有効距離範囲と、前記第1位置情報とに基づいて前記物体の第3位置情報を取得し、前記第3位置情報と前記第2位置情報とに基づいて前記死角領域の前記物体を特定し、前記第3位置情報は、前記車両により検出された前記ランドマークの前記有効距離範囲における前記物体の前記位置情報のみを含む。これにより、演算量及び受送信するデータ量をより削減し、演算資源をより節約できる。
 本実施形態の物体検出方法では、前記第3位置情報は、前記車両により検出された前記物体の前記車両に対する相対位置情報と、前記車両により検出された前記ランドマークの前記車両に対する前記相対位置情報とを含み、前記第2位置情報は、前記道路側装置20により検出された前記物体の前記ランドマークに対する前記相対位置情報を含み、前記車両側装置10は、前記第3位置情報と前記第2位置情報とに基づいて前記死角領域の前記物体を特定する場合は、前記車両により、前記道路側装置20により検出された前記物体の前記ランドマークに対する前記相対位置情報と、前記車両により検出された前記ランドマークの前記車両に対する前記相対位置情報とに基づいて、前記道路側装置20により検出された前記物体の前記車両に対する前記相対位置情報を取得し、前記車両により検出された前記物体の前記車両に対する相対位置を、前記道路側装置20により検出された前記物体の前記車両に対する前記相対位置と比較して前記死角領域の前記物体を特定する。これにより、死角領域における対象物の位置を正確に認識できる。
 本実施形態の物体検出方法では、前記車両側装置10は、前記車両により、決定された前記ランドマークの識別情報と前記有効距離範囲とを前記道路側装置20に送信し、前記道路側装置20により前記車両の周囲の前記物体を検出して前記物体の第4位置情報を取得し、前記道路側装置20により、決定された前記ランドマークの前記識別情報と、前記有効距離範囲と、前記第4位置情報とに基づいて前記第2位置情報を取得する。これにより、死角領域における対象物の位置を正確に認識できる。
 本実施形態の物体検出方法では、前記車両側装置10は、前記車両により、前記車両により検出された前記車両の周囲の静止物の位置情報を、前記車両に予め記憶された前記ランドマークの前記位置情報と比較して前記ランドマークを特定し、前記第2位置情報は、前記ランドマークに基づいて取得される。これにより、ランドマークを速やかに特定できる。
 本実施形態の物体検出方法では、前記車両側装置10は、潜在する前記死角領域を特定し、前記車両により検出された前記車両の周囲の静止物の位置情報を、前記車両に予め記憶された前記ランドマークの前記位置情報と比較して複数の前記ランドマークを取得した場合は、複数の前記ランドマークの中から、所定位置に最も近い前記ランドマークを特定し、前記所定位置は、潜在する前記死角領域の中の、前記車両の走行車線に最も近い位置である。これにより、ランドマークを速やかに特定できる。
 本実施形態の物体検出方法では、前記車両側装置10は、複数の潜在する前記死角領域が存在する場合は、潜在する前記死角領域ごとに対して対応する前記ランドマークを特定し、複数の潜在する前記死角領域に対応する複数の前記ランドマークから前記車両に最も近い前記ランドマークを、特定された前記ランドマークとして選択する。これにより、ランドマークを速やかに特定できる。
 本実施形態の物体検出方法では、前記車両側装置10は、使用に供する前記ランドマークを、前記車両の備える地図情報から予め選定し、予め選定された前記ランドマークに識別情報を付与し、前記識別情報は、前記道路側装置に記憶された前記ランドマークの前記識別情報と同一である。これにより、ランドマークを速やかに特定できる。
 本実施形態の物体検出方法では、前記車両側装置10は、前記道路側装置20を選択し、前記車両により、選択された前記ランドマークの識別情報と前記有効距離範囲とを、選択された前記道路側装置20に送信し、前記道路側装置20は、前記車両の前方に位置する。これにより、複数の道路側装置20から適切な道路側装置20を選択できる。
 本実施形態の物体検出方法では、前記道路側装置20は、前記車両の左右方向において前記車両に対して前記遮蔽物とは反対側に位置する。これにより、適切な道路側装置20を選択できる。
 本実施形態の物体検出方法では、前記道路側装置20は、前記車両の前後方向において前記遮蔽物から所定の余裕距離より遠く離れている。これにより、適切な道路側装置20を選択できる。
 本実施形態の物体検出方法では、前記車両側装置10は、前記物体が位置する前記死角領域に前記車両が到達する衝突時間を計算し、前記衝突時間に基づいて車速を調整し、前記衝突時間が閾値時間より長く、前記車速が第1車速より速い場合は、前記衝突時間が前記閾値時間に達する前に前記車両を前記第1車速まで減速させ、前記衝突時間が前記閾値時間に達すると、前記車両を前記第1車速から第2車速まで減速させる。これにより、死角領域付近を通過する際の急ブレーキを回避できる。
 本実施形態の物体検出方法では、前記車両側装置10は、前記物体が位置する前記死角領域に前記車両が到達する衝突時間を計算し、前記衝突時間に基づいて車速を調整し、前記衝突時間が閾値時間未満であり、前記車速が閾値速度より速い場合は、前記車両を前記閾値速度まで減速させる。これにより、死角領域付近を通過する際の急ブレーキを回避できる。
 本実施形態の物体検出方法では、前記車両側装置10は、前記道路側装置20によって検出された前記物体の前記道路側装置20に対する距離及び方位と、前記ランドマークの前記道路側装置20に対する距離及び方位とを前記道路側装置20により算出し、前記物体の前記道路側装置20に対する距離及び方位と、前記ランドマークの前記道路側装置20に対する距離及び方位とに基づいて、前記道路側装置20によって検出された前記物体の前記ランドマークに対する距離及び方位を決定し、前記車両によって検出された前記物体の前記車両に対する距離及び方位と、前記ランドマークの前記車両に対する距離及び方位とを前記車両により算出し、前記第2位置情報は、前記道路側装置20によって検出された前記物体の前記ランドマークに対する距離及び方位を含み、前記第1位置情報は、前記車両によって検出された前記物体の前記車両に対する距離及び方位を含み、前記第1位置情報と前記第2位置情報とに基づいて前記死角領域の前記物体を特定する場合は、前記車両により、前記道路側装置20によって検出された前記物体の前記ランドマークに対する距離及び方位と、前記車両によって検出された前記ランドマークの前記車両に対する距離及び方位とに基づいて、前記道路側装置20によって検出された前記物体の前記車両に対する距離及び方位を取得し、前記車両により、前記車両によって検出された前記物体の前記車両に対する距離及び方位を、前記道路側装置20によって検出された前記物体の前記車両に対する距離及び方位と比較して、前記死角領域の前記物体を特定する。これにより、死角領域における対象物の位置を正確に認識できる。
 また、本実施形態によれば、車両の周囲の物体を検出して前記物体の第1位置情報を取得するように構成された、車両側装置10の車両側センサ11と、前記第1位置情報と、前記車両の走行する道路に設けられた道路側装置20の検出結果に基づいて取得された前記物体の第2位置情報とに基づいて、遮蔽物により前記車両の位置から前記物体を検出できない死角領域の前記物体を特定する、前記車両側装置10の車両側演算モジュール12とを備え、前記第2位置情報は、前記車両側装置10と、前記道路側装置20とのいずれによっても検出可能な目印となる前記物体であるランドマークから有効距離範囲において前記道路側装置20により検出された前記物体の位置情報のみを含む、物体検出システム1が提供される。これにより、演算量及び受送信するデータ量を削減し、演算資源を節約し、ハードウェアのコストを削減できる。
1…物体検出システム、10…車両側装置、11…車両側センサ、12…車両側演算モジュール、13…車両側送受信モジュール、14…車両側記憶モジュール、20,20a,20b…道路側装置、21…道路側センサ、22…道路側演算モジュール、23…道路側送受信モジュール、24…道路側記憶モジュール

Claims (15)

  1.  車両の車両側装置により実行される物体検出方法であって、
     前記車両側装置は、
     前記車両により前記車両の周囲の物体を検出して前記物体の第1位置情報を取得し、
     前記車両と、前記車両の走行する道路に設けられた道路側装置とのいずれによっても検出可能な前記物体から、目印となる前記物体であるランドマークを特定し、
     前記ランドマークからの有効距離範囲を決定し、
     前記第1位置情報と、前記道路側装置の検出結果に基づいて取得された前記物体の第2位置情報とに基づいて、遮蔽物により前記車両の位置から前記物体を検出できない死角領域の前記物体を特定し、
     前記第2位置情報は、前記道路側装置により検出された前記ランドマークの前記有効距離範囲における前記物体の位置情報のみを含む、物体検出方法。
  2.  前記車両側装置は、
     前記ランドマークと、前記有効距離範囲と、前記第1位置情報とに基づいて前記物体の第3位置情報を取得し、
     前記第3位置情報と前記第2位置情報とに基づいて前記死角領域の前記物体を特定し、
     前記第3位置情報は、前記車両により検出された前記ランドマークの前記有効距離範囲における前記物体の前記位置情報のみを含む、請求項1に記載の物体検出方法。
  3.  前記第3位置情報は、前記車両により検出された前記物体の前記車両に対する相対位置情報と、前記車両により検出された前記ランドマークの前記車両に対する前記相対位置情報とを含み、
     前記第2位置情報は、前記道路側装置により検出された前記物体の前記ランドマークに対する前記相対位置情報を含み、
     前記車両側装置は、
     前記第3位置情報と前記第2位置情報とに基づいて前記死角領域の前記物体を特定する場合は、前記車両により、前記道路側装置により検出された前記物体の前記ランドマークに対する前記相対位置情報と、前記車両により検出された前記ランドマークの前記車両に対する前記相対位置情報とに基づいて、前記道路側装置により検出された前記物体の前記車両に対する前記相対位置情報を取得し、
     前記車両により検出された前記物体の前記車両に対する相対位置を、前記道路側装置により検出された前記物体の前記車両に対する前記相対位置と比較して前記死角領域の前記物体を特定する、請求項2に記載の物体検出方法。
  4.  前記車両側装置は、
     前記車両により、決定された前記ランドマークの識別情報と前記有効距離範囲とを前記道路側装置に送信し、
     前記道路側装置により前記車両の周囲の前記物体を検出して前記物体の第4位置情報を取得し、
     前記道路側装置により、決定された前記ランドマークの前記識別情報と、前記有効距離範囲と、前記第4位置情報とに基づいて前記第2位置情報を取得する、請求項1~3のいずれか一項に記載の物体検出方法。
  5.  前記車両側装置は、前記車両により、前記車両により検出された前記車両の周囲の静止物の位置情報を、前記車両に予め記憶された前記ランドマークの前記位置情報と比較して前記ランドマークを特定し、
     前記第2位置情報は、前記ランドマークに基づいて取得される、請求項1~4のいずれか一項に記載の物体検出方法。
  6.  前記車両側装置は、
     潜在する前記死角領域を特定し、
     前記車両により検出された前記車両の周囲の静止物の位置情報を、前記車両に予め記憶された前記ランドマークの前記位置情報と比較して複数の前記ランドマークを取得した場合は、複数の前記ランドマークの中から、所定位置に最も近い前記ランドマークを特定し、
     前記所定位置は、潜在する前記死角領域の中の、前記車両の走行車線に最も近い位置である、請求項1~5のいずれか一項に記載の物体検出方法。
  7.  前記車両側装置は、
     複数の潜在する前記死角領域が存在する場合は、潜在する前記死角領域ごとに対して対応する前記ランドマークを特定し、
     複数の潜在する前記死角領域に対応する複数の前記ランドマークから前記車両に最も近い前記ランドマークを、特定された前記ランドマークとして選択する、請求項6に記載の物体検出方法。
  8.  前記車両側装置は、
     使用に供する前記ランドマークを、前記車両の備える地図情報から予め選定し、
     予め選定された前記ランドマークに識別情報を付与し、
     前記識別情報は、前記道路側装置に記憶された前記ランドマークの前記識別情報と同一である、請求項1~7のいずれか一項に記載の物体検出方法。
  9.  前記車両側装置は、
     前記道路側装置を選択し、
     前記車両により、選択された前記ランドマークの識別情報と前記有効距離範囲とを、選択された前記道路側装置に送信し、
     前記道路側装置は、前記車両の前方に位置する、請求項1~8のいずれか一項に記載の物体検出方法。
  10.  前記道路側装置は、前記車両の左右方向において前記車両に対して前記遮蔽物とは反対側に位置する、請求項1~9のいずれか一項に記載の物体検出方法。
  11.  前記道路側装置は、前記車両の前後方向において前記遮蔽物から所定の余裕距離より遠く離れている、請求項1~10のいずれか一項に記載の物体検出方法。
  12.  前記車両側装置は、
     前記物体が位置する前記死角領域に前記車両が到達する衝突時間を計算し、
     前記衝突時間に基づいて車速を調整し、
     前記衝突時間が閾値時間より長く、前記車速が第1車速より速い場合は、前記衝突時間が前記閾値時間に達する前に前記車両を前記第1車速まで減速させ、前記衝突時間が前記閾値時間に達すると、前記車両を前記第1車速から第2車速まで減速させる、請求項1~11のいずれか一項に記載の物体検出方法。
  13.  前記車両側装置は、
     前記物体が位置する前記死角領域に前記車両が到達する衝突時間を計算し、
     前記衝突時間に基づいて車速を調整し、
     前記衝突時間が閾値時間未満であり、前記車速が閾値速度より速い場合は、前記車両を前記閾値速度まで減速させる、請求項1~12のいずれか一項に記載の物体検出方法。
  14.  前記車両側装置は、
     前記道路側装置によって検出された前記物体の前記道路側装置に対する距離及び方位と、前記ランドマークの前記道路側装置に対する距離及び方位とを前記道路側装置により算出し、
     前記物体の前記道路側装置に対する距離及び方位と、前記ランドマークの前記道路側装置に対する距離及び方位とに基づいて、前記道路側装置によって検出された前記物体の前記ランドマークに対する距離及び方位を決定し、
     前記車両によって検出された前記物体の前記車両に対する距離及び方位と、前記ランドマークの前記車両に対する距離及び方位とを前記車両により算出し、
     前記第2位置情報は、前記道路側装置によって検出された前記物体の前記ランドマークに対する距離及び方位を含み、
     前記第1位置情報は、前記車両によって検出された前記物体の前記車両に対する距離及び方位を含み、
     前記第1位置情報と前記第2位置情報とに基づいて前記死角領域の前記物体を特定する場合は、前記車両により、前記道路側装置によって検出された前記物体の前記ランドマークに対する距離及び方位と、前記車両によって検出された前記ランドマークの前記車両に対する距離及び方位とに基づいて、前記道路側装置によって検出された前記物体の前記車両に対する距離及び方位を取得し、
     前記車両により、前記車両によって検出された前記物体の前記車両に対する距離及び方位を、前記道路側装置によって検出された前記物体の前記車両に対する距離及び方位と比較して、前記死角領域の前記物体を特定する、請求項1~13のいずれか一項に記載の物体検出方法。
  15.  車両の周囲の物体を検出して前記物体の第1位置情報を取得するように構成された、車両側装置の車両側センサと、
     前記第1位置情報と、前記車両の走行する道路に設けられた道路側装置の検出結果に基づいて取得された前記物体の第2位置情報とに基づいて、遮蔽物により前記車両の位置から前記物体を検出できない死角領域の前記物体を特定する、前記車両側装置の車両側演算モジュールとを備え、
     前記第2位置情報は、前記車両側装置と、前記道路側装置とのいずれによっても検出可能な目印となる前記物体であるランドマークから有効距離範囲において前記道路側装置により検出された前記物体の位置情報のみを含む、物体検出システム。
PCT/JP2024/021688 2023-07-26 2024-06-14 物体検出方法及び物体検出システム Pending WO2025022861A1 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2025535628A JPWO2025022861A1 (ja) 2023-07-26 2024-06-14
CN202480048715.6A CN121568865A (zh) 2023-07-26 2024-06-14 物体检测方法以及物体检测系统

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN202310922794.6 2023-07-26
CN202310922794 2023-07-26

Publications (1)

Publication Number Publication Date
WO2025022861A1 true WO2025022861A1 (ja) 2025-01-30

Family

ID=94374908

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2024/021688 Pending WO2025022861A1 (ja) 2023-07-26 2024-06-14 物体検出方法及び物体検出システム

Country Status (3)

Country Link
JP (1) JPWO2025022861A1 (ja)
CN (1) CN121568865A (ja)
WO (1) WO2025022861A1 (ja)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001101566A (ja) * 1999-09-30 2001-04-13 Toshiba Corp 交通安全確認システム
JP2017087940A (ja) * 2015-11-09 2017-05-25 マツダ株式会社 車速制御装置
WO2023021875A1 (ja) * 2021-08-18 2023-02-23 住友電気工業株式会社 交通情報配信装置、交通情報配信システム、交通情報配信方法および交通情報配信プログラム

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001101566A (ja) * 1999-09-30 2001-04-13 Toshiba Corp 交通安全確認システム
JP2017087940A (ja) * 2015-11-09 2017-05-25 マツダ株式会社 車速制御装置
WO2023021875A1 (ja) * 2021-08-18 2023-02-23 住友電気工業株式会社 交通情報配信装置、交通情報配信システム、交通情報配信方法および交通情報配信プログラム

Also Published As

Publication number Publication date
CN121568865A (zh) 2026-02-24
JPWO2025022861A1 (ja) 2025-01-30

Similar Documents

Publication Publication Date Title
US10919525B2 (en) Advanced driver assistance system, vehicle having the same, and method of controlling the vehicle
KR102873464B1 (ko) 운전자 보조 시스템, 그를 가지는 차량 및 그 제어 방법
US11718289B2 (en) Collision avoidance device, vehicle having the same and method of controlling the vehicle
US11897458B2 (en) Collision avoidance apparatus for vehicle
US9896094B2 (en) Collision avoidance control system and control method
US10926764B2 (en) Lane keeping assistance apparatus, vehicle having the same and method for controlling the same
CN115214660B (zh) 驾驶员辅助系统及包括驾驶员辅助系统的车辆
US11433888B2 (en) Driving support system
JP6402684B2 (ja) 表示装置
KR20200102004A (ko) 충돌 방지 장치, 시스템 및 방법
CN113525363A (zh) 高级驾驶员辅助系统、具有该系统的车辆和控制车辆的方法
KR102899259B1 (ko) 차량 및 그 제어 방법
JP2016517106A (ja) 自動車の自動運行システム
US12441304B2 (en) Driver assistance system and vehicle including the same
US11042160B2 (en) Autonomous driving trajectory determination device
US12122373B2 (en) Device and method for preventing blind spot collision based on vehicle-to-vehicle communication
US20190263367A1 (en) Autonomous emergency braking system and method for vehicle at crossroad
KR20210158705A (ko) 차량 및 그 제어 방법
JP7213265B2 (ja) 車両制御システム
JP2018090063A (ja) 車両制御システム
KR20230020030A (ko) 운전자 보조 장치 및 그를 가지는 차량
US20240192360A1 (en) Driving assistance system and driving assistance method
WO2025022861A1 (ja) 物体検出方法及び物体検出システム
KR20240135495A (ko) 주행 보조 장치, 이를 포함하는 차량 및 주행 보조 방법
JP7334107B2 (ja) 車両制御方法及び車両制御装置

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 24845243

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2025535628

Country of ref document: JP

Kind code of ref document: A

WWE Wipo information: entry into national phase

Ref document number: 2025535628

Country of ref document: JP

NENP Non-entry into the national phase

Ref country code: DE