DE102004051527A1 - Driving assistance device for e.g. truck, has evaluating device connected to image sensor e.g. video camera, and medium connected to evaluating device for detecting pitch angles and rolling angles of motor vehicle independent of sensor - Google Patents
Driving assistance device for e.g. truck, has evaluating device connected to image sensor e.g. video camera, and medium connected to evaluating device for detecting pitch angles and rolling angles of motor vehicle independent of sensor Download PDFInfo
- Publication number
- DE102004051527A1 DE102004051527A1 DE102004051527A DE102004051527A DE102004051527A1 DE 102004051527 A1 DE102004051527 A1 DE 102004051527A1 DE 102004051527 A DE102004051527 A DE 102004051527A DE 102004051527 A DE102004051527 A DE 102004051527A DE 102004051527 A1 DE102004051527 A1 DE 102004051527A1
- Authority
- DE
- Germany
- Prior art keywords
- motor vehicle
- driving assistance
- assistance device
- detecting
- pitch
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
- 238000005096 rolling process Methods 0.000 title abstract description 5
- 238000003384 imaging method Methods 0.000 claims description 31
- 238000011156 evaluation Methods 0.000 claims description 11
- 230000004297 night vision Effects 0.000 claims description 4
- 238000001514 detection method Methods 0.000 description 15
- 230000001133 acceleration Effects 0.000 description 10
- 239000000725 suspension Substances 0.000 description 8
- 230000004807 localization Effects 0.000 description 5
- 238000000034 method Methods 0.000 description 5
- 230000008901 benefit Effects 0.000 description 3
- 230000004438 eyesight Effects 0.000 description 3
- 238000005259 measurement Methods 0.000 description 3
- 230000006835 compression Effects 0.000 description 2
- 238000007906 compression Methods 0.000 description 2
- 230000004927 fusion Effects 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- TVEXGJYMHHTVKP-UHFFFAOYSA-N 6-oxabicyclo[3.2.1]oct-3-en-7-one Chemical compound C1C2C(=O)OC1C=CC2 TVEXGJYMHHTVKP-UHFFFAOYSA-N 0.000 description 1
- 239000006096 absorbing agent Substances 0.000 description 1
- 230000006978 adaptation Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000013016 damping Methods 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 230000007257 malfunction Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 210000000056 organ Anatomy 0.000 description 1
- 239000002244 precipitate Substances 0.000 description 1
- 238000002360 preparation method Methods 0.000 description 1
- 230000035939 shock Effects 0.000 description 1
- 230000006641 stabilisation Effects 0.000 description 1
- 238000011105 stabilization Methods 0.000 description 1
- 239000003381 stabilizer Substances 0.000 description 1
- 230000000638 stimulation Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
- G05D1/02—Control of position or course in two dimensions
- G05D1/021—Control of position or course in two dimensions specially adapted to land vehicles
- G05D1/0231—Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means
- G05D1/0246—Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means using a video camera in combination with image processing means
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Multimedia (AREA)
- Electromagnetism (AREA)
- Aviation & Aerospace Engineering (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- General Physics & Mathematics (AREA)
- Automation & Control Theory (AREA)
- Traffic Control Systems (AREA)
Abstract
Description
Technisches GebieteTechnical areas
Die Erfindung betrifft eine Fahrassistenzvorrichtung zur Erfassung insbesondere der Fahrspur und/oder zur Erfassung und Lokalisierung von Objekten in der Umgebung eines Kraftfahrzeugs mindestens mit einer mit mindestens einem bildgebenden Sensor verbundenen Auswertevorrichtung gemäß dem Oberbegriff des Anspruchs 1.The The invention relates to a driving assistance device for detecting in particular the lane and / or the detection and localization of objects in the vicinity of a motor vehicle with at least one with at least An evaluation device connected to an imaging sensor according to the preamble of claim 1.
Mit zunehmendem Verkehrsaufkommen stellen Fahrassistenzvorrichtungen, mit denen ein Kraftfahrzeug automatisch in einer Fahrspur gehalten wird, oder der Fahrer gewarnt wird, wenn das Kraftfahrzeug die Fahrspur zu verlassen droht, oder mit denen Hindernisse auf der Fahrbahn oder allgemein Objekte in der Umgebung des Kraftfahrzeugs erfasst und lokalisiert werden können, ein viel versprechendes Feld zur Erhöhung der Verkehrssicherheit von Kraftfahrzeugen dar.With increasing traffic volume provide driver assistance devices, with which a motor vehicle is automatically kept in a lane, or the driver is warned when the motor vehicle the lane threatens to leave, or with which obstacles on the road or generally objects in the vicinity of the motor vehicle detected and can be localized a promising field to increase traffic safety of motor vehicles.
Derartige Fahrassistenzvorrichtungen weisen einen oder mehrere bildgebende Sensoren, wie beispielsweise Videokameras zur visuellen Erfassung der Umgebung, sowie zur Abstandsmessung einen zusätzlichen abstandgebenden Sensor, beispielsweise einen RADAR-, LIDAR-, Ultraschall-Sensor oder derglei chen auf, sowie eine Auswertevorrichtung, welches die Bild- und gegebenenfalls Abstandsdaten im Hinblick auf die jeweilige Funktion, beispielsweise Fahrspurerkennung oder Hinderniserkennung, auswertet und die gewonnenen Daten an das oder die Steuergeräte der jeweiligen Stellglieder, wie beispielsweise Lenkung, Getriebe, Antrieb, Bremse, oder einer Ausgabevorrichtung, beispielsweise eine Anzeige im Blickfeld des Fahrers, eine Stimme oder ein Warnsignal, weiterleitet. Ebenso sind Fahrassistenzvorrichtungen bekannt, bei denen mittels zweier voneinander beabatandeten bildgebenden Sensoren, welche beide das selbe Sichtfeld erfassen, eine stereoskopische Erfassung der Umgebung erfolgt, so dass auf gesonderte, abatandgebende Sensoren verzichtet werden kann.such Driver assistance devices have one or more imaging Sensors, such as video cameras for visual capture the environment, as well as for distance measurement an additional distance sensor, such as a RADAR, LIDAR, ultrasonic sensor or derglei surfaces, as well as an evaluation device which the Picture and if necessary Distance data with regard to the respective function, for example Lane detection or obstacle detection, evaluates and the won Data to the controller (s) the respective actuators, such as steering, transmission, Drive, brake, or an output device, such as a Display in the driver's field of vision, a voice or a warning signal, forwards. Likewise, driving assistance devices are known, in those by means of two spaced-apart imaging sensors, which both capture the same field of view, a stereoscopic one Capture of the environment takes place, so that on separate, abatandgebende Sensors can be dispensed with.
Derartige Fahrassistenzvorrichtungen weisen jedoch Funktionsfehler auf, die auf Fehler bei der Bilderfassung zurückzuführen sind, welche beispielsweise auf eine mangelhafte Ausrichtung des bildgebenden Sensors in Bezug auf die Fahrzeuglängsachse zurückzuführen sind. Darüber hinaus ergeben sich im realen Fahrzeugbetrieb Situationen, bei denen sich das Fahrzeug relativ zur Fahrbahnoberfläche nicht in einer Ruhelage befindet, sondern sich dynamisch verhält, beispielsweise beim Einfedern in ein Schlagloch, beim Bremsen, Gasgeben und bei Kurvenfahrt. Derartige Fahrsituationen werden bislang durch einen großen Toleranzbereich bei der Erfassung der Fahrspur oder von Objekten kompensiert, wodurch es in bestimmten Situationen zu Ausfällen oder Leistungseinbußen der Fahrassistenzvorrichtung kommt.such However, driving assistance devices have malfunctions that are due to errors in image acquisition, which, for example to a poor alignment of the imaging sensor with respect on the vehicle's longitudinal axis are attributed. About that In addition, situations arise in real vehicle operation in which the vehicle relative to the road surface is not in a rest position but behaves dynamically, for example during compression in a pothole, when braking, accelerating and cornering. such Driving situations are so far by a large tolerance range in the Detecting the lane or compensated by objects, causing it in certain situations to failures or performance losses of the Driving assistance device comes.
Aus
der
Aus
der
Aus
der
Technische Aufgabe der Erfindung:Technical task of Invention:
Der Erfindung liegt die Aufgabe zugrunde, eine durch die Möglichkeit der Erkennung von dynamischen Fahrsituationen verbesserte Fahrassistenzvorrichtung zur Fahrspurerkennung und/oder zur Erfassung und Lokalisierung von Objekten in der Umgebung eines Kraftfahrzeugs zu entwickeln.Of the Invention is based on the object, one by the possibility the recognition of dynamic driving situations improved driving assistance device for lane detection and / or detection and localization of To develop objects in the environment of a motor vehicle.
Offenbarung der Erfindung und deren Vorteile:Disclosure of the invention and their advantages:
Die Aufgabe wird bei einer Vorrichtung der eingangs genannten Gattung gelöst durch mit der Auswertevorrichtung verbundene, vom bildgebenden Sensor unabhängige Mittel zur Erfassung des Nickwinkels des Kraftfahrzeugs, zur Verbesserung der Funktion der Fahrassistenzvorrichtung durch die Möglichkeit, Fehlinformationen der Fahrassistenzvorrichtung, welche auf einer durch das Nicken verursachten Verzerrung der Perspektive des bildgebenden Sensors basieren, beispielsweise einer durch die nickbedingte Verzerrung bedingte Fehlangabe über die Position eines Objekts in der Umgebung des Kraftfahrzeugs oder des Verlaufs oder der Breite einer Fahrspur, anhand des beispielsweise durch Messung der Federwege an den Federbeinen des Kraftfahrzeugs oder durch Messung der Abstände zwischen Fahrzeugunterboden und Fahrbahnoberfläche im Bereich der Radaufhängungen genau bestimmbaren Nickwinkels rechnerisch zu kompensieren.The problem is solved in a device of the type mentioned by the with Evaluation device connected, independent of the imaging sensor means for detecting the pitch angle of the motor vehicle, to improve the function of the driving assistance device by the possibility of incorrect information of the driving assistance device, which are based on a caused by the pitch distortion of the perspective of the imaging sensor, such as a nickbedingte distortion Conditional misstatement about the position of an object in the environment of the motor vehicle or the course or the width of a lane, on the basis of, for example, by measuring the suspension travel on the spring struts of the motor vehicle or by measuring the distances between the vehicle underbody and road surface in the region of the suspensions precisely determinable pitch angle mathematically to compensate.
Es ist zwar grundsätzlich bekannt, dass der Nickwinkel einen Einfluss auf die Erfassung der Fahrspur oder die Erfassung und Lokalisierung von Objekten in der Umgebung eines Kraftfahrzeugs hat, wobei jedoch bislang der Nickwinkel und dessen dynamische Änderung über die Verfolgung von Objekten und Fahrspuren, sowie durch Auswertung des optischen Flusses in den Bildfolgen des bildgebenden Sensors bestimmt wird. Insbesondere bei mit einem bildgebenden Sensor arbeitenden Fahrassistenzvorrichtungen zur Erfassung der Fahrspur wird hierbei jedoch die Annahme einer konstanten Spurbreite sowie einer eben verlaufenden Fahrbahn zugrunde gelegt. Dabei muss, um auch bei Bodenwellen die Fahrspur nicht zu verlieren, und auch um Änderungen der Spurbreite verarbeiten zu können, die Unsicherheit beziehungsweise Dynamik entsprechend der aus der großen Toleranz des Nickwinkels resultierenden Ungenauigkeit groß gewählt werden. Dies kann beispielsweise an Gabelungen, Aufweitungen und Ausfahrten zu Ausfällen von Fahrassistenzvorrichtungen zur Fahrspurerkennung führen. Ebenso ist grundsätzlich bekannt, den Nick- oder Rollwinkel mittels Fahrdynamischer Rechenmodelle in Verbindung mit Beschleunigungs- und Drehratensensoren zu ermitteln. Deren Zuverlässigkeit ist jedoch nicht ausreichend, um eine möglichst genaue Erfassung des Nickwinkels in jeder Fahrsituation sicherzustellen.It is basically Known that the pitch angle has an impact on the detection of Lane or the detection and localization of objects in the Environment of a motor vehicle, but so far the pitch angle and its dynamic change over the Tracking of objects and lanes, as well as by evaluation of the optical Flow is determined in the image sequences of the imaging sensor. In particular, working with an imaging sensor driving assistance devices for the detection of the lane but here is the assumption of a constant track width and a flat roadway placed. In order to avoid the lane even at bumps lose, and also about changes to be able to process the track width, the uncertainty or dynamics corresponding to that from the huge Tolerance of the pitch angle resulting inaccuracy be large. This For example, at forks, widenings and exits too precipitate lead by driving assistance devices for lane detection. As well is basically known, the pitch or roll angle by means of dynamic driving models to be determined in conjunction with acceleration and yaw rate sensors. Their reliability However, it is not sufficient to capture the most accurate possible Ensure pitch angle in every driving situation.
Demgegenüber weist die erfindungsgemäße Fahrassistenzvorrichtung den Vorteil auf, dass der Nickwinkel unabhängig vom bildgebenden Sensor bestimmt wird, beispielsweise durch geeignete Sensoren am Fahrwerk, beispielsweise an den Federbeinen angeordnete Sensoren zur Messung der Federwege, oder durch am Fahrzeugunterboden angeordnete, den Abstand zwischen Fahrzeugunterboden und Fahrbahnoberfläche messenden, abstandsgebende Sensoren. Hierdurch kann zunächst der Nickwinkel wesentlich genauer bestimmt werden als bisher. Darüber hinaus kann der unabhängig vom bildgebenden Sensor erfasste Nickwinkel dazu verwendet werden, perspektivische Fehler des bildgebenden Sensors, die durch eine Beschleunigung oder Verzögerung in Längsrichtung des Kraftfahrzeugs verursacht werden, rechnerisch von der Auswertevorrichtung zu kompensieren, wodurch die Zuverlässigkeit und Ausfallsicherheit der Fahrspurerkennung sowie der Genauigkeit bei der Erfassung und Lokalisierung von Objekten erhöht wird.In contrast, points the driving assistance device according to the invention the advantage that the pitch angle determined independently of the imaging sensor is, for example, by suitable sensors on the chassis, for example arranged on the struts sensors for measuring the spring travel, or by arranged on the vehicle underbody, the distance between Vehicle underbody and road surface measuring, distance giving Sensors. This can be done first the pitch angle be determined much more accurate than before. Furthermore can be independent be used by the imaging sensor recorded pitch angle perspective errors of the imaging sensor caused by a Acceleration or deceleration longitudinal of the motor vehicle, calculated by the evaluation device compensate, reducing the reliability and reliability the lane detection and the accuracy of the detection and Localization of objects increased becomes.
Eine vorteilhafte Ausgestaltung der Erfindung sieht vor, dass zusätzlich zu, oder anstelle der Mittel zur Erfassung des Nickwinkels vorzugsweise vom bildgebenden Sensor unabhängige Mittel zur Erfassung des Rollwinkels des Kraftfahrzeugs mit der Auswertevorrichtung verbunden sind, zur Verbesserung der Funktion der Fahrassistenzvorrichtung durch die Möglichkeit, Fehlinformationen der Fahrassistenzvorrichtung, welche auf einer durch das Rollen des Kraftfahrzeugs um seine Längsachse verursachten Verzerrung der Perspektive des bildgebenden Sensors basieren, beispielsweise einer durch die rollbedingte Verzerrung bedingte Fehlangabe über die Position eines Objekts in der Umgebung des Kraftfahrzeugs oder des Verlaufs oder der Breite einer Fahrspur, anhand des beispielsweise durch Messung der Federwege an den Federbeinen des Kraftfahrzeugs oder durch Messung der Abstände zwischen Fahrzeugunterboden und Fahrbahnoberfläche im Bereich der Radaufhängungen genau bestimmbaren Rollwinkels rechnerisch zu kompensieren. Dabei ist grundsätzlich denkbar, den Rollwinkel bei bekanntem Nickwinkel anhand des vom bildgebenden Sensor erfassten Verlaufs der Fahrbahn unter der Annahme einer ebenen Fahrbahn zu bestimmen, wobei diese Variante insbesondere bei einer gewölbten Fahrbahn fehlerbehaftet ist. Diese Fehlerquelle wird umgangen, indem beispielsweise die selben Sensoren wie zur Bestimmung des Nickwinkels zu einer vom bildgebenden Sensor unabhängigen Bestimmung des Rollwinkels verwendet werden.A advantageous embodiment of the invention provides that in addition to, or instead of the means for detecting the pitch angle, preferably from imaging sensor independent Means for detecting the roll angle of the motor vehicle with the evaluation device connected to improve the function of the driving assistance device through the possibility, Misinformation of the driving assistance device, which on a caused by the rolling of the motor vehicle about its longitudinal axis distortion based on the perspective of the imaging sensor, for example a misstatement due to the roll - related distortion over the Position of an object in the vicinity of the motor vehicle or the Course or the width of a lane, based on the example by measuring the suspension travel on the spring struts of the motor vehicle or by measuring the distances between vehicle underbody and road surface in the area of the wheel suspensions precisely calculated roll angle computationally compensate. It is in principle conceivable, the roll angle with a known pitch angle on the basis of imaging sensor detected course of the road under the assumption to determine a flat roadway, this variant in particular at a vaulted Road is faulty. This source of error is bypassed by for example, the same sensors as for the determination of the pitch angle to an independent of the imaging sensor determination of the roll angle be used.
Die Kenntnis der aktuellen Nick- und/oder Rollwinkel eines Kraftfahrzeugs und deren dynamische Änderungen trägt wesentlich zur Verbesserung, insbesondere im Hinblick auf die Ausfallsicherheit und Verfügbarkeit von umgebungserfassenden Fahrassistenzvorrichtungen bei. Der Vorteil resultiert dabei unter anderem auf der Möglichkeit, beispielsweise Suchfenster zur Fahrspurerkennung oder bei der Erfassung, Lokalisierung oder der Erkennung von Objekten im sich ständig verändernden Umfeld eines fahrenden Fahrzeugs genauer positionieren zu können. Darüber hinaus kann durch die Kenntnis eines oder beider Winkel die positionsrichtige perspektivische Anzeige von Nachtfahrhilfen, bei denen der weitere, gegebenenfalls auerhalb des Sichtfeldes liegende Straßenverlauf zusammen mit einem Bild der bei der momentanen Beleuchtung tatsächlich sichtbaren Umgebung auf einer Anzeigevorrichtung im Blickfeld des Fahrers angezeigt, oder der außerhalb des Sichtbereichs liegende Straßenverlauf in das Blickfeld des Fahrers, beispielsweise in die Windschutzscheibe, hineingespiegelt wird, verbessert werden.The knowledge of the current pitch and / or roll angle of a motor vehicle and its dynamic changes contributes significantly to the improvement, in particular with regard to the reliability and availability of environment-aware driving assistance devices. Among other things, the advantage results from being able to more accurately position, for example, search windows for lane recognition or for the detection, localization or recognition of objects in the constantly changing environment of a moving vehicle. In addition, by knowing one or both angles, the positionally correct perspective display of night driving aids, in which the further, possibly outside the field of vision road course together with an image of actually visible in the current lighting environment on a display device in the field of view displayed by the driver, or the out-of-sight road is reflected in the field of view of the driver, for example in the windshield, improved.
Eine vorteilhafte Ausgestaltung der Erfindung ist gekennzeichnet durch mit der Auswertevorrichtung verbundene Mittel zur Erfassung des Gierwinkels des Kraftfahrzeugs, zur Verbesserung der Funktion der Fahrassistenzvorrichtung durch die Möglichkeit, Fehlinformationen der Fahrassistenzvorrichtung, welche auf einer durch das Gieren des Kraftfahrzeugs um seine Hochachse verursachten Verzerrung der Perspektive des bildgebenden Sensors basieren, durch genaue Erfassung des Gierwinkels rechnerisch zu kompensieren. Eine Erfassung des Gierwinkels ist beispielsweise durch einen Querbeschleunigungssensor in Verbindung mit einem Lenkwinkelsensor sowie beispielsweise den bei Antiblockiervorrichtungen oder Antriebs-Schlupfregelungen ohnehin notwendigen Raddrehgebern möglich.A advantageous embodiment of the invention is characterized by means connected to the evaluation device for detecting the Yaw angle of the motor vehicle, to improve the function of Driving assistance device by the possibility of misinformation the driving assistance device, which on one by yawing of the motor vehicle caused about its vertical axis distortion of the Perspective of the imaging sensor based, by accurate detection of the yaw angle computationally compensate. A capture of the Yaw angle is, for example, by a lateral acceleration sensor in conjunction with a steering angle sensor and, for example, the Necessary anyway with anti-lock devices or drive slip controls Wheel encoders possible.
Eine vorteilhafte Ausgestaltung der Erfindung sieht vor, dass die Mittel zur Erfassung des Nick- und/oder Rollwinkels mindestens im Bereich von drei Rädern des Kraftfahrzeugs angeordnete Abstandsensoren zur Messung des Abstandes zwischen dem Unterboden des Kraftfahrzeugs und der Fahrbahnoberfläche umfassen, wobei anhand des Radstandes und der Spurweite des Kraftfahrzeuges aus den Abstandsdaten der Abstandssensoren jeweils Nick- und Rollwinkel bestimmbar ist.A advantageous embodiment of the invention provides that the means for detecting the pitch and / or roll angle at least in the range of three wheels the motor vehicle arranged distance sensors for measuring the distance between the underbody of the motor vehicle and the road surface, being based on the wheelbase and the gauge of the motor vehicle the distance data of the distance sensors each pitch and roll angle is determinable.
Eine andere vorteilhafte Ausgestaltung der Erfindung sieht vor, dass die Mittel zur Erfassung des Nick- und/oder Rollwinkels mindestens an drei Federbeinen des Kraftfahrzeugs angeordnete Federwegsensoren sind, wobei anhand des Radstandes und der Spurweite des Kraftfahrzeuges aus den gemessenen Federwegen der Federwegsensoren jeweils Nick- und Rollwinkel bestimmbar sind.Another advantageous embodiment of the invention provides that the means for detecting the pitch and / or roll angle at least three spring struts of the motor vehicle arranged spring travel sensors are, based on the wheelbase and the track of the motor vehicle from the measured spring travel of the travel sensors each pitch u and roll angle can be determined.
Eine andere vorteilhafte Ausgestaltung der Erfindung sieht vor, dass der bildgebende Sensor die Kamera eines Nachtsichtgeräts ist, wobei bei mehreren bildegebenden Sensoren zumindest ein bildgebender Sensor die Kamera eines Nachtsichtgeräts ist.A Another advantageous embodiment of the invention provides that the imaging sensor is the camera of a night vision device, wherein in a plurality of imaging sensors at least one imaging Sensor is the camera of a night vision device.
Eine zusätzliche, vorteilhafte Ausgestaltung der Erfindung sieht vor, dass der bildgebende Sensor ein im für das menschliche Auge sichtbaren Teil des Lichts arbeitender, die Umgebung des Kraftfahrzeugs erfassender Sensor, vorzugsweise eine Videokamera ist.A additional advantageous embodiment of the invention provides that the imaging Sensor in for the human eye visible part of the light working, the Environment of the motor vehicle sensing sensor, preferably a Video camera is.
Eine besonders vorteilhafte Ausgestaltung der Erfindung sieht vor, dass die Fahrassistenzvorrichtung zusätzlich ein Navigationsgerät sowie eine Bildwiedergabevorrichtung umfasst, zur Vorhersage oder Anzeige des weiteren, außerhalb des Sichtfeldes des Fahrers liegenden Straßenverlaufs, wobei mit Hilfe der Nick- und Rollwinkelinformation eine verbesserte, positionsrichtige Anzeige des weiteren Straßenverlaufs und der von dem bildgebenden Sensor erfassten Umgebung und/oder eine verbesserte, positionsrichtige perspektivischen Anzeige von Richtungshinweisen auf der Bildwiedergabevorrichtung möglich ist. Insbesondere in Verbindung mit einem Navigationsgerät können zusätzlich beispielsweise Fahrspurinformationen oder Informationen aus Kartensystemen verwendet werden, um eine perspektivisch richtige Darstellung von Umgebungsinformationen auf einer Bildwiedergabevorrichtung zu erhalten. Darüber hinaus ist es denkbar, auch Informationen einer Fahrassistenzvorrichtung zur Fahrspurerkennung zur Unterstützung einer perspektivisch richtigen Anzeige auf einer Bildwiedergabevorrichtung zu verwenden.A Particularly advantageous embodiment of the invention provides that the driving assistance device in addition a navigation device and a picture reproduction apparatus for predicting or Display further, outside the field of view of the driver lying road course, with help the pitch and roll angle information an improved, correct position Display of the further course of the road and the environment detected by the imaging sensor and / or an improved, positionally correct perspective view of Directional indications on the image display device is possible. In particular, in connection with a navigation device, for example, lane information may additionally be provided or information from map systems used to create a Perspectively correct representation of environmental information an image display device to obtain. In addition, it is conceivable also information of a driving assistance device for lane detection for support a perspective correct display on an image display device to use.
Eine andere, besonders vorteilhafte Ausgestaltung der Erfindung sieht vor, dass die Fahrassistenzvorrichtung zusätzlich mindestens einen abstandsgebenden Sensor, beispielsweise einen RADAR-, LIDAR- oder Ultraschall-Sensor zur Bestimmung des Abstandes und gegebenenfalls der Richtung zu einem Objekt in der Umgebung des Kraftfahrzeugs umfasst. Dabei lassen sich in der Umgebung des Kraftfahrzeugs erfasste Objekte und Hindernisse perspektivisch richtig und positionsrichtig auf einer gegebenenfalls vorhandenen Bildwiedergabevorrichtung darstellen.A another, particularly advantageous embodiment of the invention sees before that the driving assistance device additionally at least one distance-giving Sensor, for example a RADAR, LIDAR or ultrasonic sensor for determining the distance and optionally the direction an object in the environment of the motor vehicle. Let it go in the vicinity of the motor vehicle detected objects and obstacles in perspective correctly and in the correct position on a possibly existing one Display image display device.
Eine vorteilhafte Ausgestaltung der Erfindung sieht vor, dass zusätzlich, insbesondere zur Zurverfügungstellung von Vergleichs- und Redundanzwerten, eine modellbasierte Berechnung des Roll- und/oder Nickwinkels zur Verbesserung der Roll- und/oder Nickwinkelbestimmung und der Verfügbarkeit von Roll- und/oder Nickwinkel erfolgt. Eine modellbasierte Bestimmung des Roll- und/oder Nickwinkels kann beispielsweise durch eine Erfassung der Roll- und/oder Nickrate erfolgen. Dabei sind der Roll- und/oder der Nickwinkel durch Integration der Roll- und/oder Nickraten über der Zeit bestimmbar. Hierzu kann beispielsweise ein Modell des Kraftfahrzeugs mit jeweils einem Freiheitsgrad für den Roll- und den Nickwinkel verwendet werden, bei dem Aufbaufedern, Stabilisatoren und Dämpfer in rotatorische Federsteifigkeiten und Dämpfungen umgerechnet, und mit den entsprechenden Trägheitsmomenten verknüpft sind. Durch einen Vergleich der Roll- und Nickwinkel aus der Federwegmessung mit denen auf der modellbasierten Berechnung wird die Genauigkeit der verfügbaren Roll- und Nickwinkel erhöht. Die parallel verlaufenden Verfahren der Federwegmessung und der modellbasierten Berechnung bieten darüber hinauf eine erhöhte Ausfallsicherheit durch Redundanz.A advantageous embodiment of the invention provides that in addition, in particular for the provision of comparison and redundancy values, a model-based calculation the roll and / or pitch angle to improve the roll and / or pitch angle determination and availability of rolling and / or Nick angle takes place. A model-based determination of roll and / or Nickwinkels can for example by detecting the rolling and / or Pitch rate. Here are the roll and / or the pitch angle by integration of the roll and / or Nick rates over determinable over time. For this purpose, for example, a model of the motor vehicle each with one degree of freedom for the roll and the pitch angle used in the construction springs, stabilizers and dampers in rotatory spring stiffness and damping converted, and with the corresponding moments of inertia connected are. By comparing the roll and pitch angles from the spring travel measurement with those on the model-based calculation, the accuracy the available Roll and pitch angle increased. The parallel method of suspension travel and the Model-based computations provide a higher level of fail-safety Redundancy.
Kurzbeschreibung der Zeichnung, in der zeigen:Brief description of the drawing, in the show:
Wege zur Ausführung der Erfindung:Ways to execute the Invention:
Eine
in
In
Zur
Erfassung von Nick-
In
den nachfolgenden Gleichungen sind der Nickwinkel
Generell
verläuft
dabei die Erfassung des Nickwinkels bei einem Kraftfahrzeug
Es
ist darüber
hinaus denkbar, die gemessenen Federwege zusätzlich in eine modellbasierte Aufbereitung
des Nick-
Der
Kern der Erfindung ist, vom bildgebenden Sensor unabhängig ermittelte
Nick-
- – Verfügbarkeit
von Nick-
5 und Rollwinkel9 , wenn diese beispielsweise bei fehlenden Fahrbahnmarkierungen nicht mit Hilfe des bildgebenden Sensors beobachtet werden können, - – Stützung der
Fahrapurerkennung mit den berechneten Nick-
5 und Rollwinkeln9 durch Fusion, beispielsweise in einem Kalman Filter durch Hinzufügung der tatsächlich gemessenen Winkel, - – Stabilisierung
der Bilder in der Darstellung und für die Weiterverarbeitung durch
Kompensation der Nick- und Rollbewegung des Kraftfahrzeugs
2 , - – Verbesserte perspektivische Darstellung von Hilfslinien und Markierungen bei Nachtsichtgeräten, Nachtfahrhilfen, Einparkhilfen und dergleichen mit Bildwiedergabevorrichtung, beispielsweise einer Horizontlinie oder einer Fahrbahnmarkierung,
- – Verbesserte perspektivische Darstellung von erkannten Objekten und Hindernissen in der Umgebung des Kraftfahrzeugs auf einer Bildwiedergabevorrichtung,
- – Anpassung
der Suchbereiche für
Fahrspur- und Objekterkennung durch die präzisen Informationen über die
tatsächlichen
Nick-
5 und Rollwinkel9 .
- - availability of pitch
5 and roll angle9 if, for example, they can not be observed with the aid of the imaging sensor in the case of missing lane markings, - - support of the tracker recognition with the calculated pitch
5 and roll angles9 by fusion, for example in a Kalman filter by adding the actually measured angles, - - Stabilization of the images in the representation and for further processing by compensating the pitch and roll movement of the motor vehicle
2 . - Improved perspective representation of auxiliary lines and markings in night vision devices, night driving aids, parking aids and the like with image reproduction device, for example a horizon line or a lane marking,
- Improved perspective view of detected objects and obstacles in the vicinity of the motor vehicle on a picture display device,
- - adaptation of the search areas for lane and object recognition by the precise information about the actual pitch
5 and roll angle9 ,
Gewerbliche Anwendbarkeit:Industrial Applicability:
Die Erfindung ist insbesondere im Bereich der Herstellung von Kraftfahrzeugen und von Fahrassistenzvorrichtungen für Kraftfahrzeuge gewerblich einsetzbar.The Invention is particularly in the field of production of motor vehicles and of driver assistance devices for motor vehicles commercially used.
Claims (10)
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102004051527A DE102004051527A1 (en) | 2004-10-21 | 2004-10-21 | Driving assistance device for e.g. truck, has evaluating device connected to image sensor e.g. video camera, and medium connected to evaluating device for detecting pitch angles and rolling angles of motor vehicle independent of sensor |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102004051527A DE102004051527A1 (en) | 2004-10-21 | 2004-10-21 | Driving assistance device for e.g. truck, has evaluating device connected to image sensor e.g. video camera, and medium connected to evaluating device for detecting pitch angles and rolling angles of motor vehicle independent of sensor |
Publications (1)
Publication Number | Publication Date |
---|---|
DE102004051527A1 true DE102004051527A1 (en) | 2006-06-01 |
Family
ID=36371079
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
DE102004051527A Withdrawn DE102004051527A1 (en) | 2004-10-21 | 2004-10-21 | Driving assistance device for e.g. truck, has evaluating device connected to image sensor e.g. video camera, and medium connected to evaluating device for detecting pitch angles and rolling angles of motor vehicle independent of sensor |
Country Status (1)
Country | Link |
---|---|
DE (1) | DE102004051527A1 (en) |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102009007842A1 (en) * | 2009-02-06 | 2010-08-12 | Adc Automotive Distance Control Systems Gmbh | Method and device for operating a video-based driver assistance system in a vehicle |
ES2363962A1 (en) * | 2008-12-18 | 2011-08-22 | Fundación Para La Promoción De La Innovación, Investigación Y Desarrollo Tecnológico En La Industria De Automoción De Galicia | System of acquisition of images for applications of assistance to the driving of automobile vehicles automatically adaptable in function of the environment of driving and the own vehicle. (Machine-translation by Google Translate, not legally binding) |
DE102017220139A1 (en) * | 2017-11-13 | 2019-05-16 | Robert Bosch Gmbh | Method and device for providing a position of at least one object |
DE102018216547A1 (en) * | 2018-09-27 | 2020-04-02 | Zf Friedrichshafen Ag | Image processing |
CN111325980A (en) * | 2020-02-28 | 2020-06-23 | 浙江吉利汽车研究院有限公司 | Driving method, system and device based on road condition monitoring |
CN115900636A (en) * | 2021-08-23 | 2023-04-04 | 中国航天科工飞航技术研究院(中国航天海鹰机电技术研究院) | Suspension sledge attitude measurement device and method |
DE102022120241A1 (en) | 2022-08-11 | 2024-02-22 | Bayerische Motoren Werke Aktiengesellschaft | Control device for a motor vehicle |
DE102012221188B4 (en) | 2012-11-20 | 2024-07-11 | Robert Bosch Gmbh | device, vehicle |
-
2004
- 2004-10-21 DE DE102004051527A patent/DE102004051527A1/en not_active Withdrawn
Cited By (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
ES2363962A1 (en) * | 2008-12-18 | 2011-08-22 | Fundación Para La Promoción De La Innovación, Investigación Y Desarrollo Tecnológico En La Industria De Automoción De Galicia | System of acquisition of images for applications of assistance to the driving of automobile vehicles automatically adaptable in function of the environment of driving and the own vehicle. (Machine-translation by Google Translate, not legally binding) |
DE102009007842A1 (en) * | 2009-02-06 | 2010-08-12 | Adc Automotive Distance Control Systems Gmbh | Method and device for operating a video-based driver assistance system in a vehicle |
DE102012221188B4 (en) | 2012-11-20 | 2024-07-11 | Robert Bosch Gmbh | device, vehicle |
DE102017220139A1 (en) * | 2017-11-13 | 2019-05-16 | Robert Bosch Gmbh | Method and device for providing a position of at least one object |
US11250695B2 (en) | 2017-11-13 | 2022-02-15 | Robert Bosch Gmbh | Method and device for providing a position of at least one object |
DE102018216547A1 (en) * | 2018-09-27 | 2020-04-02 | Zf Friedrichshafen Ag | Image processing |
CN111325980A (en) * | 2020-02-28 | 2020-06-23 | 浙江吉利汽车研究院有限公司 | Driving method, system and device based on road condition monitoring |
CN115900636A (en) * | 2021-08-23 | 2023-04-04 | 中国航天科工飞航技术研究院(中国航天海鹰机电技术研究院) | Suspension sledge attitude measurement device and method |
DE102022120241A1 (en) | 2022-08-11 | 2024-02-22 | Bayerische Motoren Werke Aktiengesellschaft | Control device for a motor vehicle |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
DE102008026397B4 (en) | Radar, lidar, and camera-assisted vehicle dynamics estimation methods | |
DE102013209575B4 (en) | METHOD OF CONTROLLING A VEHICLE | |
DE102004006133B4 (en) | Device for headlight range adjustment of a motor vehicle | |
DE102017116467A1 (en) | Vehicle travel control apparatus | |
DE102005009814B4 (en) | Vehicle condition detection system and method | |
DE112014007241T5 (en) | Collision Risk Calculator, Collision Risk Indicator and Vehicle Body Controller | |
WO2010083971A1 (en) | Method for determining a road profile of a lane located in front of a vehicle | |
DE102006026937A1 (en) | Method for controlling a system of a vehicle | |
DE102016000209A1 (en) | A control system and method for determining a pavement irregularity | |
DE102009016562A1 (en) | Method for identifying objects in periphery of vehicle, involves recording image of periphery of vehicle at vehicle position, and another image of periphery of vehicle at another vehicle position by camera arranged on vehicle | |
DE102006018978A1 (en) | Motor vehicle roll angle determining method, involves determining yaw rate or correlated size, and vehicle speed, and determining roll angle of motor vehicle using yaw rate or correlated size and specific vehicle roll spring rigidity | |
EP4090570B1 (en) | Method for determining the current angle of lateral inclination of a roadway | |
DE10336986A1 (en) | Method for avoiding collisions of a vehicle | |
DE102017222017A1 (en) | Method and system for determining and providing a soil profile | |
WO2017129199A1 (en) | Method for determining a tilting state of a vehicle, and computer program | |
DE102016217637A1 (en) | Odometry method for determining a position of a motor vehicle, control device and motor vehicle | |
DE102016225351A1 (en) | Method for determining an interaction of a wheel of a motor vehicle with a roadway and control device and motor vehicle | |
DE102014016121A1 (en) | Method for determining a height profile of a roadway and method for determining a vehicle position | |
DE102008025773A1 (en) | Local and movement conditions estimating method for observed object i.e. vehicle, involves determining distance, detecting shifting of portion of object, and estimating parameter of local and movement condition | |
DE102017205973A1 (en) | Method for determining an offset contained in a yaw rate signal of a yaw rate sensor of a motor vehicle and control device and motor vehicle | |
DE102015002601A1 (en) | Method for detecting a slope of a roadway | |
WO2017067914A1 (en) | Method for correcting an incorrect orientation of an optical sensor of a motor vehicle, computing device, driver assistance system, and motor vehicle | |
DE102010049216A1 (en) | Method for operating camera i.e. stereo camera, arranged at car, involves detecting distance of object via image evaluation, and calibrating camera when distance determined by sensing unit deviates from distance determined by evaluation | |
DE102004051527A1 (en) | Driving assistance device for e.g. truck, has evaluating device connected to image sensor e.g. video camera, and medium connected to evaluating device for detecting pitch angles and rolling angles of motor vehicle independent of sensor | |
DE102018213378B4 (en) | Driver assistance system for a vehicle, vehicle with the same and driver assistance method for a vehicle |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
OR8 | Request for search as to paragraph 43 lit. 1 sentence 1 patent law | ||
8127 | New person/name/address of the applicant |
Owner name: DAIMLERCHRYSLER AG, 70327 STUTTGART, DE |
|
8105 | Search report available | ||
8127 | New person/name/address of the applicant |
Owner name: DAIMLER AG, 70327 STUTTGART, DE |
|
R119 | Application deemed withdrawn, or ip right lapsed, due to non-payment of renewal fee |
Effective date: 20110502 |