[go: up one dir, main page]

DE102019008076A1 - Verfahren zum Ermitteln eines in einem Kraftfahrzeug eingestellten Lenkwinkels - Google Patents

Verfahren zum Ermitteln eines in einem Kraftfahrzeug eingestellten Lenkwinkels Download PDF

Info

Publication number
DE102019008076A1
DE102019008076A1 DE102019008076.9A DE102019008076A DE102019008076A1 DE 102019008076 A1 DE102019008076 A1 DE 102019008076A1 DE 102019008076 A DE102019008076 A DE 102019008076A DE 102019008076 A1 DE102019008076 A1 DE 102019008076A1
Authority
DE
Germany
Prior art keywords
motor vehicle
wheel
steering angle
front wheel
determining
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
DE102019008076.9A
Other languages
English (en)
Inventor
Tobias Zolg
Christian Schneider
Jürgen Römer
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mercedes Benz Group AG
Original Assignee
Daimler AG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Daimler AG filed Critical Daimler AG
Priority to DE102019008076.9A priority Critical patent/DE102019008076A1/de
Publication of DE102019008076A1 publication Critical patent/DE102019008076A1/de
Withdrawn legal-status Critical Current

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B62LAND VEHICLES FOR TRAVELLING OTHERWISE THAN ON RAILS
    • B62DMOTOR VEHICLES; TRAILERS
    • B62D15/00Steering not otherwise provided for
    • B62D15/02Steering position indicators ; Steering position determination; Steering aids
    • B62D15/021Determination of steering angle
    • B62D15/0245Means or methods for determination of the central position of the steering system, e.g. straight ahead position

Landscapes

  • Engineering & Computer Science (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Steering Control In Accordance With Driving Conditions (AREA)
  • Image Analysis (AREA)

Abstract

Die Erfindung betrifft ein Verfahren zum Ermitteln eines in einem Kraftfahrzeug (1) eingestellten Lenkwinkels (11). Gemäß dem Verfahren wird ein Bild eines Umfelds um ein Rad (2), vorzugsweise ein Vorderrad (3), mittels einer am Kraftfahrzeug (1) vorgesehenen Kamera (9) erfasst. Anschließend werden ein äußerer Umrisses (2c) eines Reifens (2a) des Rades (2), vorzugsweise des Vorderrades (3), und ein äußeren Umriss (2d) einer Felge (2b) des Rades (2), vorzugsweise des Vorderrades (3), im erfassten Bild erkannt. Weiterhin werden ellipsenförmige Konturen der beiden Umrisse (2c, 2d) im erfassten Bild identifiziert. Gemäß dem Verfahren wird dann der Lenkwinkel (11) in Abhängigkeit von den identifizierten ellipsenförmigen Konturen ermittelt.

Description

  • Die Erfindung betrifft ein Verfahren zum Ermitteln eines in einem Kraftfahrzeug eingestellten Lenkwinkels sowie ein Kraftfahrzeug, das zur Durchführung dieses Verfahrens eingerichtet ist.
  • Die Qualität der Eigenlokalisierung bei Parkvorgängen von Kraftfahrzeugen und somit die Park-Performance des Kraftfahrzeugs hängen unter anderem im hohem Maße von der Ermittlung eines in einem lenkbaren Rad, vorzugsweise Vorderrad, eingestellten Lenkwinkels ab. Aufgrund von Fertigungstoleranzen in einem Lenkstrang, einer vorhandenen Trägheit in einem Lenkgestänge bei dynamischen Lastwechseln sowie aufgrund von Sensor-Ungenauigkeiten, beispielsweise hervorgerufen durch Drifteffekte, erfolgt die Ermittlung eines solchen Lenkwinkels bei herkömmlichen Verfahren zur Lenkwinkel-Bestimmung jedoch oftmals relativ unpräzise.
  • Herkömmliche Verfahren zum Ermitteln eines besagten Lenkwinkels berechnen einen solchen Lenkwinkel beispielsweise durch Vergleich von einzelnen Radgeschwindigkeiten. Solche Verfahren stoßen jedoch an ihre Grenzen, wenn ein Kraftfahrzeug still steht, sich nur langsam fortbewegt oder wenn ein Rad des Kraftfahrzeugs einem Schlupf unterliegt. Außerdem ist dabei die Erkennung einer möglichen Fehlstellung eines einzelnen Rades bezüglich einer jeweiligen Achse nicht möglich. Auf einer Gierraten-Messung oder einer Querbeschleunigung basierende Verfahren zur Lenkwinkelermittlung sind hingegen nur in einem bestimmten Kennfeld anwendbar und benötigen zur Durchführung mindestens zwei unabhängige Sensoren.
  • Es ist daher eine Aufgabe der vorliegenden Erfindung, ein verbessertes oder zumindest alternatives Verfahren zum Ermitteln eines in einem Kraftfahrzeug eingestellten Lenkwinkels zu schaffen, welches der oben genannten Problematik Rechnung trägt.
  • Diese Aufgabe wird erfindungsgemäß durch den Gegenstand der unabhängigen Patentansprüche gelöst. Vorteilhafte Ausführungsformen sind Gegenstand der abhängigen Patentansprüche.
  • Grundidee der Erfindung ist demnach, mittels einer an einem Kraftfahrzeug vorgesehenen Kamera ein Rad, vorzugsweise ein Vorderrad, des Kraftfahrzeugs bildlich zu erfassen und durch Auswertung einer im erzeugten Bild ellipsenförmig erscheinenden Kontur des Rads auf einen tatsächlichen im Kraftfahrzeug eingestellten Lenkwinkel zu schließen. Auf diese Weise kann der im Kraftfahrzeug eingestellte Lenkwinkel besonders präzise und insbesondere unabhängig von einem zweiten Rad bestimmt werden. Somit ist auch eine Fehstellung eines einzelnen Rades erkennbar.
  • Das erfindungsgemäße Verfahren dient zum Ermitteln eines in einem Kraftfahrzeug eingestellten Lenkwinkels. Gemäß dem Verfahren wird ein Bild eines Umfelds um ein Rad, vorzugsweise ein Vorderrad, des Kraftfahrzeugs mittels einer am Kraftfahrzeug vorgesehenen Kamera erfasst. Anschließend werden ein äußerer Umriss eines Reifens des Rads, vorzugsweise des Vorderrades, und ein äußerer Umriss einer Felge des Rades, vorzugsweise des Vorderrades, im erfassten Bild erkannt. Weiterhin wird eine ellipsenförmige Kontur der beiden Umrisse im erfassten Bild identifiziert. Gemäß dem erfindungsgemäßen Verfahren wird dann der Lenkwinkel in Abhängigkeit von diesen identifizierten ellipsenförmigen Konturen ermittelt.
  • Gemäß einer bevorzugten Ausführungsform des Verfahrens werden die ellipsenförmigen Konturen anhand markanter Punkte der beiden erkannten Umrisse identifiziert. Dabei umfassen die markanten Punkte jeweils einen oberen und unteren Austrittspunkt der beiden Umrisse aus einem um das Rad angeordneten Radkasten des Kraftfahrzeugs und jeweils Punkte maximaler Auslenkung der beiden Umrisse.
  • Die Erfindung betrifft ferner ein Kraftfahrzeug mit einer Kamera zum Erfassen eines Umfelds eines Rades, vorzugsweise des Vorderrades, des Kraftfahrzeugs und mit einer Steuerungs-/Regelungseinrichtung, welche zum Durchführen des erfindungsgemäßen Verfahrens eingerichtet bzw. programmiert ist.
  • Weitere wichtige Merkmale und Vorteile der Erfindung ergeben sich aus den Unteransprüchen, aus der Zeichnung und aus der zugehörigen Figurenbeschreibung anhand der Zeichnung.
  • Ein bevorzugtes Ausführungsbeispiel der Erfindung ist in der Zeichnung dargestellt und wird in der nachfolgenden Beschreibung näher erläutert.
  • Es versteht sich, dass die vorstehend genannten und die nachstehend noch zu erläuternden Merkmale nicht nur in der jeweils angegebenen Kombination, sondern auch in anderen Kombination oder in Alleinstellung verwendbar sind, ohne den Rahmen der vorliegenden Erfindung zu verlassen.
  • Die einzige 1 zeigt ein Beispiel eines erfindungsgemäßen Kraftfahrzeugs 1. Das Kraftfahrzeug 1 umfasst eine Steuerungs-/Regelungseinrichtung 10, welche zur Durchführung des erfindungsgemäßen Verfahrens eingerichtet bzw. programmiert ist. Ferner umfasst das Kraftfahrzeug 1 vier Räder 2, jeweils mit einem Reifen 2a und mit einer Felge 2b, von welchen in 1 nur das linke Vorderrad 3 gezeigt ist. Das linke Vorderrad 3 ist dabei in einem Radkasten 7 des Kraftfahrzeugs 1 angeordnet. Das Kraftfahrzeug 1 weist außerdem eine Kamera 9 zum Erfassen eines Umfelds des Kraftfahrzeugs 1 auf. Ein Kamerasensor 12 der Kamera 9 erzeugt im Betrieb ein Bild dieses Umfelds, auf welchem auch der Bereich des Kraftfahrzeug 1 um das Vorderrad 3 enthalten ist. Die Kamera 9 kann serienmäßig im Kraftfahrzeug - z.B. als Kamera für ein Park-Assistenzsystem - verbaut sein. Im Beispiel der 1 ist die Kamera 9 an einem linken Seitenspiegel 8 des Kraftfahrzeugs 1 angeordnet. Denkbar ist ebenso, dass an einem rechten Seitenspiegel (nicht gezeigt) des Kraftfahrzeugs 1 eine weitere Kamera zum Erfassen des rechten Vorderrads vorgesehen ist. Denkbar ist aber auch das am Kraftfahrzeug eine Kamera zum Erfassen eines Hinterrades des Kraftfahrzeugs vorgesehen ist.
  • Im Folgenden wird das erfindungsgemäße Verfahren am Beispiel der 1 erläutert:
    • Gemäß dem Verfahren wird das Umfeld um das linke Vorderrad 3 von der Kamera 9 erfasst und mithilfe dessen Kamerasensors 12 ein Bild des Umfelds erzeugt.
  • Anschließend wird das erfasste Bild mittels der Steuerungs-/Regelungseinrichtung 10 ausgewertet, so dass der Radkasten 7 und das linke Vorderrad 3 mit dem Reifen 2a und mit der Felge 2b im Bild identifiziert werden. Insbesondere werden im erfassten Bild ein äußerer Umriss 2c des Reifens 2a und ein äußerer Umriss 2d der Felge 2b erkannt. Dabei kann die Ausrichtung der Kamera 9 relativ zu dem Vorderrad 3 zur Folge haben, dass die tatsächlich kreisförmigen Umrisse 2c und 2d auf dem Kamerasensor 12 und somit auf dem vom Kamerasensor 12 erzeugten Bild eine ellipsenförmige Kontur aufweisen.
  • Anschließend werden markante Punkte dieser ellipsenförmigen Kontur im erfassten Bild identifiziert und ausgewählt. Vorliegend sind unter markanten Punkten solche zu verstehen, welche aufgrund eines Farb-, Helligkeits-, oder Strukturkontrasts etc. im Bereich eines solchen markanten Punkts, im erfassten Bild zu identifizieren sind.
  • Gemäß dem vorliegenden Beispiel wird im erfassten Bild - als Teil der ellipsenförmige Kontur - ein oberer Reifenaustrittspunkt 4a ermittelt, welcher einen Schnittpunkt des - im Bild elliptischen - Umrisses 2c des Reifens 2a mit dem Radkasten 7 in einem oberen Bereich des Vorderades 3 darstellt. Analog wird ein unterer Reifenaustrittspunkt 4b ermittelt, welcher einen Schnittpunkt des Umrisses 2c des Reifens 2a mit dem Radkasten 7 in einem unteren Bereich des Vorderades 3 darstellt. Ebenso wird ein oberer und unterer Felgenaustrittspunkt 5a, 5b ermittelt, welcher einen Schnittpunkt eines Umrisses 2d der Felge 2b mit dem Radkasten 7 in einem oberen bzw. unteren Bereich des Vorderades 3 darstellt.
  • Außerdem kann ein Punkt maximaler Reifen- oder Felgenauslenkung 6a, 6b ermittelt werden, welche Punkte auf dem elliptischen Umriss 2c des Reifens 2a bzw. auf dem Umriss 2d der Felge 2b darstellen, die entlang einer horizontalen Erstreckungsrichtung des Kraftfahrzeugs 1 einen maximalen Abstand zum Radkasten 7 aufweisen. Denkbar ist aber auch, dass die Punkte maximaler Reifen- und Felgenauslenkung 6a, 6b Punkte auf dem Umriss 2c des Reifens 2a bzw. auf dem Umriss 2d der Felge 2b darstellen, welche entlang einer vertikalen Erstreckungsrichtung des Kraftfahrzeugs 1 im Fahrbetrieb in der Mitte des Reifens 2a bzw. in der Mitte der Felge 2b angeordnet sind.
  • Anschließend wird anhand zumindest eines Teils der ermittelten markanten Punkte mit Hilfe der Steuerungs-/Regelungseinrichtung 10 unter Verwendung eines geeigneten Kurvenanpassungs-Algorithmus („curve fitting“) eine Ellipsenkurve an den Umriss 2c und, alternativ oder zusätzlich, an den Umriss 2d angepasst. Mit anderen Worten, an die Positionskoordinaten der ermittelten markanten Punkte im erfassten Bild werden mathematische Modellfunktionen der ellipsenförmigen Konturen angepasst, also „gefittet“, so dass sich Ellipsenkurven derart angepasster Modellfunktionen sich möglichst mit dem Umriss 2c des Reifens 2a bzw. mit dem Umriss 2d der Felge 2b decken.
  • Schließlich wird mit Hilfe der angepassten Ellipsenkurve bzw. der zugehörigen mathematischen Modellfunktion ein tatsächlicher im Kraftfahrzeug 1 eingestellter Lenkwinkel 11 bestimmt.
  • Dabei ist denkbar, dass in einer Datenbank (nicht gezeigt) des Kraftfahrzeugs 1 unterschiedlichen Ellipsenkurven entsprechende Lenkwinkel 11 bzw. den zugehörigen mathematischen Funktionen entsprechende Lenkwinkel 11 hinterlegt sind. Denkbar ist aber auch, dass mit Hilfe der Steuerungs-/Regelungseinrichtung 10 eine Winkel-Modellfunktion an den Lenkwinkel 11 im erfassten Bild zwischen dem Radkasten 7 und dem Umriss 2c des Reifens 2a und, alternativ oder zusätzlich, zwischen dem Radkasten 7 und dem Umriss 2d der Felge 2b angepasst wird, sodass der Lenkwinkel 11 aus einem Winkelparameter der Winkel-Modellfunktion bestimmt wird.

Claims (3)

  1. Verfahren zum Ermitteln eines in einem Kraftfahrzeug (1) eingestellten Lenkwinkels (11), umfassend die folgenden Maßnahmen: a) Erfassen eines Bildes eines Umfelds um ein Rad (2), vorzugsweise ein Vorderrad (3), des Kraftfahrzeugs (1) mittels einer am Kraftfahrzeug (1) vorgesehenen Kamera (9); b) Erkennen eines äußeren Umrisses (2c) eines Reifens (2a) des Rades (2), vorzugsweise des Vorderrades (3), und eines äußeren Umrisses (2d) einer Felge (2b) des Rades (2), vorzugsweise des Vorderrades (3), im erfassten Bild; c) Identifizieren von ellipsenförmigen Konturen der beiden Umrisse (2c, 2d) im erfassten Bild; d) Ermitteln des Lenkwinkels (11) in Abhängigkeit von den in Maßnahme c) identifizierten ellipsenförmigen Konturen.
  2. Verfahren nach Anspruch 1, dadurch gekennzeichnet, dass in Maßnahme c) die ellipsenförmigen Konturen anhand markanter Punkte der beiden Umrisse (2c, 2d) identifiziert wird, wobei die markanten Punkte jeweils einen oberen und unteren Austrittspunkt (4a, 4b, 5a, 5b) der beiden Umrisse (2c, 2d) aus einem Radkasten (7) des Kraftfahrzeugs (1) und jeweils Punkte maximaler Auslenkung (6a, 6b) der beiden Umrisse (2c, 2d) umfassen.
  3. Kraftfahrzeug (1), - mit einer Kamera (9) zum Erfassen eines Umfelds eines Rades (2), vorzugsweise des Vorderrades (3), des Kraftfahrzeugs (1); - mit einer Steuerungs-/Regelungseinrichtung (10), welche zum Durchführen des Verfahrens nach einem der vorhergehenden Ansprüche eingerichtet/programmiert ist.
DE102019008076.9A 2019-11-21 2019-11-21 Verfahren zum Ermitteln eines in einem Kraftfahrzeug eingestellten Lenkwinkels Withdrawn DE102019008076A1 (de)

Priority Applications (1)

Application Number Priority Date Filing Date Title
DE102019008076.9A DE102019008076A1 (de) 2019-11-21 2019-11-21 Verfahren zum Ermitteln eines in einem Kraftfahrzeug eingestellten Lenkwinkels

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
DE102019008076.9A DE102019008076A1 (de) 2019-11-21 2019-11-21 Verfahren zum Ermitteln eines in einem Kraftfahrzeug eingestellten Lenkwinkels

Publications (1)

Publication Number Publication Date
DE102019008076A1 true DE102019008076A1 (de) 2020-08-27

Family

ID=72138705

Family Applications (1)

Application Number Title Priority Date Filing Date
DE102019008076.9A Withdrawn DE102019008076A1 (de) 2019-11-21 2019-11-21 Verfahren zum Ermitteln eines in einem Kraftfahrzeug eingestellten Lenkwinkels

Country Status (1)

Country Link
DE (1) DE102019008076A1 (de)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114771657A (zh) * 2022-06-02 2022-07-22 安徽安凯汽车股份有限公司 一种方向轮转角检测系统
DE102021211326A1 (de) 2021-10-07 2023-04-13 Zf Friedrichshafen Ag Verfahren und Steuereinheit zum Erfassen einer Radstellung mindestens eines Rades eines Fahrzeugs und Fahrzeug
CN116543011A (zh) * 2023-03-31 2023-08-04 小马易行科技(上海)有限公司 基于单个轮胎的航向检测方法、装置、设备及存储介质
DE102022205940A1 (de) 2022-06-13 2023-12-14 Robert Bosch Gesellschaft mit beschränkter Haftung Radlenkwinkelermittlungseinrichtung für ein Kraftfahrzeug, Kraftfahrzeug, Verfahren zum Ermitteln eines Radlenkwinkels eines Kraftfahrzeugs
DE102022119317A1 (de) 2022-06-20 2023-12-21 Continental Automotive Systems, Inc. Strassenrad-winkel-bestimmung basierend auf kameraeingabe

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102021211326A1 (de) 2021-10-07 2023-04-13 Zf Friedrichshafen Ag Verfahren und Steuereinheit zum Erfassen einer Radstellung mindestens eines Rades eines Fahrzeugs und Fahrzeug
CN114771657A (zh) * 2022-06-02 2022-07-22 安徽安凯汽车股份有限公司 一种方向轮转角检测系统
DE102022205940A1 (de) 2022-06-13 2023-12-14 Robert Bosch Gesellschaft mit beschränkter Haftung Radlenkwinkelermittlungseinrichtung für ein Kraftfahrzeug, Kraftfahrzeug, Verfahren zum Ermitteln eines Radlenkwinkels eines Kraftfahrzeugs
DE102022119317A1 (de) 2022-06-20 2023-12-21 Continental Automotive Systems, Inc. Strassenrad-winkel-bestimmung basierend auf kameraeingabe
CN116543011A (zh) * 2023-03-31 2023-08-04 小马易行科技(上海)有限公司 基于单个轮胎的航向检测方法、装置、设备及存储介质

Similar Documents

Publication Publication Date Title
DE102019008076A1 (de) Verfahren zum Ermitteln eines in einem Kraftfahrzeug eingestellten Lenkwinkels
DE112016002910B4 (de) Spurhaltevorrichtung
DE102010055583B4 (de) Kraftfahrzeug mit einer Kamera und Verfahren zum Betreiben eines Kamerasystems in einem Kraftfahrzeug
EP3351450A1 (de) Verfahren und fahrerassistenzsystem zur ermittlung fahrdynamischer zustände eines nutzfahrzeugs
DE102008001970A1 (de) Verfahren zum Stabilisieren von Fahrbewegungen eines einspurigen Kraftfahrzeugs, unter Nutzung des Neigungswinkels und des Schwimmwinkels sowie Vorrichtung dafür
DE102016005739A1 (de) Verfahren zur Ermittlung der Eigenbewegung eines Fahrzeugs
DE102017109445A1 (de) Kalibration einer Fahrzeug-Kameraeinrichtung in Fahrzeuglängsrichtung oder Fahrzeugquerrichtung
DE102017210410A1 (de) Verfahren und Vorrichtung zur Erzeugung eines Lenkmomenteingriffs in einem Fahrzeug
DE102016220692A1 (de) Verfahren zur Reibwertermittlung und zum Betreiben eines Kraftfahrzeugs
EP3147182A1 (de) Verfahren zum zumindest semi-autonomen manövrieren eines kraftfahrzeugs mit erkennung eines odometriefehlers, recheneinrichtung, fahrerassistenzsystem sowie kraftfahrzeug
DE102018200330A1 (de) Verfahren zur Ermittlung der aktuellen Fahrbahnrauhigkeit in einem Fahrzeug
DE102017119317A1 (de) Klassifizierung von Umgebungs-Fahrzeugen für eine Abstandsregeltempomat-Vorrichtung in einem Kraftfahrzeug
DE102004058523B4 (de) Verfahren zur Durchführung einer Neigungsänderung eines Kraftfahrzeuges
DE102008021533A1 (de) Verfahren zum Betrieb einer Fahrzeugsteuerung in einem Kraftfahrzeug sowie Fahrzeugsteuerung
DE102014019078A1 (de) Verfahren zur Kalibrierung und Verfahren zur Justierung einer an einem Fahrzeug angeordneten Kamera
DE102015006571A1 (de) Vorrichtung und Verfahren zur Ermittlung einer Verwindung einer Karosserie und/oder eines Fahrgestells
DE102006061249A1 (de) Verfahren und Vorrichtung zum Ermitteln einer Reibkennzahl
DE102013211027B4 (de) Verfahren und Vorrichtung zur Bestimmung der Beschaffenheit einer Fahrbahnoberfläche einer von einem Fahrzeug zu befahrenden Fahrspur
DE102009005889A1 (de) Verfahren zum aktiven Einstellen einer Neigung eines Rades eines Kraftwagens, insbesondere von Sturz und Spur, und entsprechende Vorrichtung
DE102018125892A1 (de) Verfahren zur Plausibilisierung einer Querbeschleunigung eines nicht spurgebundenen, zweispurigen Kraftfahrzeugs
DE102019006916A1 (de) Verfahren zum Betrieb eines Fahrzeugs
DE102010048143A1 (de) Verfahren zur Kalibrierung zumindest einer an einem Fahrzeug angeordneten Kamera
DE102016104944A1 (de) Verfahren zum Durchführen einer Wankstabilisierung eines Fahrzeuges
DE112016005072T5 (de) Verfahren und System zur Erleichterung des Lenkens eines Fahrzeugs beim Fahren entlang einer Strasse
EP1588910A1 (de) Verfahren zur Analyse und Regelung der Fahrdynamik eines Kraftfahrzeugs sowie Kraftfahrzeug zur Durchführung des Verfahrens

Legal Events

Date Code Title Description
R230 Request for early publication
R081 Change of applicant/patentee

Owner name: DAIMLER AG, DE

Free format text: FORMER OWNER: DAIMLER AG, 70327 STUTTGART, DE

R119 Application deemed withdrawn, or ip right lapsed, due to non-payment of renewal fee